[TIL] 1014 Life of software engineer

---

Today I Learnt 

 

1014 

 

Like yesterday today, I will continue to study on web crawling. 

My plan is to make two crawers and compare the difference and performance. 

Recently its been too busy with all the school works and this , stopped studying algorithms.
Maybe I will do it next month after this semester is done.

Some people asked why I'm writing this in English because... hmm  I don't know because i can?

The main reason of keeping TIL is to record what I have done but also I will come back here to fresh up my memories and check the links and youtube videos cuz i have dumm ass brain always forgetting stuff 

 

 

 

 

 

 

RSS로 크롤링을 할 때 해당 RSS의 주소를 알고 있어야 한다.

그럼...  여러 블로그를 rss 리더로 읽고 싶으면 블로그들의 rss의 주소를 다 알고 잇어야 된다는 것 같다.

rss가 그냥 보통 크롤러 / naver serach craweler보다 좋은 점이 뭐가 잇을까?

 

 

 Node js 제일 많이 쓰는 crawler library가 뭘까?

 

오 이 사이트에서 서로 다른 npm packages를 비교해준다.

node scrappy 빼고는  4년 전이 업데이트면 다른 건 이제 지원이 안 되는 건가? 

아직 rss를 이용한 크롤러를 만드니깐 이 npm 패키지는 좀 더 찾아봐야겠다.

 

https://npmcompare.com/compare/crawler-request, crawler-url-parser, node-scrapy

Comparing crawler-request vs. crawler-url-parser vs. node-scrapy

 

mongo db가 이상해졌다.

원래 하는 식으로 연결을 하려고 했는데 안됐다. 

왜 안되는지 찾아봐야겠다. 멍 때리다가 에러 메시지 읽고 찾아냈다. 에러 메시지를 꼼꼼히 잘 읽어보자.

 

 

회사 깃 헙 레파지토리가 private인데, 여기다 잔디를싦으면 pubulic에서는 잔디 심은 게 티가 안나나?

오늘도 깃 헙이랑 씨름을 하다가 시간 낭비하기 싫어서 그냥 레포지토리를 새로 팠는데.. 흠 이건 날 잡고 찾아봐야 하나?

 

새로운 빈 완전 empty repository에 commit 하는 법? 

 

 

---

코딩하면서 한 시간 동안 계속 들었던 노래 : 

 

https://www.youtube.com/watch?v=qthVv3qNW_0 

 

 

---