데이터 수집하기 with Nodejs #1 | 크롤링


데이터 수집하기 with Nodejs #1 | 크롤링

미디엄 퍼블리케이션에서 작가 개수세기 Idea 우리 Medium Publication에 게시글이 많이 쌓인다면, 일일이 어떤 작가가 몇개를 올렸는지 세는데 불편하므로 그걸 자동화 하기 위한 단순한 생각이다. 많이 쓴 사람에게 장학금, 대회상금, 후원금 등을 추후에 일정 비율에 맞게 배분하기로 했기 때문이다. 동아리 활동을 하면 분명히 이득밖에 없는데 그럼에도 뭔가 보상을 제공하기 위한 전략이다. Crawl using open-source(node-crawler) node.js를 사용하여 medium/cau-dawn을 crawling한다. node.js code to front-side javascript using open-source(browserify) browserify를 사용하면 node.js로 쓴 js 파일을 bunlde.js로 치환한다음 bundle..........



원문링크 : 데이터 수집하기 with Nodejs #1 | 크롤링