node.js를 활용한 웹 크롤링(crawling)
TRANSCRIPT
1. 대출상담가와대출고객이라는두개의 Router를나눠어개발진행
2. Model 폴더안에작성한데이터구조와동일한클래스작성
Promise-mysql?Node-schedule?
Winston?Cheerio?
Cheeerio-tableparser?
Request-promise?
효과적인크롤러를만들어보자!
Node.js는싱글스레드기반이니까…
여러프로세스를생성해서 Clustering하면어떻까?
RDS접근을최소화할수있는방법을모색해보자
이왕이면 AWS Lambda를활용해서버리스하게만들어보면어떻까?