웹 크롤링 도구 추천부탁드립니다.

정의석   
   조회 2604   추천 0    

웹 크롤링(스크랩핑) 도구를 찾고 있습니다.

파이썬으로 프로그램밍 하면 되기는 하지만,, 특정 상황에서 1회성으로 쓰는지라 그때마다 코딩하기가 번거럽(다고 쓰지만, 어려워서요. ㅠㅠ)네요.

No Coding Scrapping Tool 이라고 부르는거 같습니다.

현재까지 인터넷 검색해서 몇몇 사용 해 봤습니다.

Octoparse, WebHarvy, OutWit Hub등의 프로그램과 브라우저 익스텐션인 Web Scrapper, NoCoding Data Scraper를 사용 해 봤습니다.

사용하기엔 프로그램형태로 되어 있는게 더 나은거 같기는 합니다.

주로 게시판형태의 제목등을 크롤링 하면 됩니다. 다음페이지 넘어가는 기능 있어야 하고요.

 저렴하거나 무료(그대신 페이지 제한은 없었으면 좋겠습니다.) 프로그램 중 추천 부탁드립니다.
짧은글 일수록 신중하게.
WGET, HTTRACK 쓰고 있습니다.
두어게 더 쓰던게 있는데 생각이 안나네요 .
로그인 하시면 댓글을 남길 수 있습니다


QnA
쓰기
제목Page 761/5618
2015-12   1179006   1  백메가
2014-05   4630986   1 정은준1
2020-12   2547   1 굴렁쇠
2020-12   1653   1 프로시아
2020-12   2472   1 나는곰인뎅
2020-12   3633   1 Sikieiki
2020-12   4135   1 지존
2020-12   2778   1 CPU4
2020-12   3094   1 퍼싱글
2020-12   3120   1 슬러그
2020-12   2140   1 블랙펄
2020-12   2207   1 두부깜바
2020-12   3573   1 두봉
2020-12   1977   1  삐돌이슬픔이
2020-12   2255   1  삐돌이슬픔이
2020-12   2605   1 정의석
2020-12   2665   1 앙끄
2020-12   2706   1 장동건2014
2020-12   3897   1 AMD빌런
2020-12   2540   1 헥사코어
2020-12   3270   1 NiteFlite9
2020-12   8071   1 Skinnyrin
목록
쓰기