데이터 분석에 필여한 무료 웹 크롤링 도구 정리-TOP10
By 불타는 얼음요새님의 이글루입니다 | 2022년 8월 2일 |
오늘 제일 많이 사용되는 국내외 웹 크롤러 탑10을 소개할까 하는데요. 웹 크롤링 도구는 홈페이지에서 유효한 정보를 추출하기 위해 개발된 프로그램으로 웹사이트에서 특정 데이터를 수집하려는 사람들이 주로 사용하는 도구입니다. 특히 오늘 소개할 크롤링 도구중에 코드 기술이 필요없는 도구도 있으니까 주의깊게 봐주세요(소개순서랑 순위는 무관) 1.八爪鱼octoparse octoparse.com 특점: ①코드 작성이 필요 없는 시각화 작업 ②시간을 설정하여 일정한 주기로 자동 수집 ③외부 서비스 또는 외부 데이터베이스와 통합 가능 ④클라우드 서비스 제공 단점: ①한번에 많은 웹
파이썬 실행파일 만들기
By Aura | 2022년 9월 12일 |
파이썬으로 작성한 소스를 실행파일로 작성하고자.. 인터넷 검색을 통해 처음 접한 방법은.. pyinstaller 아래 명령어로 설치.. pip install pyinstaller 아래 명령어로 파이썬 실행파일화.. pyinstaller news-crawling_xlsx.py 그러나.. 먼가 오류 발생.. 인터넷 검색으로는 파이썬 재설치.. 환경설정에 명령어 추가하기(?) 등이 나왔는데, 재설치는 했으나 동일하고,, 두번재 방법은 이해못함;; 그래서 다음으로 찾은 명령어는.. cxfreeze 아래 명령어로 다시 파이썬 실행파일화.. cxfreeze -c news-crawling_xlsx.py 처음에 버퍼링이 꽤 있어 좀 기다리면.. 실행 완료.. bu