웹스크래핑

포스트: 2

Posts

2 posts

[Python] 웹 스크래핑 실습 정리

The Daily Life|2022년 12월 29일

다음 링크들의 내용과 코드를 통해 실습했다.1. 파이썬 웹 크롤링? (후략) - 친절한 설명과 자세한 예시 사진으로 쉽고 정확하게 기초를 잡을 수 있는 좋은 사이트였다!2. 파이썬으로 배우는 알고리즘 트레이딩 (개정판 2쇄) - Wikidocs 문서가 막혀서 해당 도서명으로 대체한다. 개발환경은 윈도우 10 Pro, 64bit 운영체제, Pycharm을 이용했다. 링크 1에 자세하게 설명된 예시 코드를 이해하고 돌려보았다.돌리던 중, 두 종류의 에러가 발생했는데 각각 다음과 같다.1. Path 경로 설정 - (참고 링크)Window에서 Python을 돌릴 때, anaconda3가 설치된 경로를 Path 변수에 추가해야 Library 설치 경로를 탐색 가능해진다. (Path 경로 설정 방법) 2.

웹스크래핑(2)실습(9)

데이터 분석에 필여한 무료 웹 크롤링 도구 정리-TOP10

불타는 얼음요새님의 이글루입니다|2022년 8월 2일

오늘 제일 많이 사용되는 국내외 웹 크롤러 탑10을 소개할까 하는데요. 웹 크롤링 도구는 홈페이지에서 유효한 정보를 추출하기 위해 개발된 프로그램으로 웹사이트에서 특정 데이터를 수집하려는 사람들이 주로 사용하는 도구입니다. 특히 오늘 소개할 크롤링 도구중에 코드 기술이 필요없는 도구도 있으니까 주의깊게 봐주세요(소개순서랑 순위는 무관) 1.八爪鱼octoparse octoparse.com 특점: ①코드 작성이 필요 없는 시각화 작업 ②시간을 설정하여 일정한 주기로 자동 수집 ③외부 서비스 또는 외부 데이터베이스와 통합 가능 ④클라우드 서비스 제공 단점: ①한번에 많은 웹

웹크롤링(2)웹스크래핑(2)크롤링(9)스크래핑(1)리스틀리(1)

Back to Tags View All Tags