데이터 분석에 필여한 무료 웹 크롤링 도구 정리-TOP10
Post
원문 보기 →데이터 분석에 필여한 무료 웹 크롤링 도구 정리-TOP10
오늘 제일 많이 사용되는 국내외 웹 크롤러 탑10을 소개할까 하는데요. 웹 크롤링 도구는 홈페이지에서 유효한 정보를 추출하기 위해 개발된 프로그램으로 웹사이트에서 특정 데이터를 수집하려는 사람들이 주로 사용하는 도구입니다. 특히 오늘 소개할 크롤링 도구중에 코드 기술이 필요없는 도구도 있으니까 주의깊게 봐주세요(소개순서랑 순위는 무관) 1.八爪鱼octoparse octoparse.com 특점: ①코드 작성이 필요 없는 시각화 작업 ②시간을 설정하여 일정한 주기로 자동 수집 ③외부 서비스 또는 외부 데이터베이스와 통합 가능 ④클라우드 서비스 제공 단점: ①한번에 많은 웹
Related Posts
3 posts크롤링 테스트 해봤어요, Bright Data로 가격 데이터 모아본 후기
요즘 데이터 쪽 테스트하면서 이것저것 만져보는 중인데, 이번엔 실제로 크롤링을 한 번 제대로 돌려봤어요. 단순히 데이터를 모으는 것보다, 공개 웹 데이터를 기반으로 크롤링 안정성을 확인해 보고 싶었거든요. 이번에 진행한 건 개인 테스트 성격의 테스트라 실제 서비스 운영이 아닌 분석 관점에서 접근했어요. 사실 예전에도 웹크롤링은 몇 번 해봤는데 막상 해보면 막히는 부분이 생각보다 많더라고요. 차단 이슈도 있고, 속도도 들쭉날쭉하고, 무엇보다 안정적으로 유지하는 게 쉽지 않았어요. 평소에는 가벼운 크롤링만 해보는 편인데, 이번에는 조금 더 실전 관점에서 데이터를 다뤄보고 싶어서 Bright Data로 아마존 ‘오메가3’ 키워.......
구글폼 만들기 구글 스프레드시트 설문지 만드는 방법
구글폼 만들기 구글 스프레드시트 설문지 만드는 방법 설문조사 만들 때 아직도 엑셀에 복붙하고 계신가요. 사실 구글 폼만 잘 써도 데이터 수집부터 정리까지 자동으로 끝나요. 특히 마케팅, 학교 과제, 사내 설문까지 활용도가 정말 높습니다. 오늘은 구글 폼 생성부터 스프레드시트 자동 연동까지 핵심 단계만 정리해드릴게요. 목차 구글 폼 만들기 스프레드시트 자동 연동 설문 배포 방법 운영 꿀팁 설정 구글 폼 만들기 구글 폼은 Google Forms에 접속하거나 구글 드라이브에서 신규 버튼을 눌러 Google 설문지를 선택하면 바로 생성됩니다. 오른쪽의 플러스 버튼을 눌러 질문을 추가하면 되고, 질문 유형은 객관식, 체크박스, 단답형, 장문.......
'나도 모르게 동의된' 카카오톡 강제수집 끄기 및 개인정보 제공 동의 해제 거부 방법
우리의 국민 필수 앱 카톡, 하지만 편리함 속에 내 소중한 개인정보가 어떻게 쓰이는지 혹시 알고 계시나요? 2/4일부터 카톡에서 개인 사용 패턴과 이용 기록이 기계적으로 분석 및 요약해 맞춤형 기능, 추천, 광고 등에 활용된다는데 너무.. 당혹스럽더라구요..? 수많은 앱들의 약관들을 접하는 현대인이지만 KakaoTalk의 이번 행보는 정말 당황스럽습니다. 1. 진짜 왜 이래? 편리함 뒤에 숨은 데이터 수집. 지금 이 부분이 논란이 되고 있는 건 업데이트 과정에서 선택 사항임에도 불구하고 교모하게 전체 동의를 유도하거나 혹은 설정 아주 깊숙한 곳에 해제 버튼을 숨겨두었기 때문인데요. 게다가 이용 기록과 사용 패턴이라는 표현이 굉장히.......
