15년여만의 Web Crawler(웹크롤러) 리뷰
By 코퍼스의 블로그 | 2018년 1월 16일 |
요새 'crawler' 관련 강좌가 눈에 많이 띄기도 하고, 아주 가~끔 써먹기도 해서요즘에 소개되는 웹크라울러 소개 내용이나 Tip들을 리뷰해보았다. 원래는 PPT 자료로 만들어서 slideshare 등에 올릴까 하다가, 주말지나고 나서 의욕이 사라졌지만,최소한의 것 정도는 기록에 남기려고 적는다.(웹.알.못인 주제에 아주 살짝 훑어보고, 테스트 해 본 거라 잘못된 것이 당연히 있을 수 있다.) . 요즘에 소개되는 crawler 강좌 들은 엄밀히 말해서, crawler를 만든다기 보다는 Web automation or web scraping 에 관련된 tip 들이더라. 제대로 된 웹크라울러를 만들려면, 하이퍼텍스트 다큐먼트들간의 네트워크 구조에 대한 고려(알고리즘 설계)와 시스템 프로그래밍(분산처
[KBS 스페셜] 사라진 자연의 타임캡슐
By 타누키의 MAGIC-BOX | 2020년 6월 12일 |
어쩌다 재방송을 보았는데 재밌어서 챙겨보려하니...2주만에 다른 프로로 갈아타네요;; 시청률이 안나온건지 어차피 다큐멘터리 틀어주는 시간인데 맛보기라기엔 너무한ㅋㅋㅋ 아옼ㅋㅋ 궁의 자연 등이 꽤 흥미로웠는데 ㅜㅜ
[라즈베리파이] 워크큐(Workqueue) 용어 알아보기
By Guillermo Austin Kim | 2018년 8월 20일 |
이번에는 워크큐에서 쓰이는 여러 용어를 소개합니다.많은 개발자들이 워크큐를 낯설어하는 이유는 자료구조와 그 개념을 익히기 어렵기 때문입니다. 워크와 워커쓰레드 그리고 풀워크가 자료구조가 어떤 형태로 연결되서 처리하는지 큰 그림을 그리기 어렵습니다. 각각 의미와 자료 구조를 살펴보겠습니다. 1. 워커 쓰레드우선 워커 쓰레드부터 알아보겠습니다. 워커 쓰레드는 워크를 실행하는 프로세스입니다. 리눅스 시스템에서 항상 백그라운드로 실행하는 친숙한 프로세스입니다. 프로세스 이름은 "kworker/"로 시작하며 워크큐 종류에 따라 "kworker/" 이후 번호가 붙습니다. 다음은 라즈베리파이에서 확인한 워커 쓰레드입니다.root@raspberrypi:/# ps -ely | grep kworkerS UID P
JTBC 드라마 미스 함무라비 첫 스틸 뜸
By 落張不入 | 2018년 4월 16일 |
![JTBC 드라마 미스 함무라비 첫 스틸 뜸](https://img.zoomtrend.com/2018/04/16/e0029017_5ad48646df70b.jpg)
고아라, 김명수, 성동일의 인간미 넘치는 하드캐리 재판부가 출격한다. '으라차차 와이키키' 후속으로 오는 5월 21일 첫 방송되는 JTBC 새 월화드라마 '미스 함무라비'(연출 곽정환, 극본 문유석, 제작 스튜디오앤뉴) 측은 16일 고아라, 김명수, 성동일의 남다른 팀워크가 돋보이는 첫 스틸컷을 공개해 기대감을 높인다. '미스 함무라비'는 '강한 자에게 강하고 약한 자에게 약한 법원'을 꿈꾸는 이상주의 열혈 초임 판사 박차오름(고아라 분), 섣부른 선의보다 원리원칙이 최우선인 초엘리트 판사 임바른(김명수 분), 세상의 무게를 아는 현실주의 부장 판사 한세상(성동일 분), 달라도 너무 다른 세 명의 재판부가 펼치는 생활밀착형 법정 드라마다. 거창한 사건이 아닌 우리 주위에 있을 법한 소소