최근 친구 한 명과 가장 재미있게 하고 있는 것. 교보문고 재고 크롤러 만들기.
http://neung.pythonanywhere.com
개발 진행중이라 아직 결과 페이지는 다듬어지지 않았다.
만들게 된 과정은 차차 적어 볼 생각.
파이썬, 장고, html&css, javascript 등을 비롯해
웹의 동작 방식에 대해서도 고민하게 된다.
302 redirect가 꽤 빈번히 일어난다는 것도 눈으로 목격했다.
뭣보다 셀레니움이 얼마나 느린지 체감하게 된 사이트. 리퀘스트 만세..
셀레니움을 쓰지 않기 위해 얼마나 노력했는지 모른다.
사실 목표는 교보문고 뿐만 아니라 영풍문고와 반디앤루니스까지 같이 띄우는 것.
빨리는 못하더라도 천천히, 지치지 않고 꾸준히 진행 할 생각이다.
'만들기 > 크롤러' 카테고리의 다른 글
selenium과 requests 어떤 걸 쓸까 (0) | 2019.07.09 |
---|---|
파이썬으로 크롤링하기 - WebDriverWait() 사용하기 (1) | 2019.06.24 |
파이썬으로 크롤링하기 - 메가박스 서울 지점명 받아오기 (0) | 2019.06.23 |
selenium으로 네이버 자동 로그인하기 (1) | 2019.06.23 |
selenium으로 자동로그인 하기 (0) | 2019.06.23 |