로봇 이 아닙니다 크롤링 – olaf . kr 
 국내 최대 비트코인 거래소 빗 썸 의 거래 내역 을 크롤링 할 일 이 생겼 다 . 로그인 할 수 없 었 다 . 그래서 이 포스팅 을 작성 한다 . 
 해결책 을 먼저 공개 하 자면 ‘ Web Scraper ’ 라는 크롬 익스텐션 을 사용 하 면 된다 . 괜히 로봇 이 아닌 척 하 려고 하 지 말 자 . 그냥 웹 브라우저 로 정상 적 으로 로그인한 뒤 , 위 크롬 확장 도구 로 긁 어 오 면 된다 . F 12 또는 커맨드 + 옵션 + i 로 크롬 개발자 도구 를 활성 화 시킨 뒤 에 메뉴 의 Web Crawler 를 선택 하 고 , 타입 에서 Table 을 선택 하 고 , thead 와 tbody 를 적당히 선택 해 준 뒤 에 정규 표현식 으로 url 을 적당히 넣 어 주 면 끝 . 
 간략 하 게 설명 한 이유 는 , 그럴려고 쓴 포스팅 이 아니 니까 . 좀 더 구체 적 인 팁 은 다음 과 같 다 . 날짜 를 지정 할 때 오늘 까지 로 하 지 말 고 어제 까지 로 지정 하 자 . 즉 , 오늘 이 6 월 23 일 이 라면 2016 년 6 월 22 일 까지 만 기간 으로 설정 해서 긁 는 것 이 좋 다 . 긁 는 도중 에 거래 가 들어가 면 하나 씩 밀리 게 되 어 버릴 수 있 겠 더라고 . 
 넵 . 그게 다 입니다 . 끝 ! 
 p . s . 빗 썸 의 거래 내역 API 는 믿 지 마십시오 . 
 p . s . 2 기본 설정 인 2 , 000 ms , 500 ms 를 쓰 지 않 고 3 , 000 ms , 500 ms 를 사용 했 다 . 급할수록 돌아가 라는 말 이 있 어서 가 아니 라 예전 목록 은 조금 느리 게 불러와 지 더라구 . 
 Posted in dev Tagged crawling