8000 GitHub - may22es/crawler: some crawler codes that I made
[go: up one dir, main page]
More Web Proxy on the site http://driver.im/
Skip to content

may22es/crawler

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

9 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Crawler

  • This crawlers are created by Kyeongpil Kang

  • Source site: Naver news, Naver movies, New York Times, 조선왕조실록(The record of Joseon dynasty)

  • 주의) 공부 및 연구 목적으로 작성한 크롤링 소스입니다.

    크롤링할 데이터의 저작권은 해당 사이트에 있으며,

    서버에 악영향을 주거나 저작권을 위반하지 않도록 합니다.

Dependency

  • Python 2.7, BeautifulSoup, ujson

  • Naver news crawler

    • Python newspaper Library
    • Mac/Linux (윈도우는 HTTP 헤더를 변경해야 할 것 같습니다.)

About

some crawler codes that I made

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Python 100.0%
0