한국거래소 크롤링하다가 ip차단 당함

세시십분(sesi) 2020. 3. 6. 13:37

한국거래소에서 데이터를 받아야 하는 일이 있어서

혹시 한국거래소도 open api를 제공하나 찾아봤더니

한국거래소 자본시장 정보데이터 종합센터 구축한다...오픈API 도입 등 정보사업 확대

한국거래소가 자본시장에서 발생하는 지수, 주식, 채권, 증권상품 등 정보데이터를 통합 제공하기 위한 종합센터를 구축한다. 자본시장 관련 데이터를 한 눈에 쉽게 확인할 수 있는 별도 홈페이지를 개설하고 애플리...

www.etnews.com

이제 논의하기 시작했다고 한다.

2020년이지만 여전히 세상은 느리게 변하고 있다.

쨋든 크롤링을 할 수 밖에 없는 상황이라 누가 만들어 놓은 코드 있나 살펴봤더니

sharebook-kr/pykrx

KRX 주식 정보 스크래핑. Contribute to sharebook-kr/pykrx development by creating an account on GitHub.

github.com

역시 누가 먼저 만들어놨다.

굿.

근데 모듈자체에서 데이터를 약간 가공해서 내가 필요한 부분이 중간에서 잘려나간다.

그래서 소스를 가져와서 입맛대로 수정해서 돌렸더니 잘 돌아감

자축하며 쉰나게 돌렸더니 어느순간 데이터가 안들어옴.

크롬으로 접속해도 데이터가 안보임.

폰으로 접속하니 보임.

-> ip 차단인듯..

일단 며칠 기다려보고 풀리면 이번에는 딜레이 넉넉하게 주고 돌려야겠다.

제발 한번만 용서를..