[데이터 수집 및 전처리] 네이버 금융(차트)에서 주가 갈무리(크롤링)하기

* 투자용으로 사용하지 마십시오. 

 

네이버 금융에는 플래시를 이용한 차트 서비스가 있습니다. 

https://finance.naver.com/item/fchart.nhn?code=005930

 

 

 

 

크롬의 네트워크 모니터를 켜고 위 화면의 일봉을 클릭하면 다음 화면을 볼 수 있고...

 

 

여기서 다음 주소를 찾을 수 있습니다. 

 

https://fchart.stock.naver.com/sise.nhn?symbol=005930&timeframe=day&count=1500&requestType=0

 

위 주소에 들어가 보면 XML형식의 삼성전자 일봉을 볼 수 있습니다. 

 

 

 

카운트를 늘리니 최대 1990년 01월 03일 데이터까지 볼 수 있네요..

 

그런데 1990년 1월부터 2월까지의 데이터가 좀 이상합니다. 

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com

4만원대군요.. 다른 데이터들과 비교를 해봅니다. 

 

 

같은 페이지에서 삼성전자의 월봉을 확인하니

3월 까지 보이고 이때 종가는 438원입니다. 

 

 

 

 

이는 제공된 XML 데이터와 일치합니다. 

<item data="19900331|435|440|430|438|111870"/>

 

MSN의 삼성전자 주식 서비스와도 비교를 해봅니다. 

https://www.msn.com/ko-kr/money/stockdetails/krx-005930/fi-ajn83m

 

90년 2월까지의 데이터들은 잘못된 데이터인 것 같네요.

지워줘야 할 것 같습니다. 

 

이제 필요한 정보를 모두 수집했으니 코딩해 봅시다. 

 

import urllib.request
import xml.etree.ElementTree as ET

count = '8000'
code = '005930'
url = f'https://fchart.stock.naver.com/sise.nhn?symbol={code}&timeframe=day&count={count}&requestType=0'

r = urllib.request.urlopen(url)
xml_data = r.read().decode('EUC-KR')
root = ET.fromstring(xml_data)

for index, each in enumerate(root.findall('.//item')):
    temp = each.attrib['data'].split('|')
    temp[1] = int(temp[1])
    temp[2] = int(temp[2])
    temp[3] = int(temp[3])
    temp[4] = int(temp[4])
    temp[5] = int(temp[5])
    if temp[0] >= "19900302":
        print(index, temp)

[출처] https://comdoc.tistory.com/entry/%EB%84%A4%EC%9D%B4%EB%B2%84-%EA%B8%88%EC%9C%B5%EC%B0%A8%ED%8A%B8%EC%97%90%EC%84%9C-%EC%A3%BC%EA%B0%80-%EA%B0%88%EB%AC%B4%EB%A6%AC%ED%81%AC%EB%A1%A4%EB%A7%81%ED%95%98%EA%B8%B0

 

 

본 웹사이트는 광고를 포함하고 있습니다.
광고 클릭에서 발생하는 수익금은 모두 웹사이트 서버의 유지 및 관리, 그리고 기술 콘텐츠 향상을 위해 쓰여집니다.
번호 제목 글쓴이 날짜 조회 수
공지 오라클 기본 샘플 데이터베이스 졸리운_곰 2014.01.02 86751
공지 [SQL컨셉] 서적 "SQL컨셉"의 샘플 데이타 베이스 SAMPLE DATABASE of ORACLE 가을의 곰을... 2013.02.10 79068
공지 [G_SQL] Sample Database 가을의 곰을... 2012.05.20 95830
78 [Kafka] Kafka 한번 살펴보자... Quickstart file 졸리운_곰 2021.06.18 1312
77 Java Kafka Producer, Consumer 예제 구현 Java를 이용하여 Kafka Producer와 Kakfa Consumer를 구현해보자. file 졸리운_곰 2021.06.18 1172
76 Beginner’s Guide to Understand Kafka file 졸리운_곰 2021.06.18 1574
75 [Kafka] Kafka 설치/실행 및 테스트 file 졸리운_곰 2021.06.18 1066
74 [java] [kafka] [Kafka] 개념 및 기본예제 file 졸리운_곰 2021.06.16 2170
73 Getting started with Apache Kafka in Python file 졸리운_곰 2020.09.10 2261
72 [Kafka] 다운로드 및 Quick Start file 졸리운_곰 2020.09.07 1897
71 [Kafka] 기본 개념잡기 file 졸리운_곰 2020.09.07 1711
70 Flume Integration with Kafka file 졸리운_곰 2019.04.16 2083
69 빅데이터: 플럼(Flume) 토폴로지 설계 file 졸리운_곰 2019.04.16 1603
68 실시간 처리를 위한 분산 메시징 시스템 카프카(Kafka) file 졸리운_곰 2018.05.12 1410
67 Flume과 Kafka를 사용한 초당 100만개 로그 수집 테스트 file 졸리운_곰 2018.05.12 1399
66 웹 크롤링 / web crwaling / web scraping / 웹 스크래핑 file 졸리운_곰 2017.07.09 1848
65 빅데이터 단지 몇퍼센트의 예측 정확성을 위하여 장애로 가득찬 빅데이터 시스템을 도입하여야 하는가에 대한 의문! file 졸리운_곰 2017.03.20 1608
64 빅데이터: 플럼(Flume) 토폴로지 설계 file 졸리운_곰 2017.03.20 1419
63 [실시간 분석 시스템] Apache Flume를 활용한 데이터 수집(1) file 졸리운_곰 2017.03.06 1322
62 [실시간 분석 시스템] 데이터 수집 #2 Apache Sqoop을 활용하여 RDBMS 데이터 수집(2) file 졸리운_곰 2017.03.06 1386
61 [실시간 분석 시스템] 데이터 수집 #2 Apache Sqoop을 활용하여 RDBMS 데이터 수집(1) file 졸리운_곰 2017.03.06 1107
60 [실시간 분석 시스템] 데이터 수집 #1 오픈 소스 수집기 비교 file 졸리운_곰 2017.03.06 1750
59 [실시간 분석 시스템] 일단 데이터 들여다 보기 file 졸리운_곰 2017.03.06 1944
대표 김성준 주소 : 경기 용인 분당수지 U타워 등록번호 : 142-07-27414
통신판매업 신고 : 제2012-용인수지-0185호 출판업 신고 : 수지구청 제 123호 개인정보보호최고책임자 : 김성준 sjkim70@stechstar.com
대표전화 : 010-4589-2193 [fax] 02-6280-1294 COPYRIGHT(C) stechstar.com ALL RIGHTS RESERVED