Parse JSON using Python and store in MySQL

 
JSON is one the most widely used data format. If you are trying to gather some data using any API then most probably you are going to deal with JSON. Lets see how to parse JSON and get specific parameter values.
 
Python has a library called "json" which will helps us to deal with the json data. Also we can use the "pprint" which is "data pretty printer" to display formatted output. Generally we will have three main steps for this kind of task,
  • Read the JSON data
  • Store values in python variables
  • Store the data in some database

Lets try to write a simple program based on these three steps,

# Import library to deal with json 
import json

# Import library which can print parsed data 
from pprint import pprint

# Open the json file
testFile = open("test.json")

# Load json data in python variable
data = json.load(testFile)

# You can check the type of python data variable, it should be dictionary
type(data)

# Print the formatted output
pprint(data)

01.Screen Shot 2013-10-02 at 11_44_19 PM.png

 

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com
















# Now we can access any element (value) using corresponding key as follow,
# Print value of id_str
data["id_str"]

# Store few values in python variable
id_str = data["id_str"]
created_at = data["created_at"]
filter_level = data["filter_level"]

# Store nested values
userData = data["user"]
uid = userData["id"]
followers_count = userData["followers_count"]

# Print the values to make sure we are getting the right data
print (id, created_at, filter_level, uid, followers_count)
 
 
02.Screen Shot 2013-10-02 at 11_40_41 PM.png

 










Now storing independent python variable values in to database is easy task. You can refer this post for the same.


Note: The json data object used here is collected from twitter API.
 

 

[출처] http://datavu.blogspot.kr/2013/10/parse-json-using-python-and-store-in.html

 

 

본 웹사이트는 광고를 포함하고 있습니다.
광고 클릭에서 발생하는 수익금은 모두 웹사이트 서버의 유지 및 관리, 그리고 기술 콘텐츠 향상을 위해 쓰여집니다.
번호 제목 글쓴이 날짜 조회 수
27 IPython Notebook을 통한 데이터 분석 #2 file 졸리운_곰 2017.03.05 518
26 IPython Notebook을 통한 데이터 분석 #1 file 졸리운_곰 2017.03.05 686
25 ipython 기본 사용법 졸리운_곰 2017.03.05 563
24 IPython Tutorial 사용법 file 졸리운_곰 2017.03.05 1118
23 python / itertools — Functions creating iterators for efficient looping 졸리운_곰 2017.03.04 701
22 python / List Comprehension file 졸리운_곰 2017.03.04 453
21 Python List Comprehensions: Explained Visually file 졸리운_곰 2017.03.04 493
20 Python: List Comprehensions 졸리운_곰 2017.03.04 449
19 파이썬 코딩 컨벤션 PEP 졸리운_곰 2017.03.04 681
18 Windows 64 bit 에서 Python 단일 EXE 파일 만들기 file 졸리운_곰 2017.02.26 975
17 Python의 Generator와 yield 키워드 졸리운_곰 2017.02.16 415
16 Anaconda 설치하기 - Python을 제대로 활용해보자 졸리운_곰 2016.12.12 831
15 virtualenv를 사용하자 - 가상 개발환경 구축하기 졸리운_곰 2016.11.13 503
14 파이썬으로 개발된 놀라운 라이브러리들! 파이썬 만세! file 졸리운_곰 2016.08.10 7038
13 윈도우에서 파이썬 설치하기 (virtualenv, pip 사용법) file 졸리운_곰 2016.08.08 1080
12 [Python] 파이썬 실행환경의 독립 virtualenv & PyCharm file 졸리운_곰 2016.08.08 791
11 Python virtualenv 사용법(MAC기준,pip사용) file 졸리운_곰 2016.08.08 456
10 virtualenv를 사용하자 - 가상 개발환경 구축하기 졸리운_곰 2016.08.08 460
9 윈도우에서 easy_install, pip 사용하기. 졸리운_곰 2015.11.24 1450
8 윈도우에서 파이썬 설치하기 (virtualenv, pip 사용법) file 졸리운_곰 2015.11.24 707
대표 김성준 주소 : 경기 용인 분당수지 U타워 등록번호 : 142-07-27414
통신판매업 신고 : 제2012-용인수지-0185호 출판업 신고 : 수지구청 제 123호 개인정보보호최고책임자 : 김성준 sjkim70@stechstar.com
대표전화 : 010-4589-2193 [fax] 02-6280-1294 COPYRIGHT(C) stechstar.com ALL RIGHTS RESERVED