[기계학습] machine learning sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

2018.05.30 18:06

sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

from sklearn import svm
from sklearn import datasets
clf = svm.SVC()
iris = datasets.load_iris()
X, y = iris.data, iris.target
clf.fit(X, y)  





import pickle
s = pickle.dumps(clf)
clf2 = pickle.loads(s)
clf2.predict(X[0:1])

y[0]

아래 api를 통해 file 저장도 가능한 듯 하다.

자세한 내용은 pickle 홈페이지에 있다.

https://docs.python.org/2/library/pickle.html

pickle.dump(obj, file[, protocol])

Write a pickled representation of obj to the open file object file. This is equivalent to Pickler(file, protocol).dump(obj).

If the protocol parameter is omitted, protocol 0 is used. If protocol is specified as a negative value or HIGHEST_PROTOCOL, the highest protocol version will be used.

Changed in version 2.3: Introduced the protocol parameter.

file must have a write() method that accepts a single string argument. It can thus be a file object opened for writing, a StringIO object, or any other custom object that meets this interface.

pickle.load(file)

Read a string from the open file object file and interpret it as a pickle data stream, reconstructing and returning the original object hierarchy. This is equivalent to Unpickler(file).load().

file must have two methods, a read() method that takes an integer argument, and a readline() method that requires no arguments. Both methods should return a string. Thus file can be a file object opened for reading, a StringIO object, or any other custom object that meets this interface.

This function automatically determines whether the data stream was written in binary mode or not.

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com

pickle.dumps(obj[, protocol])¶

파일 저장은 아래와 같이 joblib 를 통해 저장할 수 있다.

In the specific case of the scikit, it may be more interesting to use joblib’s replacement of pickle (joblib.dump & joblib.load), which is more efficient on big data, but can only pickle to the disk and not to a string:

>>>

from sklearn.externals import joblib
joblib.dump(clf, 'filename.pkl') 

Later you can load back the pickled model (possibly in another Python process) with:

>>>clf = joblib.load('filename.pkl') 
 
자세한 내용은 아래의 scikit learn 홈페이지에서 확인 할 수 있다. 
http://scikit-learn.org/stable/tutorial/basic/tutorial.html#machine-learning-the-problem-setting

출처: http://fifthstory.tistory.com/entry/sklearn-model-백업-재사용 [다섯번째 이야기]

본 웹사이트는 광고를 포함하고 있습니다.
광고 클릭에서 발생하는 수익금은 모두 웹사이트 서버의 유지 및 관리, 그리고 기술 콘텐츠 향상을 위해 쓰여집니다.

이 게시물을

번호	제목	글쓴이	날짜	조회 수
공지	오라클 기본 샘플 데이터베이스	졸리운_곰	2014.01.02	86966
공지	[SQL컨셉] 서적 "SQL컨셉"의 샘플 데이타 베이스 SAMPLE DATABASE of ORACLE	가을의 곰을...	2013.02.10	79229
공지	[G_SQL] Sample Database	가을의 곰을...	2012.05.20	95971
52	10분 만에 살펴보는 R 기초문법	졸리운_곰	2018.12.20	1554
51	R 기술통계 함수 mean(), median(), range(), sd(), var(), min(), max(), IQR(), diff(), length(), rank()	졸리운_곰	2018.12.20	1511
50	[초보자가이드] 통계언어 R로 하는 웹 스크래핑 / 크롤링 / 데이터 수집 :Beginner’s Guide on Web Scraping in R (using rvest) with hands-on example	졸리운_곰	2018.12.20	1519
49	[ R Lang] 데이터 유형의 우선순위	졸리운_곰	2018.12.11	1281
48	[ R lang] 데이터 유형 알아내기	졸리운_곰	2018.12.11	932
47	[ R lang] 특수 형테의 데이터 유형	졸리운_곰	2018.12.11	1393
46	Learn R in 15 Minutes	졸리운_곰	2018.08.14	1595
45	R 프로그래밍 - 한국어 자연어 처리(KoNLP) 패키지 소개	졸리운_곰	2018.07.13	1538
44	RStudio Server: 서버 구성과 관리	졸리운_곰	2018.07.09	1206
43	RNN을 이용한 한글 자동 띄어쓰기	졸리운_곰	2018.07.06	1895
42	R로 만들어본 자동 띄어쓰기 알고리즘	졸리운_곰	2018.07.06	1393
41	딥러닝(Deep learning)을 R로 구현하기 – Prediction Model	졸리운_곰	2018.05.30	1770
40	R로 하는 텍스트마이닝(2016_08_15 대통령 광복절 기념사 분석)	졸리운_곰	2018.03.17	1279
39	한글 텍스트 마이닝 : Text Mining For Korean	졸리운_곰	2018.03.17	1980
38	R plot으로 그래프 그리기: 점 여러 개 찍기 ๑•‿•๑	졸리운_곰	2018.02.21	1824
37	shiny를 통한 R 웹 프로그래밍	졸리운_곰	2018.01.22	1407
36	분석언어 R 기초 (KODATA한국 데이터 진흥원) 사이버 교육	졸리운_곰	2017.12.29	1391
35	kodb R 데이터 실습 1강	졸리운_곰	2017.12.26	1261
34	[빅데이터 아카데미 사전교육 자료] 분석언어 R 기초	졸리운_곰	2017.11.26	1138
33	R 자료들	졸리운_곰	2017.11.22	1363

첫 페이지 1 2 3 4 5 끝 페이지

쓰기

태그

[기계학습] machine learning sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다. 어린이용이며, 설치가 필요없는 브라우저 게임입니다. https://s1004games.com

댓글 0

로그인

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com