[기계학습] machine learning sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

2018.05.30 18:06

sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

from sklearn import svm
from sklearn import datasets
clf = svm.SVC()
iris = datasets.load_iris()
X, y = iris.data, iris.target
clf.fit(X, y)  





import pickle
s = pickle.dumps(clf)
clf2 = pickle.loads(s)
clf2.predict(X[0:1])

y[0]

아래 api를 통해 file 저장도 가능한 듯 하다.

자세한 내용은 pickle 홈페이지에 있다.

https://docs.python.org/2/library/pickle.html

pickle.dump(obj, file[, protocol])

Write a pickled representation of obj to the open file object file. This is equivalent to Pickler(file, protocol).dump(obj).

If the protocol parameter is omitted, protocol 0 is used. If protocol is specified as a negative value or HIGHEST_PROTOCOL, the highest protocol version will be used.

Changed in version 2.3: Introduced the protocol parameter.

file must have a write() method that accepts a single string argument. It can thus be a file object opened for writing, a StringIO object, or any other custom object that meets this interface.

pickle.load(file)

Read a string from the open file object file and interpret it as a pickle data stream, reconstructing and returning the original object hierarchy. This is equivalent to Unpickler(file).load().

file must have two methods, a read() method that takes an integer argument, and a readline() method that requires no arguments. Both methods should return a string. Thus file can be a file object opened for reading, a StringIO object, or any other custom object that meets this interface.

This function automatically determines whether the data stream was written in binary mode or not.

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com

pickle.dumps(obj[, protocol])¶

파일 저장은 아래와 같이 joblib 를 통해 저장할 수 있다.

In the specific case of the scikit, it may be more interesting to use joblib’s replacement of pickle (joblib.dump & joblib.load), which is more efficient on big data, but can only pickle to the disk and not to a string:

>>>

from sklearn.externals import joblib
joblib.dump(clf, 'filename.pkl') 

Later you can load back the pickled model (possibly in another Python process) with:

>>>clf = joblib.load('filename.pkl') 
 
자세한 내용은 아래의 scikit learn 홈페이지에서 확인 할 수 있다. 
http://scikit-learn.org/stable/tutorial/basic/tutorial.html#machine-learning-the-problem-setting

출처: http://fifthstory.tistory.com/entry/sklearn-model-백업-재사용 [다섯번째 이야기]

본 웹사이트는 광고를 포함하고 있습니다.
광고 클릭에서 발생하는 수익금은 모두 웹사이트 서버의 유지 및 관리, 그리고 기술 콘텐츠 향상을 위해 쓰여집니다.

이 게시물을

번호	제목	글쓴이	날짜	조회 수
공지	오라클 기본 샘플 데이터베이스	졸리운_곰	2014.01.02	86852
공지	[SQL컨셉] 서적 "SQL컨셉"의 샘플 데이타 베이스 SAMPLE DATABASE of ORACLE	가을의 곰을...	2013.02.10	79152
공지	[G_SQL] Sample Database	가을의 곰을...	2012.05.20	95892
71	[oracle] GROUP BY 절과 HAVING 절	졸리운_곰	2020.05.01	1119
70	ORACLE 오라클 CASE문 사용법 CASE WHEN THEN END	졸리운_곰	2020.04.27	1712
69	[ORACLE] CASE WHEN ~ THEN ~ ELSE END	졸리운_곰	2020.04.27	1222
68	[Oracle\|오라클] PLS-00323: 부프로그램 또는 '******' 커서는 패키지 지정에 정의되고 패키지 본체에 나타나야합니다	졸리운_곰	2020.04.16	1129
67	[오류] ORA-01861 literal does not match format string (리터럴이 형식 문자열과 일치하지 않음)	졸리운_곰	2020.03.12	1035
66	ORA-01861: literal does not match format string	졸리운_곰	2020.03.12	1419
65	개발자 환장하는 "ORA-01861: literal does not match format string"	졸리운_곰	2020.03.12	1232
64	[Oracle\|오라클] INTERVAL 날짜 년 빼기 더하기 (ADD_YEARS)	졸리운_곰	2020.03.11	1542
63	[오라클] 데이터 중복제거 방법 (distinct, group by, 성능)	졸리운_곰	2020.03.04	1387
62	PLS-00410: RECORD,TABLE 또는 인수 목록에 중복 필드가 허용되지 않습니다	졸리운_곰	2020.03.02	1328
61	PLS-00323: 부프로그램 또는 '******' 커서는 패키지 지정에 정의되고 패키지 본체에 나타나야합니다	졸리운_곰	2020.03.02	1801
60	Oracle/PLSQL]5.패키지 작성	졸리운_곰	2020.03.02	1148
59	ORACLE 패키지의 이해	졸리운_곰	2020.03.02	1536
58	오라클(ORACLE) 패키지 만들기	졸리운_곰	2020.03.02	1275
57	Oracle 요약 4	졸리운_곰	2020.02.22	1083
56	Oracle 요약 3	졸리운_곰	2020.02.22	1667
55	Oracle 요약 2	졸리운_곰	2020.02.22	1735
54	Oracle 요약 1	졸리운_곰	2020.02.22	1361
53	[Oracle] 조횟수, 다운횟수 자동증가 하기	졸리운_곰	2018.01.22	1417
52	오라클 SELECT결과로 UPDATE 하기	졸리운_곰	2018.01.22	1615

첫 페이지 1 2 3 4 5 6 7 8 끝 페이지

쓰기

태그

[기계학습] machine learning sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다. 어린이용이며, 설치가 필요없는 브라우저 게임입니다. https://s1004games.com

댓글 0

로그인

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com