[기계학습] machine learning sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

2018.05.30 18:06

sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

from sklearn import svm
from sklearn import datasets
clf = svm.SVC()
iris = datasets.load_iris()
X, y = iris.data, iris.target
clf.fit(X, y)  





import pickle
s = pickle.dumps(clf)
clf2 = pickle.loads(s)
clf2.predict(X[0:1])

y[0]

아래 api를 통해 file 저장도 가능한 듯 하다.

자세한 내용은 pickle 홈페이지에 있다.

https://docs.python.org/2/library/pickle.html

pickle.dump(obj, file[, protocol])

Write a pickled representation of obj to the open file object file. This is equivalent to Pickler(file, protocol).dump(obj).

If the protocol parameter is omitted, protocol 0 is used. If protocol is specified as a negative value or HIGHEST_PROTOCOL, the highest protocol version will be used.

Changed in version 2.3: Introduced the protocol parameter.

file must have a write() method that accepts a single string argument. It can thus be a file object opened for writing, a StringIO object, or any other custom object that meets this interface.

pickle.load(file)

Read a string from the open file object file and interpret it as a pickle data stream, reconstructing and returning the original object hierarchy. This is equivalent to Unpickler(file).load().

file must have two methods, a read() method that takes an integer argument, and a readline() method that requires no arguments. Both methods should return a string. Thus file can be a file object opened for reading, a StringIO object, or any other custom object that meets this interface.

This function automatically determines whether the data stream was written in binary mode or not.

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com

pickle.dumps(obj[, protocol])¶

파일 저장은 아래와 같이 joblib 를 통해 저장할 수 있다.

In the specific case of the scikit, it may be more interesting to use joblib’s replacement of pickle (joblib.dump & joblib.load), which is more efficient on big data, but can only pickle to the disk and not to a string:

>>>

from sklearn.externals import joblib
joblib.dump(clf, 'filename.pkl') 

Later you can load back the pickled model (possibly in another Python process) with:

>>>clf = joblib.load('filename.pkl') 
 
자세한 내용은 아래의 scikit learn 홈페이지에서 확인 할 수 있다. 
http://scikit-learn.org/stable/tutorial/basic/tutorial.html#machine-learning-the-problem-setting

출처: http://fifthstory.tistory.com/entry/sklearn-model-백업-재사용 [다섯번째 이야기]

본 웹사이트는 광고를 포함하고 있습니다.
광고 클릭에서 발생하는 수익금은 모두 웹사이트 서버의 유지 및 관리, 그리고 기술 콘텐츠 향상을 위해 쓰여집니다.

이 게시물을

번호	제목	글쓴이	날짜	조회 수
공지	오라클 기본 샘플 데이터베이스	졸리운_곰	2014.01.02	86459
공지	[SQL컨셉] 서적 "SQL컨셉"의 샘플 데이타 베이스 SAMPLE DATABASE of ORACLE	가을의 곰을...	2013.02.10	78897
공지	[G_SQL] Sample Database	가을의 곰을...	2012.05.20	95649
22	Docker에서 SQL Server 컨테이너 이미지 구성	졸리운_곰	2020.01.23	1554
21	MSSQL 설치형 한글 환경으로 변경	졸리운_곰	2020.01.23	2887
20	PRIMARY KEY 와 FOREIGN KEY 를 전부 뽑아주는 쿼리	졸리운_곰	2018.12.16	1773
19	[MSSQL] CASE 문 . 조건에 따라 값 정하기 ! CASE WHEN THEN	졸리운_곰	2018.07.24	1568
18	Track Data Changes (SQL Server)	졸리운_곰	2018.07.02	1304
17	Docker가 있는 SQL Server 2017 컨테이너 이미지를 실행 하는 빠른 시작	졸리운_곰	2018.06.26	1055
16	[MSSQL] Management Studio 이용해 데이터베이스 생성하기	졸리운_곰	2018.06.17	1283
15	[MSSQL - GROUP BY HAVING 을 이용한 중복 데이타 체크]	졸리운_곰	2018.06.15	1280
14	[SQL] select 한 결과로 update 처리, SQL한문장, How to UPDATE from SELECT in SQL Server	졸리운_곰	2018.01.22	1472
13	UNION으로 결과 집합 조합	졸리운_곰	2017.08.27	1342
12	uniqueidentifier(Transact-SQL)	가을의곰	2017.06.10	1756
11	하위 쿼리를 사용하여 다른 쿼리 또는 식에 쿼리 중첩 [MS-ACCESS : ms offce suit]	가을의곰	2017.06.10	1639
10	[MS-SQL] 테이블명, 컬럼명 검색	졸리운_곰	2017.04.17	1935
9	DB의 모든 테이블에서 데이터 검색	졸리운_곰	2017.04.17	1719
8	Microsoft SQL Server DBA 가이드-DBA라면 이정도는 알아야한다!!!	졸리운_곰	2017.01.15	1302
7	SQL Server DBA 가이드	졸리운_곰	2017.01.15	1685
6	IDENTITY_INSERT가 OFF로 설정되면 ‘테이블명’ 테이블의 ID 열에 명시적 값을 삽입할 수 없습니다	졸리운_곰	2017.01.15	1503
5	MS SQL 서버에서 자동증가, autoincrement 처리	졸리운_곰	2017.01.15	1773
4	MS SQL 서버의 날짜, 시간 => 문자열 변환 포멧 설명	졸리운_곰	2017.01.15	1215
3	MS SQL 서버 코딩 표준 가이드	졸리운_곰	2017.01.14	1655

첫 페이지 1 2 3 끝 페이지

쓰기

태그

[기계학습] machine learning sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

sklearn 내부의 pickle lib 를 통해 모델을 저장하고 다시 로드하여 재사용할 수 있다.

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다. 어린이용이며, 설치가 필요없는 브라우저 게임입니다. https://s1004games.com

댓글 0

로그인

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com