Python

Python - 모델 평가 오차행렬

교차검증만으로 끝난게 아니다. 모델을 신뢰 할 수 없기 때문에 교차검증, 모델튜닝을 하며 최적화를 진행한후 실질적인 모델 평가를 진행한다. 근사치 확인 *1. 정확도 (accuracy) 2. 오차행렬 3. 정밀도 & 재현율 4. F1 스코어 *5. ROC AUC (신뢰성 측정) 정확도, ROC AUC를 확인하면 쓸 수 있는 모델인지 평가가 가능하다. 오차행렬 True Negative(TN) : Negative로 예측했는데 맞은거 | False Positive (FP): Positive로 예측했는데 틀린거 ------------------------------------------ False Negative (FN) : Negative로 예측했는데 틀린것 | True Positive (TP): Postit..

2022. 10. 17. 10:55

Python

Python - 교차 검증 정리

교차 검증 정리 Training - Test vs Traning-Validation-Testing(데이터의 수가 충분히 많을때 사용) CV = small sample size -K-fold-CV = balanced distribution -Stratified K-fold-CV = unbalanced distribution -Random sub sampling = Stable result -Baysian Optimization = fast speed with stats

2022. 10. 17. 09:10

Python

Python - Hyperopt 교차검증

import pandas as pd import numpy as np import matplotlib.pyplot as plt import seaborn as sns from sklearn.preprocessing import LabelEncoder import warnings warnings.filterwarnings('ignore') df = sns.load_dataset('titanic') df.drop(['class', 'alive', 'embark_town', 'who', 'adult_male', 'alone'], axis=1, inplace=True) df['family'] = df.sibsp + df.parch df.drop(['sibsp', 'parch'], axis=1, inplace=T..

2022. 10. 17. 09:06

Python

Python - 의사결정트리 타이타닉 생존자 예측

#!/usr/bin/env python # coding: utf-8 import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns from sklearn.preprocessing import LabelEncoder from sklearn.tree import DecisionTreeClassifier ,export_graphviz import graphviz '''탐색적 데이터 분석 pclass 별로 성별에 따른 생존율의 차이가 있는지 확인 sns.barplot(x='Pclass',y='Survived',hue='Sex',data=df1) ''' df1 = sns.load_dataset('titanic'..

2022. 10. 12. 17:39

Python

Python - 의사결정트리 예측

import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns from sklearn.preprocessing import StandardScaler, MinMaxScaler, MaxAbsScaler,LabelEncoder '''머신러닝 주요 작업은 학습 알고리즘을 선택해서 어떤 데이터에 훈련시키는 것 나쁜데이터 : 충분하지 않은 양의 훈련데이터 대표성이 없는 훈련데이터 낮은 품질의 데이터 관련없는 특성 나쁜 알고리즘 : 훈련데이터 과대적합 훈련데이터 과소적합 '''''' 실습 의사결정 나무 예시 [채무 불이행자 분류] ''' data = pd.DataFrame({'ID': [1,2,3,4,5,6,7,..

2022. 10. 12. 11:04

Python

Python - VSCODE 에서 DOT 파일 PREVIEW

vscode에서 .dot 파일 프리뷰 안될 경우, VSCODE 확장탭 > Graphviz 검색 > Joao Pinto 설치 dot 파일로 온 후 , Ctrl + Shift + V 누르면 dot 파일이 출력 된다.

2022. 10. 12. 10:25