세조목

머신러닝2024.05.07 - [데이터 분석 공부/머신러닝] - 머신러닝 심화 복습(결측치, 인코딩&스케일링)(24.05.07) 머신러닝 심화 복습(결측치, 인코딩&스케일링)(24.05.07)결측치표준편차가 크다 = 평균에서 벗어난 값들이 많다so 표준편차가 크다면 결측치를 평균값으로 대체하기보단 중앙값으로 대체하는게 낫다. ※ 범주형 데이터의 경우 최빈값으로 대체표준편eyeoftheworld1209.tistory.com2024.05.07 - [데이터 분석 공부/머신러닝] - 머신러닝 심화 복습(과적합)(24.05.07) 머신러닝 심화 복습(과적합)(24.05.07)과적합개념모형이 지나치게 복잡할 경우 데이터를 너무 많이(or 적게) 학습(=적합)해서특정 데이터의 예측만 할 수 있고, 다른 데이터는 예측..

과적합개념모형이 지나치게 복잡할 경우 데이터를 너무 많이(or 적게) 학습(=적합)해서특정 데이터의 예측만 할 수 있고, 다른 데이터는 예측할 수 없음 ※ 과적합이라고 하면 일반적으로 과대적합을 얘기함 과적합 해결방법→ Train, Test dataset 분리from sklearn.model_selection import train_test_splitX_train, X_test, y_train, y_test = train_test_split(titanic_df[['Fare', 'Sex']], titanic_df[['Survived']], test_size=0.3, shuffle=True, random_state=42, stratify=titanic_df[['Survived']]) - test_size :..

결측치표준편차가 크다 = 평균에서 벗어난 값들이 많다 so 표준편차가 크다면 결측치를 평균값으로 대체하기보단 중앙값으로 대체하는게 낫다. ※ 범주형 데이터의 경우 최빈값으로 대체 표준편차가 큰지는 어떻게 알 수 있지?? → 평균값과 비교 - 평균값보다 표준편차가 크다면 데이터들이 평균값에서 많이 벗어나 있다는 의미임 결측치 확인.notna() → 결측치 없는 데이터만 확인 가능 .isna() → 결측치인 데이터만 확인 가능 결측치 처리from sklearn.impute import SimpleImputer si = SimpleImputer() si.fit(titanic_df[['Age']]) titanic_df['Age_si_mean'] = si.transform(titanic_df[['Age']]) #..

머신러닝2024.05.03 - [데이터 분석 공부/머신러닝] - 머신러닝 기초 복습(로지스틱 회귀)(24.05.03) 머신러닝 기초 복습(로지스틱 회귀)(24.05.03)머신러닝예측숫자{(평균으로)회귀}범주/카테고리(분류)선형 회귀로지스틱 회귀선형 회귀를 차용해서 만든거라서 '회귀'가 붙음 다중공선성 제거 방법1. pair plot, 상관관계로 상관관계 확인 후eyeoftheworld1209.tistory.com SQL2024.05.03 - [데이터 분석 공부/SQL] - SQL 예제 정리('우유와 요거트가 담긴 장바구니')(24.05.03) SQL 예제 정리('우유와 요거트가 담긴 장바구니')(24.05.03)https://school.programmers.co.kr/learn/courses/30/le..