AI/Machine Learning

[ML] Regression(회귀)(1) - Linear Regression(선형 회귀)

🤔Regression 관찰된 연속형 변수들에 대해 두 변수 사이의 모형을 구한 뒤 적합도를 측정해 내는 분석 방법입니다. 즉, $x$값에 따라 $y$값이 어느 정도로 변화할 지 예측할 수 있습니다. 회귀분석은 시간에 따라 변화하는 데이터나 어떤 영향, 가설적 실험, 인과 관계의 모델링등의 통계적 예측에 이용될 수 있습니다. 회귀분석은 supervised learning(y가 존재하는 학습)의 대표적인 분석 기법중 하나이며 continuous한 값들을 찾습니다. 회귀 알고리즘에는 아래와 같은 것들이 있습니다. ✍️ Regression의 종류 - Linear regression - Multivariate linear regression - Lasso and Ridge linear regression - Ne..

[ML] 베이지안 분류기(Bayesian Classifier)(4) - Bayesian Classifier

🤔Bayesian Classifier 베이지안 분류기의 마지막 포스팅입니다. Gaussian Distribution을 통한 Bayesina Classifier에 대한 소개, 나이브 베이지안 분류기(Naive Bayesian classifier), Bayesian Belief Network에 대해 알아보겠습니다. (이제는 베이지안.. 보기도 싫네요.. ㅎㅎ 다음 일단 먼저 만들어 두고 Regression을 공부한 뒤 정리하도록 해보겠습니다..) 🔎 🔎 🔎 🔎

[ML] 베이지안 분류기(Bayesian Classifier)(3) - Parameter Estimation

🤔Parameter Estimation 모수(parameter)은 모집단의 특성을 나타내는 수치로 모평균, 모분산, 모표준편차, 모비율, 모상관관계 등이 있습니다. 표본 통계량(sample statistics)은 표본(sample)의 특성을 나타내는 수치로 표본평균, 표본분산, 표본표준편차, 표본비율, 표본상관관계 등이 있습니다. 표본 통계량은 표본에서 얻은 모수에 대한 정보의 요약이므로 통계량은 모집단에서 추출한 특정 표본에 따라 달라지는 확률변수입니다. 이 통계량의 확률 분포를 표본 분포(sampling distribution)라고 부릅니다. 현실적으로 모집단의 특성, 즉 모수를 아는 것은 거의 불가능합니다. 따라서 표본의 특성인 통계량을 통해 모수를 추정(estimation)합니다. 이번 포스팅에서..

[ML] 베이지안 분류기(Bayesian Classifier)(2) - 베이즈 정리(Bayes' Theorem)

🤔베이즈 정리 저번 시간에 간단한 예시를 통해 베이지안 분류기를 배웠습니다. 그리고 결론적으로 아래의 식을 유도하여 대소관계의 비교를 통해 큰 확률을 가지는 값을 것을 알 수 있었습니다. $$P(w_j|x) (x : data, w_j : j^{th}class)$$ 이번 포스팅에서는 베이즈 정리에 대하여 수학적 유도를 통해 어떤 원리가 숨어있는지 이해하는 시간을 가져보도록 하겠습니다. 👉 이전 포스팅 더보기 https://2t-hong.tistory.com/64 [ML] 베이지안 분류기(Bayesian Classifier) 알아보기 🤔Bayesian Classifier 베이지안 분류기는 특성들 사이의 독립을 가정하는 베이즈 정리를 적용한 확률 분류기의 일정입니다. 이번 포스팅에서는 베이즈 정리에 대해 수학..

[ML] 베이지안 분류기(Bayesian Classifier)(1) - 알아보기

🤔Bayesian Classifier 베이지안 분류기는 특성들 사이의 독립을 가정하는 베이즈 정리를 적용한 확률 분류기의 일정입니다. 이번 포스팅에서는 베이즈 정리에 대해 수학적으로 알아보고 베이지안 분류기의 특성에 대해 알아보겠습니다. 🔎 Introduction 연어(Salmon) - 농어(Sea Bass) Problem이라는 꽤 유명한 예제를 통해 분류에 대해 먼저 알아보겠습니다. 어부가 바다에서 물고기를 잡았는데 연어와 농어 두 종류의 물고기가 잡혔습니다. 물고기를 더 좋은 값에 팔기 위해 어부는 물고기를 연어와 농어 각각을 종류별로 나누어야 합니다. 이때 물고기를 분류하는 방법에는 사람의 노력을 통해 직접 분류하는 것과 자동화 시스템을 통해서 분류하는 두 가지 방법이 있습니다. 위의 예시처럼 두 ..