๋ณธ๋ฌธ ๋ฐ”๋กœ๊ฐ€๊ธฐ

728x90

Kaggle

4/5 ํ™” ํ™”์š”์ผ! Logistic Regression์„ ํ™œ์šฉํ•ด ๋จธ์‹ ๋Ÿฌ๋‹ ์ง„ํ–‰ ์‹œ ์ฃผ์˜์‚ฌํ•ญ์„ ์•Œ์•„๋ณธ๋‹ค. ์•ž์œผ๋กœ ์šฐ๋ฆฌ๋Š” Classification(์ดํ•ญ๋ถ„๋ฅ˜)์˜ Metrics๋กœ Accuracy๋ฅผ ์‚ฌ์šฉํ•  ์˜ˆ์ •์ด๋‹ค. ๋ชจ๋ธ ํ‰๊ฐ€ ์ „ ๊ณ ๋ คํ•ด์•ผ ํ•˜๋Š” ๊ฒƒ๋“ค 1. learning rate(ํ•™์Šต๋ฅ ) : loss ๊ฐ’์„ ๋ณด๋ฉด์„œ ํ•™์Šต๋ฅ ์„ ์กฐ์ •ํ•ด์•ผ ํ•จ. ๋ณดํ†ต 1์˜ ๋งˆ์ด๋„ˆ์Šค 4์Šน์œผ๋กœ ์žก์Œ ํ•™์Šต๋ฅ ์ด ๋„ˆ๋ฌด ํฌ๋‹ค๋ฉด global minima(W')๋ฅผ ์ฐพ์„ ์ˆ˜ ์—†๊ฒŒ ๋จ → OverShooting ๋ฐœ์ƒ ํ•™์Šต๋ฅ ์ด ์•„์ฃผ ์ž‘๋‹ค๋ฉด local minima ์ฐพ๊ฒŒ ๋จ 2. Normalization(์ •๊ทœํ™”) : MinMax Scaling - 0 ~ 1. ์ด์ƒ์น˜์— ๋ฏผ๊ฐํ•จ Standardization - ํ‘œ์ค€ํ™”, Z-Score. ์ƒ๋Œ€์ ์œผ๋กœ ์ด์ƒ์น˜์— ๋‘”๊ฐํ•จ, ๋ชจ๋“  ์นผ๋Ÿผ์—.. ๋”๋ณด๊ธฐ
6ํšŒ ์ฐจ | 4/1 ๊ธˆ 6ํšŒ ์ฐจ! ์Šคํ„ฐ๋”” ์ถœ์„๋ถ€ ๋ณด๋‹ค ๋ณด๋‹ˆ, ๊ต์œก์ด ์–ผ๋งˆ ๋‚จ์ง€ ์•Š์„ ๊ฑธ ์‹ค๊ฐํ•œ๋‹ค. 6์›” 28์ผ์— ๋๋‚˜๋Š” ๊ต์œก ๊ธฐ๊ฐ„ ์ค‘ AI์™€ ์œต๋ณตํ•ฉ ํ”„๋กœ์ ํŠธ์— ๋“ค์–ด๊ฐ€๋Š” ๊ธฐ๊ฐ„์„ ์ œ์™ธํ•˜๋ฉด, ์ˆ˜์—…์€ 16์ผ ๋‚จ์•˜๋‹ค. (๋จธ์‹ ๋Ÿฌ๋‹ ๊ต์œก 2์ผ + ๋”ฅ๋Ÿฌ๋‹ ๊ต์œก 14์ผ) ํ”„๋กœ์ ํŠธ ์‹œ์ž‘ ์ „ ๋‚จ์€ ์Šคํ„ฐ๋”” ํšŸ์ˆ˜๋„ 6๋ฒˆ.. ๊ธฐ๊ฐ„์ด ์งง๊ณ  ๋ฐฐ์šธ ์–‘์ด ๋งŽ๊ณ  ์‹ฌ๋„ ์žˆ๋Š” ๋‚ด์šฉ์ด๋‹ค ๋ณด๋‹ˆ ๋ฐฐ์šธ ๋•Œ ์ œ๋Œ€๋กœ ์ฒด๋‚ดํ™” ํ•ด์•ผ ํ•œ๋‹ค!! ๐Ÿฑ‍๐Ÿ‰ ์˜ค๋Š˜์€ ์ง€๋‚œ์ฃผ ๊ธˆ์š”์ผ์— ๊ฐ์ž ์„ ์ •ํ•œ ๋จธ์‹ ๋Ÿฌ๋‹ ํ”„๋กœ์ ํŠธ๋ฅผ ๋ฐœํ‘œํ–ˆ๋‹ค. ์Šคํ„ฐ๋”” ์ธ์› ๋Œ€๋ถ€๋ถ„์ด ๋ฐ์ด์ฝ˜ ์˜ˆ์ œ๋กœ ํ”„๋กœ์ ํŠธ๋ฅผ ์ง„ํ–‰ํ•˜๊ณ  ์‹ค์ œ๋กœ ์™„์„ฑํ•œ ์ฝ”๋“œ ์ œ์ถœ๋„ ํ•˜์˜€๋”๋ผ! ๐Ÿ‘ ๊ฒฐ์ธก์น˜๊ฐ€ ์žˆ๊ณ , feature ๋ณ„๋กœ ํ˜•ํƒœ๊ฐ€ ๋‹ค๋ฅด๊ฑฐ๋‚˜, ์šฐ๋ฆฌ๊ฐ€ ๋ฐฐ์šด ํšŒ๊ท€๋งŒ ์“ฐ๋Š” ๊ฒƒ์ด ์•„๋‹Œ ๋ถ„๋ฅ˜ ๋“ฑ ๋‹ค์–‘ํ•œ ๋ชจ๋ธ์„ ํ•™์Šตํ•˜๋Š”๋ฐ ์“ฐ๋Š” ๋™๋ฃŒ๋“ค. ๋‚˜๋Š” ์ž‘๊ณ  ์†Œ์ค‘ํ•˜๊ณ  ๊น”๋”ํ•œ ๋ฐ์ดํ„ฐ .. ๋”๋ณด๊ธฐ
5ํšŒ ์ฐจ | 3/29 ํ™” 5ํšŒ ์ฐจ! ์ง€๋‚œ์ฃผ ๊ธˆ์š”์ผ์— ๊ฐ์ž ์„ ์ •ํ•œ ๋จธ์‹ ๋Ÿฌ๋‹ ํ”„๋กœ์ ํŠธ ์ฃผ์ œ์˜ ์ง„ํ–‰์ƒํ™ฉ(EDA, ๋ฐ์ดํ„ฐ ํ•ธ๋“ค๋ง, ์‹œ๊ฐํ™”, ๊ธฐ์ˆ ํ†ต๊ณ„, ๋ชจ๋ธ๋ง)์„ ๋ฆฌ๋ทฐํ–ˆ๋‹ค. ๊ธˆ์š”์ผ์€ ์ „์ฒด ๋ชจ์ž„์—์„œ 10๋ถ„์”ฉ ์ตœ์ข… ๋ฆฌ๋ทฐ! ๊ธฐ์กด์— ๊ณจ๋ž๋˜ ์ฃผ์‹ ์ข…๋ฃŒ ๊ฐ€๊ฒฉ ์˜ˆ์ธก์€ ๋Œ€ํšŒ๊ฐ€ ๋งˆ๊ฐ๋˜์–ด ์ด๊ณณ์ €๊ณณ ์ฝ”๋“œ ๋ฆฌ๋ทฐํ•œ ๊ณณ๋“ค์„ ๋’ค์ ธ๋„, ๋ชจ๋ธ๋ง์— ํ•„์š”ํ•œ ๋ฐ์ดํ„ฐ์…‹(stock_list.csv : ์ข…๋ชฉ ๋ฒˆํ˜ธ ๋ฐ์ดํ„ฐ, sample_submission.csv)์„ ๊ตฌํ•  ์ˆ˜๊ฐ€ ์—†๊ธฐ์— ๋ถ€๋“์ดํ•˜๊ฒŒ๋„ ๊ธฐ์กด์— ์บ๊ธ€ ์˜ˆ์ œ๋กœ ๊ณจ๋ž๋˜ ๋ณด์Šคํ„ด ์ง‘๊ฐ’ ์˜ˆ์ธก์œผ๋กœ ๋ณ€๊ฒฝํ–ˆ๋‹ค. ๋‚ด๊ฐ€ ์ผํ•˜๊ณ  ์‹ถ์€ ๋ถ„์•ผ๋„ ์ž์‚ฐ์šด์šฉ์˜ ๋กœ๋ณด์–ด๋“œ๋ฐ”์ด์ € ๋ถ€๋ฌธ์ด๊ธฐ ๋•Œ๋ฌธ์—, ๋‚˜์ค‘์— ๊ผญ ์ฃผ์‹ ๊ฐ€๊ฒฉ ์˜ˆ์ธก์„ ๊ตฌํ˜„ํ•ด ๋ณผ ์˜ˆ์ •์ด๋‹ค! https://dacon.io/competitions/official/235857/overview/descrip.. ๋”๋ณด๊ธฐ
3ํšŒ ์ฐจ | 3/22 ํ™” ๋ฒŒ์จ 3ํšŒ ์ฐจ~ ์ง€๋‚œ์ฃผ์— ์ง„ํ–‰ํ•œ ํƒ€์ดํƒ€๋‹‰ ์˜ˆ์ œ๊ฐ€ ๊ฐ€๋ฌผ๊ฐ€๋ฌผํ•˜๋‹ค.. ์˜ค๋Š˜์€ ์กฐ ํŽธ์„ฑ, ์กฐ์ •๋œ ์ปค๋ฆฌํ˜๋Ÿผ ์•ˆ๋‚ด, ๊ฐ ์กฐ๋ณ„ ์ฝ”ํ…Œ ๋ฆฌ๋ทฐ๋กœ ์ง„ํ–‰! ํŒŒ์ผ๋Ÿฟ ์ง„ํ–‰ ํ›„ ๋ ˆ๋ฒจ์— ๋”ฐ๋ผ ์ธ์›์„ ๋‚˜๋ˆ  3๊ฐœ์˜ ์กฐ๋กœ ์šด์˜ํ•˜๋ ค ํ–ˆ์œผ๋‚˜, ๊ฐ์ž์˜ ์‹ค๋ ฅ ํŽธ์ฐจ๊ฐ€ ํฌ๊ณ  ์Šคํ„ฐ๋””์˜ ํšจ์œจ์„ฑ์ด ๋–จ์–ด์ ธ ์šด์˜์ง„๊ณผ ์ƒ์˜ ํ›„ ์ปค๋ฆฌํ˜๋Ÿผ์„ ์•„๋ž˜์™€ ๊ฐ™์ด ์กฐ์ •ํ–ˆ๋‹ค. 11๋ช…์˜ ์ธ์›์ด ๋ชจ๋‘ ๋ฆฌ๋ทฐ๋ฅผ ์ง„ํ–‰ํ•˜๊ธฐ์—๋Š” ์‹œ๊ฐ„์ด ๋น ๋“ฏํ•ด์„œ ์‚ฌ๋‹ค๋ฆฌ ํƒ€๊ธฐ๋กœ ์ธ์›(4/4/3)์„ ๋‚˜๋ˆด๋‹ค. ๊ฐ ์กฐ์˜ ์กฐ์žฅ์€ ์ธํ›„๋‹˜, ์ฐฝํ˜„๋‹˜, ํฌ๊ฒฝ๋‹˜! ์ฃผ์— ํ•˜๋‚˜์”ฉ ์ง„ํ–‰ํ•˜๊ธฐ๋กœ ํ–ˆ๋˜ ์บ๊ธ€ ์˜ˆ์ œ ๋Œ€์‹  ๋ฉ€ํ‹ฐ์บ ํผ์Šค ์ˆ˜์—… ๋‚ด์šฉ๊ณผ ๋งž์ถ”์–ด, ์ˆ˜ํ–‰ํ‰๊ฐ€์šฉ์œผ๋กœ ์ œ๊ณต๋œ MovieLens์™€ ๊ธฐ์˜จ๋ถ„์„ ๋ฐ์ดํ„ฐ ์„ธํŠธ๋กœ ์•„๋ž˜์™€ ๊ฐ™์ด ๊ณต๋ถ€ํ•œ๋‹ค. 1. ์ˆ˜ํ–‰ํ‰๊ฐ€ ๋ฌธ์ œ๋“ค ๋ชจ๋‘ ํ•˜๋‚˜์”ฉ ๊ด€๋ จ๋œ ๋‚ด์šฉ์œผ๋กœ ์‹œ๊ฐํ™” ํ•˜๊ธฐ 2. 10๊ฐœ ์ด์ƒ์˜ ๋ฐ์ดํ„ฐ ํ•ธ๋“ค๋งํ•ด.. ๋”๋ณด๊ธฐ
2ํšŒ ์ฐจ | 3/18 ๊ธˆ ์ง€๋‚œ์ฃผ ํ™”์š”์ผ์— ๊ฐ€์ด๋“œํ•œ Kaggle์˜ ํƒ€์ดํƒ€๋‹‰ ์˜ˆ์ œ๋ฅผ ๊ฐ์ž ์ง„ํ–‰ํ•˜๊ณ , GitHub์— ๋ฌธ์„œํ™”ํ•ด์„œ ์˜ค๋Š˜ ๋ฆฌ๋ทฐํ–ˆ๋‹ค. ๊ฐ์ž ์–ด๋–ค ์‹์œผ๋กœ ๋ฐ์ดํ„ฐ๋ฅผ ๋ถ„์„, ๊ฐ€๊ณต, ๋ชจ๋ธ๋งํ–ˆ๋Š”์ง€ ์ ˆ์ฐจ์™€ ๋Š๋‚€ ์ , ๊ถ๊ธˆ์ฆ์„ ์ˆœ์ฐจ์ ์œผ๋กœ ๋ฐœํ‘œ ๋‹ค๋ฅธ ๋ถ„๋“ค์ด ํ•œ ๊ฑฐ ๋ณด๋ฉด์„œ ์‹ค์Šต/์‘์šฉ ๋งŽ์ด ํ•ด์•ผํ•œ๋‹ค ์ƒ๊ฐ.. ์ „์ฒด์ ์ธ ๊ตฌ์กฐ์— ๋Œ€ํ•œ ์ดํ•ด๊ฐ€ ๋ถ€์กฑํ•ด์„œ, ์™œ ์ด๋ ‡๊ฒŒ ์ถ”์ถœํ•˜๊ณ  ๊ฐ€๊ณตํ•˜๋Š”์ง€ ํŒŒ์•…ํ•˜๊ธฐ๊ฐ€ ์กฐ๊ธˆ ๊นŒ๋‹ค๋กœ์› ๋‹ค. ๊ทธ๋ž˜์„œ ์ƒ๊ฐํ•˜๊ณ  ๊ตฌ์กฐ๋ฅผ ์ •ํ™•ํžˆ ํŒŒ์•…ํ•˜๋ฉด ์•Œ ์ˆ˜ ์žˆ๋Š” ์—๋Ÿฌ๋‚˜ ๋‚ด์šฉ๋“ค์„ ์งˆ๋ฌธํ–ˆ..ใ…Žใ…Ž ํ˜ผ์ž ์‹ค์Šตํ•˜๋ฉด์„œ ์ „์ฒด์ ์ธ ์ ˆ์ฐจ๋ฅผ ํ›‘์œผ๋ฉด์„œ ๋ดค๋˜ ๋‚ด์šฉ๋“ค์ด ์ฃผ๊ฐ„ ์ˆ˜์—… ๋•Œ ๋‚˜์™€์„œ ์ดํ•ดํ•˜๊ธฐ ์ข‹์•˜๋‹ค. ์ฐธ์„ ์ธ์›์ด ์ด 10๋ช…์œผ๋กœ ์บ๊ธ€ ๋ฆฌ๋ทฐ์—๋งŒ 2์‹œ๊ฐ„์ด ๊ฑธ๋ฆผ.. ์ฝ”ํ…Œ ๋ฆฌ๋ทฐ์™€ ์กฐ ํŽธ์„ฑ์„ ๋‹ค์Œ์ฃผ ํ™”์š”์ผ๋กœ ๋ฏธ๋ฃจ๊ณ , ์ด๋ฒˆ ์ฃผ์ฒ˜๋Ÿผ ๊ฐ์ž ์ง„ํ–‰ํ•˜๊ธฐ๋กœ ํ–ˆ๋˜ ์บ๊ธ€ ์˜ˆ์ œ(๋ณด์Šคํ„ด ์ง‘๊ฐ’ ์˜ˆ.. ๋”๋ณด๊ธฐ

728x90