Purpose
Datatoys ํจํค์ง์ bloodTest ๋ฐ์ดํฐ๋ฅผ ์ด์ฉํด์, โ์ด ์ฝ๋ ์คํ ๋กค ์์น๊ฐ ๋์์ฌ๋์ด ๋นํ ๋ฐ ๋ํ๊ด์งํ์ ์ง๋จ๋ฐ์ ๊ฒฝ์ฐ๊ฐ ๋ง์๊ฐ? / ๋ฐ์ํ๋ ์ ๋๊ฐ ์ฑ๋ณ๋ณ๋ก ์ฐจ์ด๊ฐ ์๋๊ฐโ ๋ผ๋ ์ฃผ์ ์ ์ฐ๊ตฌ๋ฅผ ์ํ ํด ๋ณด๊ฒ ์ต๋๋ค.
๋ณธ ๋ฌธ์์์๋ ML์ ๋ค๋ฃจ์ง ์์ต๋๋ค.
Data Loading and Modification
Load Data
๋ฐ์ดํฐ๋ฅผ ๋ถ๋ฌ์ต๋๋ค. ์ํ๋ ๋ฐ์ดํฐ ์ ๋ก๋/์ ํ ํ Import Data๋ Load Example Data๋ฅผ ํด๋ฆญํ๋ฉด ๋ฉ๋๋ค.
๋ณธ ์์ ์์๋ Datatoys ํจํค์ง์ bloodTest(1,000,000 x 9) ๋ฐ์ดํฐ๋ฅผ ์ฌ์ฉ ํ ์์ ์ ๋๋ค.
๋ฐ์ดํฐ ๋ก๋ ํ ์ ์คํฌ๋ฆฐ์ท๊ณผ ๊ฐ์ ํ๋ฉด์ด ๋์ค๊ฒ ๋ฉ๋๋ค.
Update Data
์ฃผ์ ์ ๋ง๊ฒ, ํ์ํ ๋ฐ์ดํฐ(SEX, TCHOL, ANE, STK)๋ฅผ ์ ์ธํ๊ณ ์ฒดํฌ๋ฅผ ํด์ ํฉ๋๋ค.
๋ ์ ๋ฐ์ดํฐ ์ค, SEX, ANE, STK๊ฐ์ด Factor ์ด๋ฏ๋ก ํด๋น ๊ฐ์์ Factor๋ก ๋ณํํด์ผ ํฉ๋๋ค.
ํ๋จ์ Update Data๋ฅผ ํด๋ฆญํ๊ณ ,
์์ ๊ฐ์ด, ๊ฐ์์ ๋ฐ์ดํฐ์ ๋ง๊ฒ ์ค์ ํ ๋ค์ ํ๋จ์ Apply Changes ๋ฒํผ์ ํด๋ฆญํ๋ฉด ๋ฐ์ดํฐ ํํ๊ฐ ๋ณ๊ฒฝ๋ฉ๋๋ค.
์ฐธ๊ณ ๋ก, Integer๊ณผ Numeric์ ์ฐจ์ด๋ Integer์ ์ ์๋ง ํํํ ์ ์๊ณ , Numeric์ ์์ซ์ ํํ์ด ๊ฐ๋ฅํ๋ค๋ ๊ฒ์ ๋๋ค.
Visualization
๊ฐ๋ตํ ๋ฐ์ดํฐ์ ๋ถํฌ๋ฅผ ํ์ ํ๊ธฐ ์ํด, Statgarten์ ํฌํจ๋ Visualization ๊ธฐ๋ฅ(colorpen ํจํค์ง)๋ฅผ ํ์ฉํฉ๋๋ค.
๋ฐ์ดํฐ๋ฅผ ๋ถ๋ฌ์ค๋ฉด, ๊ธฐ๋ณธ์ ์ผ๋ก Vis ํญ์ผ๋ก ์ด๋๋๊ฒ ๋ฉ๋๋ค. ์คํฌ๋กค์ ๋ด๋ ค X, Y์ ์ํ๋ ๊ฐ์ ๋๋๊ทธํฉ๋๋ค.
์ด ๊ทธ๋ํ๋, ๋ํ๊ด์งํ ์ฌ๋ถ์ ๋ฐ๋ฅธ ์ด ์ฝ๋ ์คํ ๋กค์ Boxplot์ผ๋ก ๋ํ๋ธ ๊ฒ์ด๊ณ ,
์ด ๊ทธ๋ํ๋ ๋นํ ์ฌ๋ถ์ ๋ฐ๋ฅธ ์ด ์ฝ๋ ์คํ ๋กค์ Boxplot์ผ๋ก ๋ํ๋ธ ๊ฒ์ ๋๋ค.
<Vis ์ถ๊ฐ>
๊ทธ๋ํ ์ ํฐ ์ฐจ์ด๊ฐ ์๋ ๊ฒ์ ์์์ผ๋, ํต๊ณ์ ์ผ๋ก๋ ๊ทธ๋ฌํ์ง ์์๋ณด๊ฒ ์ต๋๋ค.
EDA
EDA์ Variablesํญ์์๋ ์กด์ฌํ๋ column์ ๋ํ ๊ฐ๋จํ ์์ฝ์ ๋ณด์ค ์ ์์ต๋๋ค.
๋นํ๊ณผ ๋ํ๊ด์งํ ๋ณ์์์, 0(์ง๋จ ๋ฐ์ ์ด๋ ฅ ์์)์ด ๊ฐ 92.2%, 93.7%๋ก, 1(์ง๋จ ๋ฐ์ ์ด๋ ฅ ์์)์ด ๊ฐ 7.8%, 6.3%์์ ์ ์ ์์ต๋๋ค.
์ฐ์ ๋ณ์๋ ๋ถํฌ ๋ํ ๋ณผ ์ ์๋๋ฐ, EDA์ Distribution ํญ์์ ์ฐ์ ๋ณ์๋ฅผ ์ ํํ๋ฉด ์ ๊ทธ๋ฆผ๊ณผ ๊ฐ์ ๋ถ์ ๊ฒฐ๊ณผ๊ฐ ๋์ค๋ ๊ฒ์ ๋ณด์ค ์ ์์ต๋๋ค.
๋นํ ์ฌ๋ถ๋ฅผ ๊ธฐ์ค์ผ๋ก Table 1๋ฅผ ๊ตฌํด ๋ณด์์ต๋๋ค. Table 1์ด๋, ์ฐ๊ตฌ์์ ์ฃผ์ ๋ณ์๋ฅผ ํฌํจํ๋ ์ ์ฒด ์ฐ๊ตฌ ํ๋ณธ์ ๋ํ ๊ธฐ์ ํต๊ณ๋์ ๋ํ๋ธ ํ์ ๋๋ค.
๋นํ์ ๊ธฐ์ค์ผ๋ก, ์ด ์ฝ๋ ์คํ ๋กค์ p๊ฐ์ด 0.05๋ณด๋ค ์์ผ๋ฏ๋ก, ๋นํ ์ฌ๋ถ๊ณผ ์ด ์ฝ๋ ์คํ ๋กค ์์ ๊ด๊ณ๊ฐ ์์ต๋๋ค.
๋ํ๊ด์งํ ์ฌ๋ถ๋ฅผ ๊ธฐ์ค์ผ๋ก Table 1๋ฅผ ๊ตฌํด ๋ณด์์ต๋๋ค.
๋ํ๊ด์งํ ์ฌ๋ถ๋ฅผ ๊ธฐ์ค์ผ๋ก, ์ด ์ฝ๋ ์คํ ๋กค์ p๊ฐ์ด 0.05๋ณด๋ค ์์ผ๋ฏ๋ก, ๋ํ๊ด์งํ ์ฌ๋ถ๊ณผ ์ด ์ฝ๋ ์คํ ๋กค ์์ ๊ด๊ณ๊ฐ ์์ต๋๋ค.
๋ค์์ผ๋ก, ์ฑ๋ณ์ ๋ฐ๋ฅธ Table 1์ ๋๋ค.
๋จ์ฑ๊ณผ ์ฌ์ฑ์ ๋นํ, ๋ํ๊ด์งํ ๋ฐ์ ์ ๋๊ฐ ์ ์๋ฏธํ ์ฐจ์ด๊ฐ ์์์ ์ ์ ์์ต๋๋ค.
๊ตฌ์ฒด์ ์ผ๋ก, ๋นํ๊ณผ ๋ํ๊ด์งํ ๋ฐ์ ์ ๋ ๋ชจ๋ ์ฌ์ฑ์์ ๋ ๋์์ต๋๋ค.