
โ๋ฐ์ดํฐ ์ ๋ฌธ๊ฐโ๋ก ์ปค๋ฆฌ์ด๋ฅผ ๊ฐ๋ฐํ๊ณ ์ถ์ ์ ๋ค์ ์ ๋๋ค. ์คํํธ์ ์์ 1๋ ๊ฐ NLP ๋ชจ๋ธ๋ง ๋ฐ ์ด์ปค๋จธ์ค ๋ฐ์ดํฐ ๋ถ์, ๋ฐ์ดํฐ ๋ฆฌํฌํธ๋ฅผ ๋ฐ๊ฐํ๋ฉฐ ์์ฅ์์ ์ธ์ฌ์ดํธ๋ฅผ ๋์ถํ๋ ๋ฐฉ๋ฒ์ ์ตํ์์ต๋๋ค.
์ดํ, ์ผ์ฑ์ ์์์ ๋ง์ผํฐ๋ก์จ ๊ตญ๋ด ๊ฐ์ ์์ฅ์ ํ๊ฒ ๋ง์ผํ ์ ์ํํ๋ฉฐ ์คํ๋ผ์ธ ํ๋ก๋ชจ์ ์ ๋ฐ๋ฅธ ๋งค์ถ ์ฑ๊ณผ๋ฅผ ๋ถ์ํ๋ฉฐ ์ ๋ต์ ํ๋ก๋ชจ์ ์ ์ด์ํด ์์ต๋๋ค.
์ฒซ ์ง์ฅ์ โ์ โ์ ๋ณด๊ณ ์ ํํ์๊ณ ๋๋ฒ์งธ ์ง์ฅ์ โ์งโ์ ๋ณด๊ณ ์ ํํ์์ต๋๋ค. ๋ ๊ฐ์ง ๋ชจ๋ ๊ฐ์ง ๊ฒฝํ์ด์๊ณ ๋ฐฐ์์ด ์์์ต๋๋ค. ์ด์ ๋ ๊ธ๋ณํ๋ ๊ธฐ์ ํ๋ฆ์ ์ฆ๊ฐ์ ์ผ๋ก ๋์ํ๋ ๊ธฐ์ ์ ๊ธฐ์ ์ธ ํ ์ค์์ ๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ๋ก ๊ทผ๋ฌดํ๋ฉฐ โ์ง์ โ ์ ์ฒด์์ ๋ณด๋์ ๋๋ ์ ์๋ ์กฐ์ง์์ ๊ทผ๋ฌดํ๊ณ ์ถ์ด ์ง์ํ๊ฒ ๋์์ต๋๋ค.
โพย Email [email protected]
โพย GITHUB https://github.com/silver96
โพ Velog https://velog.io/@eunpro/series
https://ninieun.notion.site/Jeong-Da-Eun-fdbc9ef498f246f19744aa0b14301ea4
์ผ์ฑ์ ์ - ๊ตญ๋ด ์์ ๋ง์ผํ (ํ๋ก๋ชจ์ ๊ธฐํ ๋ฐ ์ด์)
โ ๊ธฐํ ๋ฐ ์คํ
โ ๋ฐ์ดํฐ ๋ถ์
์คํ ์ด๋งํฌ - ๋จธ์ ๋ฌ๋ ์์ง๋์ด ๋ฐ ๋ฐ์ดํฐ ๋ถ์๊ฐ (2021.08 ~ ํ์ฌ)
โ ML ํ๋ก์ ํธ
ํ ํฝ ๋ชจ๋ธ๋ง
Python Gensim SageMaker Glue S3 Athena
ํค์๋ ์ถ์ถ
Python Gensim S3 Athena
๊ฐ์ฑ๋ถ์ ๋ชจ๋ธ๋ง
Python Pytorch SageMaker Colab
ํํ์ ๋ถ์์ ์ํ ๋จ์ด ์ฌ์ ๊ตฌ์ถ
โ Tableau
โ ์งํ ์ ๋ฌด
๋ฐ์ดํฐ ๋ถ์ ๊ฒฐ๊ณผ ์ ๊ณต ์๋น์ค
์ํ๋ ๋ฐ์ดํฐ์ ๋ถ์๊ฒฐ๊ณผ๋ฅผ seaborn์ ํ์ฉํ ๊ทธ๋ํ๋ก ์์ฑํ์ฌ ์ด๋ฉ์ผ๋ง ์๋น์ค ์ ๊ณต
์ฃผ๊ธฐ์ ์ผ๋ก ์ํ๋์ด์ผ ํ ์์ ์ jenkins๋ฅผ ์ฌ์ฉํด ๋น๋ํ์ฌ ํ๋ธ๋ก๋ก ์๊ฐํ
workflow : jenkins โ glue โ tableau
๋ฐ์ดํฐ ์์ง๋์ด์ ๊ณต๋ฐฑ์ผ๋ก ์์ง ๊ณผ์ ๋ฌธ์ ์ฌํญ ์์ธ ํ์ ๋ฐ ํด๊ฒฐ์ฑ ์ ์
์ฃผ๋ก ๋ค๋ฃฌ ์๋น์ค: lambda, step function, glue, event bridge
โ SQL
โ ML
์๊ณ์ด ์์ธก ๋ชจ๋ธ๋ง ๊ฒฐ์ธก๊ฐ ์ฒ๋ฆฌ
๋ฐ๋ฐ๋ฅ๋ถํฐ ์์ํ๋ ๋ฅ๋ฌ๋
โ NLP
โฃ
โฃ
โ DataScience
์๊ด๋ถ์(Correlation Analysis)