๐ ํ๋ก์ ํธ ๊ธฐ๊ฐ : 2022.04.20-2022.06.08
- ๊น๋น : KoBERT๋ฅผ ํ์ฉํ ์ด์ง ๋ถ๋ฅ ๋ฐ ๋ฉํฐ๋ ์ด๋ธ ๋ถ๋ฅ ๋ชจ๋ธ ๊ตฌํ, ์์คํ ์๋ํ๋ฅผ ์ํ ํ์ผ ๊ตฌ์ฑ
- ๋ ธ์ง์ฐ : KoBERT๋ฅผ ํ์ฉํ ํค์๋ ์ถ์ถ ๋ชจ๋ธ ๊ตฌํ, ์ค์ค์๊ฐ ๋ฐ์ดํฐ ์ ๊ณต์ ์ํ ์์คํ ์๋ํ ๊ตฌํ
- ๋ฐ์งํธ : KoBERT๋ฅผ ํ์ฉํ ์ด์ง ๋ถ๋ฅ ๋ฐ ๋ฉํฐ๋ ์ด๋ธ ๋ถ๋ฅ ๋ชจ๋ธ ๊ตฌํ, ํค์๋ ์นดํ ๊ณ ๋ฆฌ ๋ถ๋ฅ
- ์ ํ์ง
- ํ์์
<์์นด์ ๊ด๋ จ๋ ๋ฆฌ๋ทฐ ๋ฐ ํ๊ธฐ๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ํ ๋ถ์ ์๋ํ ์์คํ ๊ตฌ์ถํ๊ธฐ>
์ต๊ทผ ๋ฐฉ์ก ๋ฟ๋ง์ด ์๋๋ผ ์ ํ๋ธ, ๊ฐ์ธ ๊ทธ๋ฆฌ๊ณ ์ธํ๋ฃจ์ธ์ ๋ฑ์ ์ํฅ๋ ฅ์ด ์ปค์ง๊ณ ์์ต๋๋ค. ์ด๋ ๊ธฐ์ ์ ์ด๋ฏธ์ง์ ํฐ ์ํฅ๋ ฅ์ ๋ผ์น๊ธฐ ๋๋ฌธ์ B2C ์ฌ์ ์์๋ ์ด์ ๋ํ ๊ด๋ฆฌ๊ฐ ํ์ํฉ๋๋ค. ํ์ง๋ง ์ํฅ๋ ฅ์ ๋ฏธ์น๋ ๊ฐ์ธ์ด ๋ง๊ณ ๋์๋ค๋ฐ์ ์ผ๋ก ์ฝํ ์ธ ๊ฐ ์ ๋ก๋๊ฐ ๋๊ธฐ ๋๋ฌธ์ ์ด๋ฅผ ์ ๋์ ์ผ๋ก ํ์ ํ๊ธฐ๊ฐ ์ด๋ ค์ธ ๋ฟ๋ง ์๋๋ผ ์ธ๋ ฅ์ผ๋ก ๋์ํ๊ธฐ๋ ์ด๋ ต๋ค๊ณ ํ๋จํ์ต๋๋ค. ์ด์์ ๊ดํ ๋น ๋ฅด๊ณ ์ ์ฐํ ๋์ฒ๋ฅผ ์ํด ๋ค์ํ ์ฑ๋์์ ์์นด ๋ฆฌ๋ทฐ๋ค์ ์์งํ๊ณ ๋ถ์ํ์ต๋๋ค.
- ์์นด์ ์ต๊ทผ ์ด์๋ฅผ ํ์ ํ ์ ์๋ ๊ธ์์น ํค์๋๋ฅผ ์ ๊ณต
- ์์นด์ ๋ํ ์ธ์์ด ํ์ฌ ๊ธ์ ์ ์ธ์ง, ๋ถ์ ์ ์ธ์ง ์ ์ ์๋ ๊ฐ์ฑ๋ถ์์ ํตํ ๊ธ/๋ถ์ ํค์๋ ๊ธฐํ
- ๋ถ์ ์ ์ธ ์๊ฒฌ์ ๊ธฐ๋ฐ์ผ๋ก ์ฃผ์ ๋ถ๋ง ํค์๋๋ฅผ ํ์ ํ ์ ์๋๋ก ์นดํ ๊ณ ๋ฆฌ๋ก ๋ถ๋ฅ
- ์ด๋ค ๋ด์ฉ์ด ๋ถ์ ์ ์ธ์ง ์ ํํ ๋ฐ์ดํฐ๋ฅผ ์ ๊ณตํ๊ณ ์, ์ค์ ๋ฆฌ๋ทฐ ๋ฐ์ดํฐ ์๋ณธ ์ ๊ณต
-
Tools
Language : Python
IDE : Google Colaboratory
Library : Pytorch
Platform : GCP, Airflow, Kafka, Bigquery, Google Data Studio
๐ฆ ๐งก๊น๋น : ์ข์ ์ฌ๋๋ค๊ณผ ํ๋ก์ ํธ ์งํํ๊ฒ ๋์ด์ ์ฆ๊ฑฐ์ ์ต๋๋ค. ํ์ฌ ์ ์ ์์ค ์ด์์์๋ ๊ฐ๋ฅํ ์๋๋ฅผ ๋ง์ด ํด๋ณผ ์ ์์ด์ ์ฑ์ฅ์ ๋์์ด ๋์์ต๋๋ค. ์ถํ์ multi-label classification์ ๋ฏธ์งํ๋ ๋ถ๋ถ์ ๊ฐ์ ํ์ฌ ๋์ฌ ๊ฒฐ๊ณผ๋ ๊ธฐ๋๊ฐ ๋๋ค์!
๐น ๐ ๋ ธ์ง์ฐ : โ์์นด์ ๋ํ ๋ฆฌ๋ทฐ ๋ถ์โ์ด๋ ํฅ๋ฏธ๋ก์ด ์ฃผ์ ๋ฅผ ๊ฐ์ง๊ณ ์ฒ์์๋ ์ด๋ป๊ฒ ํ์ด๊ฐ์ผ ํ ์ง ๋ง๋งํ์ง๋ง, ๋ง์์ด ๋ง๋ ํ์๋ค๊ณผ ํจ๊ป ์ญ๊ฒฝ์๋ ๊ตดํ์ง ์๊ณ ๋๊น์ง ๋งค์งํ์ฌ ์ข์ ๊ฒฐ๊ณผ๋ฅผ ๋์ถํ ๋ง์กฑ์ค๋ฐ ํ๋ก์ ํธ์์ต๋๋ค.
๐ง โค๏ธ ๋ฐ์งํธ : ํ๋ก์ ํธ ์งํ ๊ณผ์ ์ค์ ๋ง์ ์ด๋ ค์๋ ์์์ง๋ง ๋์์๋ ์ํต์ผ๋ก ๋๊น์ง ๋ฌธ์ ํด๊ฒฐ์ ํ๋ ๊ณผ์ ์์ ๋ง์ด ๋ฐฐ์ ์ต๋๋ค. ๋ถ์กฑ ์ ๋ฅผ ์ด๋์ด์ฃผ๊ณ ๋ง์ด ๋ฐฐ์ธ ์ ์๊ฒ ํด์ค ์ฐ๋ฆฌ ํ์ ๋ชจ๋ ๊ฐ์ฌํฉ๋๋ค.
๐ฑ ๐์ ํ์ง : ์บ์ฒ๋ ํ๋ฌ ๋จ์งํ ์๊ฐ๋์ ๋ค์ฏ ํ์์ด ๊ณต๋ค์ฌ ๋ง๋ ์์คํ ํ๋ก์ ํธ์ ๋๋ค. ํจ๊ณผ์ ์ผ๋ก ์ ์ ์ ํผ๋๋ฐฑ์ ์์งํ๊ณ ์ข ํฉํ๊ณ ์ ํ๋ ๋ง์ ๋ถ๋ค๊ป ์บ์ฒ๊ฐ ๋์์ด ๋์์ผ๋ฉด ์ข๊ฒ ์ต๋๋ค. ๊ณ ์ํ์ ์ฐ๋ฆฌ ์บ์ฒํ ๊ฐ์ฌํฉ๋๋ค!
๐ธ ๐ ํ์์ : 6๊ฐ์ ์ ์ฝ๋ ํ ์ค ๋ชฐ๋๋ ์ ๊ฐ ๋ฉ์ง ์ฌ๋๋ค์ ๋ง๋ ์ถฉ๋งํ ๊ฒฐ๊ณผ๋ฌผ์ ๋ด๊ธฐ๊น์ง, ํ๋ฅ ์ฆ๊ฑฐ์ด๋ฐ๋ค ์ ์ตํ๊ธฐ๊น์ง ํ ์๊ฐ์ด์์ต๋๋ค. โ์บ์ฒโํ์ ๊ฐ์ฑ๋ถ์ํ๋ฉด โPositiveโ 100%, ํค์๋ ์ถ์ถํ๋ฉด โ์ฆ๊ฑฐ์โ์ด ๋์ฌ๊ฑฐ๋ ํ์ ์ด ๋๋ค์. ์บ์ฒ ์์ฌ, ํด์ฌ ์์ด!