AI Data Engineer
- ๐ฐ๐ท South Korea
- On-site
- 44 months ago
- AI
- RLHF
- Machine Learning
- Natural Language Processing
ํ ์๊ฐ
LG AI Research๋ EXAONE์ ๋น๋กฏํ ๋๊ท๋ชจ AI ๋ชจ๋ธ ์ฐ๊ตฌยท๊ฐ๋ฐ์ ํตํด ์ฐ์ ์ ๋ฐ์ AI ์ ํ์ ์ ๋ํ๊ณ ์์ต๋๋ค.ย
์ฐ๊ตฌ ๊ณผ์ ์์๋ ํ์ต ๋ฐ์ดํฐ์ , ๋ฒค์น๋งํฌ, ๋ชจ๋ธ, ๋ก๊ทธ ๋ฑ ๋งค์ฐ ๋ค์ํ ์ ํ์ ๋๊ท๋ชจ ๋ฐ์ดํฐ๊ฐ ๋์์์ด ์์ฑยทํ์ฉ๋๊ณ ์์ต๋๋ค.
ย
Product Unit ์ฐํ Data Governanceํ์ LG AI์ฐ๊ตฌ์์ ๋ค์ํ ์ฐ๊ตฌ ๋ฐ์ดํฐ๋ฅผ ์ฒด๊ณ์ ์ผ๋ก ์ฐ๊ฒฐํ๊ณ , ์ฐ๊ตฌ์๊ฐ ๋ฐ์ดํฐ๋ฅผ ํจ๊ณผ์ ์ผ๋ก ํ์ฉํ ์ ์๋ ํ๊ฒฝ์ ๋ง๋ค๊ณ ์์ต๋๋ค. ํ์ต ๋ฐ์ดํฐ์ , ๋ฒค์น๋งํฌ, ๋ชจ๋ธ ๋ฐ ์คํ ๋ก๊ทธ๋ฅผ ๊ด๋ฆฌํ๋ ํตํฉ ๋ฐ์ดํฐ ํ๋ซํผ์ ๊ฐ๋ฐํ๊ณ , ๋ฐ์ดํฐ์ ํ์ง/๋ฒ์ /๊ฒ์/๊ณต์ /์ ๊ทผ์ ์ด๋ฅผ ์์ฐ๋ฅด๋ ๋ฐ์ดํฐ ๊ฑฐ๋ฒ๋์ค ์ฒด๊ณ๋ฅผ ๊ตฌ์ถํฉ๋๋ค.
ย
์ฐ๊ตฌ์ง, ์์ง๋์ด์ ํ์ ํ์ฌ ๋ชจ๋ธ๊ณผ ๋ฐ์ดํฐ์ ๋ฌธ์ ๋ฅผ ์ ์ํ๊ณ , ๋ฐ์ดํฐ ์ ๋ต ์๋ฆฝ๋ถํฐ ํ์ดํ๋ผ์ธ ๊ตฌํ๊ณผ ๊ฐ์ ํจ๊ณผ ๊ฒ์ฆ๊น์ง ํจ๊ปํ Data Scientist๋ฅผ ์ฐพ๊ณ ์์ต๋๋ค. ๊ผผ๊ผผํ ๋ถ์๊ณผ ๋ฐ๋ณต์ ์ธ ์คํ์ ํตํด ์ด๋ค ๋ฐ์ดํฐ๊ฐ ๋ชจ๋ธ์ ์ฑ๋ฅ์ ๋์ด๋์ง ํ์ธํ๊ณ , ๊ทธ ๊ฒฐ๊ณผ๋ฅผ ์ฌ๋ฌ ์ฐ๊ตฌ๊ณผ์ ์์ ํ์ฉํ ์ ์๋ ๋ฐฉ๋ฒ๊ณผ ์์คํ ์ผ๋ก ๋ฐ์ ์์ผ ๋๊ฐ ๋ถ์ ์ฐพ์ต๋๋ค.
์ํ ์ ๋ฌด
- ๋ชจ๋ธ ํ๊ฐ, ๋ฐ์ดํฐ ์์ฑยท์ ๋ณ, ํ์ต ์คํ์ ์ฐ๊ฒฐํ๋ Agent ๊ธฐ๋ฐ Self-Improvement AI Pipeline ์ค๊ณยท๊ฐ๋ฐ
- Foundation Model์ Benchmark๋ณ ์ฑ๋ฅ๊ณผ Failure case๋ฅผ ๋ถ์ํ์ฌ ๊ฐ์ ๊ณผ์ ๋์ถ
- ํ์ตยทํ๊ฐ์ฉ Synthetic Data ๋ฐ Reference Data ์์ฑยท์ ์ ์ Data Quality Control ์๋ํ
- SFT, RLHF, RLVR ๋ฑ Mid-training, Post-training ๊ณผ์ ์์ ๋ฐ์ดํฐ ๊ตฌ์ฑ๊ณผ ํ์ต ๋ฐฉ๋ฒ์ ๋ฐ๋ฅธ ์ฑ๋ฅ ๋ณํ๋ฅผ ๋น๊ตยท๊ฒ์ฆํ๊ณ ๊ฐ์ ๋ฐฉํฅ ์๋ฆฝ
- AI Data Platform ์ด์ ๋ฐ On-Prem Data Storage, Data Versioning, Experiment Tracking ๋ฑ์ feature ๊ณ ๋ํ
์ง์์๊ฒฉ
- Machine Learning, Deep Learning์ ๋ํ ์ดํด์ AI ๋ชจ๋ธ ๋ฐ ๋ฐ์ดํฐ ๊ด๋ จ ์ฐ๊ตฌยท๊ฐ๋ฐ ๊ฒฝํ
- LLM ๊ธฐ๋ฐ Agent System์ ๊ตฌ์กฐ์ Agent Orchestration ์ ๋ฐ์ ๋ํ ์ดํด
- ๋ชจ๋ธ๊ณผ ๋ฐ์ดํฐ์ ๋ฌธ์ ๋ฅผ ์ ์ํ๊ณ , Experimental Design๊ณผ Statistical Analysis๋ฅผ ํตํด ์ฑ๋ฅ ๊ฐ์ ์ผ๋ก ์ฐ๊ฒฐํ ์ ์๋ ์ญ๋
- ์ฐ๊ตฌ์ธยท์์ง๋์ด์ ํ์ ํ์ฌ ๊ธฐ์ ๊ณผ์ ๋ฅผ ๊ตฌ์ฒดํํ๊ณ , ๊ตฌํยท๊ฒ์ฆ์ ๊ฑฐ์ณ ์ค์ ์ฐ๊ตฌ ๋๋ ์๋น์ค ํ๊ฒฝ์ ์ ์ฉํ ๊ฒฝํ
- Code Agent๋ฅผ ์ ๊ทน์ ์ผ๋ก ํ์ฉํ๊ณ ๊ฒฐ๊ณผ๋ฌผ์ ํ์ง์ ๊ฒ์ฆํ์ฌ ๊ฐ๋ฐ ์์ฐ์ฑ์ ๋์ผ ์ ์๋ ์ญ๋
ย
์ฐ๋์ฌํญ
- NLP, ML, AI๋ถ์ผ Top-tier ํ์ ๋ํ(์: ACL, EMNLP, NeurIPS, ICML, ICLR, AAAI ๋ฑ) 1์ ์ ๋ ผ๋ฌธ ๊ฒ์ฌ ๊ฒฝํ
- ๋๊ท๋ชจ Training Dataset ๊ตฌ์ถ ๋ฐ Data Curation์ ํตํด ์ค์ ๋ชจ๋ธ ์ฑ๋ฅ์ ๊ฐ์ ํ ๊ฒฝํ
- Benchmark, Automated Evaluator ๋๋ Reward ModelยทVerifier๋ฅผ ์ง์ ๊ฐ๋ฐํ ๊ฒฝํ
- AI ์๋น์ค ๋๋ Data Platform์ Production ํ๊ฒฝ์ ๋ฐฐํฌยท์ด์ํ๋ฉฐ ์์ ์ฑ, ์ฒ๋ฆฌ ์๋, ๋น์ฉ์ ๊ฐ์ ํ ๊ฒฝํ
ย
์ ํ ์ ์ฐจ
- ์๋ฅ์ฌ์ฌ โ 1์ฐจ ๊ธฐ์ ์ธํฐ๋ทฐ(์จ๋ผ์ธ) โ LG Way Fit Test & ์ฝ๋ฉํ ์คํธ โ 2์ฐจ ๊ธฐ์ ์ธํฐ๋ทฐ(์จ๋ผ์ธ) โ 3์ฐจ ๊ธฐ์ ์ธํฐ๋ทฐ (์จ๋ผ์ธ) โ ์ต์ข ์ธํฐ๋ทฐ(์จ์ฌ์ดํธ)
ย
ํ์ฌ LG AI์ฐ๊ตฌ์์ ๋ณ์ญ์ง์ ์
์ฒด๊ฐ ์๋์ผ๋ก, ์ ๋ฌธ์ฐ๊ตฌ์์ ์ฑ์ฉ ๋ฐ ์ ์ง์ด ๋ถ๊ฐํจ์ ์๋ ค๋๋ฆฝ๋๋ค.
์ง์ ์ ๋ฌธ์ ๊ฐ ์์ ๊ฒฝ์ฐcareers@lgresearch.ai๋ก ๋ฌธ์ ๋ถํ๋๋ฆฌ๊ฒ ์ต๋๋ค.
AI Data Engineer ยท LG AI Research