Hertz AI wiki - 100-hours-a-week/2-hertz-wiki GitHub Wiki
๋ณธ ๋ฌธ์๋ TUNING ์๋น์ค์ ์ธ๊ณต์ง๋ฅ ๋ชจ๋ธ ๋ฐ ์์คํ
๊ตฌ์ฑ์ ๋ํ ๊ธฐ์ ๋ฌธ์๋ก, ๋ชจ๋ธ ์ ์ , ์ถ๋ก ์ฑ๋ฅ ์ต์ ํ ๋ฐฉ์, ๊ทธ๋ฆฌ๊ณ ์ ์ฒด ์๋น์ค ์ํคํ
์ฒ ์ค๊ณ ์ ๋ต์ ์ค์ฌ์ผ๋ก ์์ฑ๋์์ต๋๋ค. ์๋น์ค ์ด์ ๋ฐ ๊ธฐ์ ๊ณ ๋ํ๋ฅผ ์ํ ๊ธฐ์ค ๋ฌธ์ ์ญํ ์ ์ํํ๋ฉฐ, ์ค์ง์ ์ธ ์์คํ
๊ตฌํ ๋ฐ ์ด์์ ํ์ฉ๋ ์ ์์ต๋๋ค.
TUNING์ MZ์ธ๋๋ฅผ ์ค์ฌ์ผ๋ก ํ ๊ด๊ณ ๊ธฐ๋ฐ ์์ ๋งค์นญ ๋ฐ ์ปค๋ฎค๋ํฐ ๋์ค์ปค๋ฒ๋ฆฌ ํ๋ซํผ์ ๋๋ค. ์ฌ์ฉ์์ ์ฑํฅ, MBTI, ๊ด์ฌ์ฌ ๋ฑ์ ๊ธฐ๋ฐ์ผ๋ก ์ ์ฌํ ๋๋ ๊ถํฉ์ด ๋ง๋ ์ฌ๋๋ค์ ์์ฐ์ค๋ฝ๊ฒ ์ฐ๊ฒฐํด์ฃผ๋ ์๋น์ค๋ก, ๋ค์๊ณผ ๊ฐ์ ๊ธฐ๋ฅ์ ํฌํจํฉ๋๋ค:
- ์ ์ ๊ฐ ์ฑํฅ ๋งค์นญ ๊ธฐ๋ฐ ์ถ์ฒ ์์คํ
- ์ฑํ ๋ด ์ ํด ํํ ๊ฐ์ง๋ฅผ ์ํ ํด๋ฆฐ๋ด
- ๋งค์นญ ๊ฒฐ๊ณผ๋ฅผ ๊ฐ์ฑ์ ์ผ๋ก ์ฝํ ์ธ ํํ๋ ๋ด์ค ์์ฑ ๊ธฐ๋ฅ
TUNING์ ํต์ฌ ์ฐจ๋ณ์ฑ์ ์์ฐ์ด ๊ธฐ๋ฐ์ ์ธ๊ณต์ง๋ฅ ๊ธฐ์ ์ ํตํด '๊ด๊ณ์ ์๊ฐ'์ ์ ์๋ฏธํ๊ฒ ์ ๋ฌํ๋ ๊ฒ์
๋๋ค.
์ด๋ฅผ ์ํด ๋ค์ ์ธ ๊ฐ์ง AI ๋ชจ๋ธ์ด ์๋์ ๊ฐ์ ์ญํ ์ ์ํํฉ๋๋ค
๊ธฐ๋ฅ | AI ๋ชจ๋ธ | ์ญํ |
---|---|---|
์ ์ ์ถ์ฒ | jhgan/ko-sbert-nli | ์ ์ ์ฑํฅ์ ๋ฌธ์ฅ ์๋ฒ ๋ฉ ํ ์ ์ฌ๋ ๊ธฐ๋ฐ ์ถ์ฒ ์ํ |
์ฝํ ์ธ ์์ฑ | Qwen/Qwen2.5-7B-Instruct-1M | ๋งค์นญ ๊ฒฐ๊ณผ๋ฅผ ๋ด์ค ์ฝํ ์ธ ๋ก ๋ณํ (LLM ํ์ฉ) |
๋ชจ๋๋ ์ด์ | beomi/KcELECTRA-small-v2022 | ์ค์๊ฐ ์ฑํ ์ ํด ํํ ํํฐ๋ง ๋ฐ ๋ถ๋ฅ ์ฒ๋ฆฌ |
๊ฐ ๋ชจ๋ธ์ ์๋น์ค ๊ธฐ๋ฅ๋ณ๋ก ๋ถ๋ฆฌ๋์ด ๋ฐฐํฌ๋๋ฉฐ, FastAPI๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ํด๋ผ์ฐ๋ ํ๊ฒฝ์์ ํจ์จ์ ์ผ๋ก ์ด์๋ฉ๋๋ค.
- API ์๋ํฌ์ธํธ ๋ชฉ๋ก ๋ฐ ๊ธฐ๋ฅ
- API ์ /์ถ๋ ฅ ๋ช ์ธ
- API ์ญํ ๋ฐ ์ฐ๋ ๊ด๊ณ
- API ํธ์ถ ๋ฐ ์๋ต ์์
- ๊ธฐ์กด ๋ชจ๋ธ ์ถ๋ก ์ ์ฑ๋ฅ ์งํ
- ์ฑ๋ฅ ๋ณ๋ชฉ ์์ ๋ฐ ์์ธ ๋ถ์
- ์ต์ ํ ๊ธฐ๋ฒ ๋ฐ ์ ์ฉ ๊ณํ
- ์ต์ ํ ์ ์ฉ ํ ๊ธฐ๋ ์ฑ๋ฅ ์งํ
- ๋ชจ๋ํ ์ ์ฉ ํ ์๋น์ค ์ํคํ ์ฒ ๋ค์ด์ด๊ทธ๋จ
- ๊ฐ ๋ชจ๋ ์ฑ ์ ๋ฐ ๊ธฐ๋ฅ
- ๋ชจ๋ ๊ฐ ์ธํฐํ์ด์ค ์ค๊ณ
- ๋ชจ๋ํ ๊ธฐ๋ํจ๊ณผ ๋ฐ ์ฅ์
- ๋ชจ๋ํ๋ ์ค๊ณ์ ์๋น์ค ์๋๋ฆฌ์ค ๋ถํฉ ๊ทผ๊ฑฐ
- ํ์ฌ ์๋น์ค ๊ตฌ์กฐ ์์ฝ
- LLM ๋ชจ๋ธ์ LangChain ๋ฏธ์ฌ์ฉ ๊ทผ๊ฑฐ
- LangChain ํ์ฅ ๊ฐ๋ฅ ๋ฐฉ์
- LLM ์ด์ธ ๋ชจ๋ธ์ ์๋น์ค ์๊ตฌ ์ถฉ์กฑ ๊ทผ๊ฑฐ ๋ฐ ํ์ฅ ๋ฐฉํฅ์ฑ
- ํ์ฌ ์๋น์ค ๊ตฌ์กฐ ์์ฝ
- RAG ๋ฏธ์ ์ฉ ๊ฒฐ์ ์ ๊ธฐ์ ์ ๊ทผ๊ฑฐ
- ์ ํํ ๋ฐฉ์์ด ์๋น์ค ๋ชฉํ์ ๋ถํฉํ๋ ์ด์
- ํฅํ RAG ๋์ ๊ฐ๋ฅ์ฑ ๋ฐ ํ์ฅ ๋ฐฉํฅ
- MCP ๋์ ๋ฐฐ๊ฒฝ
- MCP ๋์ ์ค๊ณ๋
- MCP ํ๋กํ ์ฝ ์ ๋ฉ์์ง ํฌ๋งท
- ๊ธฐ๋ํจ๊ณผ์ ์ ์ฉ์์ ์ด๋ ค์ ๋ฐ ๊ทน๋ณต ๋ฐฉ์
- ์ฅ๊ธฐ์ ํ์ฅ์ฑ ๋ฐ ๊ธฐ๋ฅ ๊ตฌํ์ ๋ฏธ์น๋ ์ํฅ
- ๊ฒฐ๋ก ๋ฐ ๊ณ ์ฐฐ
- ํ์ฅ์ฑ์ ๊ณ ๋ คํ ๋ฐฐํฌ ์ํคํ ์ฒ ๋ค์ด์ด๊ทธ๋จ
- ์ฌ์ฉํ ์ธํ๋ผ ๊ธฐ์ ๋ฐ ์๋น์ค ๋ช ์ธ
- ๋ชจ๋ํฐ๋ง ๋์ ์งํ ๋ชฉ๋ก ๋ฐ ์์ง/์๊ฐํ ๋ฐฉ๋ฒ
- ๊ฐ์ด ๋ถํ ํ ์คํธ/์๋ฎฌ๋ ์ด์ ๊ฒฐ๊ณผ
- ์๋น์ค์ ํฅํ ์ฑ์ฅ ๋ฐ ์ด์์ ๋ํ ๊ธฐ์ฌ ์ ๋ง
- ์ ์ฒด ์๋น์ค ์ํคํ ์ฒ
- ๋จ๊ณ๋ณ ์ค๊ณ ์ ์ฉ ๊ฒฐ๊ณผ ์์ฝ
- ์์คํ ์ฑ๋ฅ ๋ฐ ํ์ง ํ๊ฐ
- ํ๋ก์ ํธ ์ํ ํ๊ณ ๋ฐ ํ๊ฐ
- ํฅํ ๊ฐ์ ๋ฐฉ์
- ์ข ํฉ ๊ฒฐ๋ก