Week8 Day1 - ai-esg/our-history GitHub Wiki

ํŒ€ NLP 11์กฐ Week8 Day1

๋ชฉ์ฐจ

์ผ์ž

  • 2021.09.23

ํŒ€์›

  • ๋ฌธ์„์•”_T2075
  • ๋ฐ•๋งˆ๋ฃจ์ฐฌ_T2078
  • ๋ฐ•์•„๋ฉ˜_T2090
  • ์šฐ์›์ง„_T2137
  • ์œค์˜ํ›ˆ_T2142
  • ์žฅ๋™๊ฑด_T2185
  • ํ™ํ˜„์Šน_T2250

์ฃผ๊ฐ„ ์ผ์ •

ํ”ผ์–ด์„ธ์…˜

ํšŒ์˜๋ก ์ž‘์„ฑ tool ๊ฒฐ์ •

  • HackMD๋กœ ์ž„์‹œ ์ž‘์„ฑ.
  • ํšŒ์˜๋ก์€ ๋ชจ๋“  ์‚ฌ๋žŒ์ด ํ•จ๊ป˜ ์ž‘์„ฑํ•œ๋‹ค.

๋ชจ๋”๋ ˆ์ดํ„ฐ

  • ์ฃผ ๋‹จ์œ„
    • ์ˆœ์„œ๋Š” ๋ฒˆํ˜ธ์ˆœ

Ground rule

  • ํšŒ์˜์— ๋Šฆ์€ ๋ฉค๋ฒ„๊ฐ€ ์žˆ์„ ๋•Œ ๋ชจ๋”๋ ˆ์ดํ„ฐ๊ฐ€ ์ฑ™๊ฒจ์ฃผ๊ธฐ
  • ํ”ผ์–ด์„ธ์…˜ ์‹œ์ž‘ํ•  ๋•Œ ์งˆ๋ฌธ ์‚ฌํ•ญ ๋จผ์ € ๋…ผ์˜ํ•˜๊ธฐ
  • ํ”ผ์–ด์„ธ์…˜ ์‹œ์ž‘์€ 4์‹œ 30๋ถ„
    • ์ผ์ •์— ๋”ฐ๋ผ ํ•„์š”์‹œ ๋ณ€๊ฒฝ

๋ฉ˜ํ† ๋‹˜๊ป˜ ์งˆ๋ฌธ

  • Github repo ์–ธ์ œ ์ƒ์„ฑํ•ด์ฃผ๋‚˜์š”?

    • ํ†ก๋ฐฉ์— ์งˆ๋ฌธ ๋‚จ๊ธฐ๊ณ , ๋‹ต๋ณ€ ๋‚˜์˜ค๋ฉด ๋ง์”€ ๋“œ๋ฆด๊ฒŒ์š”.
  • ์–ด๋–ค ์—ฐ๊ตฌ ํ•˜์‹œ๋‚˜์š”?

    • A ํ•™์Šต ์ด๋ก ..?
      • ML, RL์˜ ํ•™์Šต ๋ฐฉ๋ฒ•์„ ์ˆ˜ํ•™์ ์œผ๋กœ ์ฆ๋ช…
  • ๋Œ€ํ•™์› ์–ด๋–ป๊ฒŒ ์„ ํƒํ•˜์…จ๋‚˜์š”?

    • A ์Šคํƒ€ํŠธ์—…์— ๋‹ค๋‹ˆ๋ฉด์„œ ํ•™์œ„์— ๋Œ€ํ•œ ์–ดํ•„์ด ์ข€ ๋ถ€์กฑํ•ด์„œ "๋ฌด์ง€์„ฑ์„ ์„ค๋ช…ํ•˜๊ธฐ ์œ„ํ•ด์„œ๋Š” ํ•™์œ„๊ฐ€ ํ•„์š”ํ–ˆ๋‹ค."
  • ๋ฐ•์‚ฌ๊นŒ์ง€ ํ•˜์‹ค ๊ฑด๊ฐ€์š”?

    • A ์œ ํ•™์„ ํ•˜๋ คํ–ˆ์œผ๋‚˜ ์ฝ”๋กœ๋‚˜ ์‹œ๊ตญ์ด๊ณ  ์ž˜๋งž๋Š” ๊ตญ๋‚ด ๊ต์ˆ˜๋‹˜์ด ๊ณ„์…”์„œ ๊ทธ์ชฝ์œผ๋กœ ๊ฐ€์‹ ๋‹ค๊ณ  ํ•˜๋„ค์šฉ
  • ๋Œ€ํ•™์› ์ƒํ™œํ•˜์‹œ๋ฉด์„œ ํ•˜๋ฃจ ์ผ๊ณผ๊ฐ€ ์–ด๋–ป๊ฒŒ ๋˜์‹œ๋‚˜์š”?

    • A ํ•œ๋‹ฌ์— 2๋ฒˆ ์ถœ๊ทผ..?
    • ๋ฐค๋‚ฎ์ด ๋ฐ”๋€Œ์‹ 
  • ์ธ๊ณต์ง€๋Šฅ์„ ์„ ํƒํ•˜๊ฒŒ ๋˜์‹  ๊ณ„๊ธฐ๊ฐ€ ๋ฌด์—‡์ธ๊ฐ€์š”?

    • A ๋‡Œ์— ๋Œ€ํ•œ ์—ฐ๊ตฌ๋ฅผ ํ•˜๊ณ ์‹ถ์€๋ฐ ์ด๊ฒƒ์„ ๋ชจ๋ธ๋งํ•  ๋„๊ตฌ๋กœ์„œ ๊ณต๋ถ€ํ•˜๋Š” ๊ฒƒ์œผ๋กœ ์ดํ•ดํ•จ
    • ๋ฐ”์ด์˜ค ์ ์ธ ์ ‘๊ทผ ์ธก๋ฉด์—์„œ AI๋ฅผ ์ ‘๊ทผํ•˜์‹ฌ
  • ๊ฑด๊ฐ•๊ด€๋ฆฌ๋Š” ์–ด๋–ป๊ฒŒ ํ•˜์‹œ๋‚˜์š”?

    • A ๊ฑด๊ฐ•๊ด€๋ฆฌ ์•ˆํ•˜์‹ ๋‹ค๊ณ ... ํ•˜๊ฒŒ ๋œ๋‹ค๋ฉด ์œ ๋„๋‚˜ ์ฃผ์ง“์ˆ˜๋ฅผ ํ•  ๊ฒƒ.
    • ์˜์–‘์ œ 8๊ฐœ์ •๋„ ๋“œ์‹ ๋‹ค๊ณ ..
  • ๋‡Œ ์‹œ๋ƒ…์Šค ์ง€๋„๋ฅผ ๊ทธ๋ฆฌ๋Š” ํ”„๋กœ์ ํŠธ์™€ ์—ฐ๊ตฌ๋ถ„์•ผ์˜ ๊ด€๊ณ„๊ฐ€ ์–ด๋–ป๊ฒŒ ๋˜๋‚˜์š”?

    • ๊ณ„์‚ฐ๋ก ์ž๋“ค์€ ๋‡Œ์˜ ์ง€๋„๋ผ๋Š” ๊ฐœ๋…์ด ๋ง์ด ์•ˆ๋œ๋‹ค๊ณ  ๋ณธ๋‹ค.
    • ๋งŒ์•ฝ ๊ฐ€๋Šฅํ•˜๋‹ค๊ณ  ํ•ด๋„ ์ปดํ“จํŒ… ํŒŒ์›Œ์—์„œ ํ•œ๊ณ„๊ฐ€ ์žˆ๋‹ค๊ณ  ๋ณธ๋‹ค.
  • Yann Lecun์ด self-supervised learning ๊ฐœ๋… ์„ค๋ช…ํ•˜๋ฉด์„œ ๊ฐ•ํ™”ํ•™์Šต์„ ์•ˆ์ข‹๊ฒŒ ๋งํ–ˆ๋Š”๋ฐ, ์–ด๋–ป๊ฒŒ ์ƒ๊ฐํ•˜์‹œ๋‚˜์š”?

    • ์‹ค์งˆ์ ์œผ๋กœ ๊ฐ•ํ™”ํ•™์Šต์€ ํšจ์œจ์„ฑ์ด ์ฆ๋ช…๋˜์ง€ ์•Š์•˜๋‹ค. ์ˆ˜๋ ดํ•˜๋Š” ๊ฒƒ์„ ์•„๋Š” ๊ฒƒ๊ณผ ์ˆ˜๋ ด์˜ ์†๋„๋Š” ๋ณ„๊ฐœ์˜ ๋ฌธ์ œ.
    • ๊ฐ•ํ™”ํ•™์Šต์ด ์กฐ๊ธˆ๋” Human likelyํ•œ ์ง€๋Šฅ์ด๋‹ค.
    • Reward is Enough ์•ŒํŒŒ์ œ๋กœ์˜ ์˜ˆ์‹œ. ์ด๊ธฐ๋Š” ๊ฒƒ์— reward๋ฅผ ์ฃผ๋Š” ๊ฒƒ๋งŒ์œผ๋กœ ํŒจํ„ด์ด ํ•™์Šต๋œ๋‹ค.
    • ์‹ค๋ฌด์ ์ธ ์ชฝ๊ณผ ๊ณ„์‚ฐ?์ชฝ์ธ ๋ถ€๋ถ„์— ๋Œ€ํ•œ ๊ฒฌํ•ด๊ฐ€ ๋‹ค๋ฅด๋‹ค๋Š” ๊ฒƒ์ด ํฐ ์ฐจ์ด
  • ์ทจ์—… ํ›„ ๋Œ€ํ•™์› ์ง„ํ•™์—์„œ๋Š” ํ•™์ ์„ ๋ณด๋Š”๊ฐ€?

    • ์„œ์šธ๋Œ€ ๊ธฐ์ค€์œผ๋กœ ํ•™์ ์„ ๋ณด๋Š”๊ฑด ์•„๋‹ˆ๋‹ค. (๊ต์ˆ˜By ๊ต์ˆ˜)
    • ์นด์ด์ŠคํŠธ๋Š” ์„œ๋ฅ˜์—์„œ ๋‹ค ๊ฑธ๋Ÿฌ์ง„๋‹ค.
  • ๋Œ€ํ•™์› ์ง„ํ•™์„ ์ถ”์ฒœํ•˜์‹œ๋Š”๊ฐ€?

    • ์„์‚ฌ์ •๋„๋Š” ์žˆ์–ด์•ผ ํ•œ๋‹ค. ๋˜‘๊ฐ™์ด ์ž˜ํ•˜๋ฉด ์„์‚ฌ๋ฅผ ๋ฝ‘๋Š”๋‹ค. ์„์‚ฌ๋ณด๋‹ค ํ›จ์”ฌ ์ž˜ํ•œ๋‹ค๊ณ  ์ž์‹ ์žˆ๊ฒŒ ๋งํ•ด๋ณด์ž.
    • ์‹ค๋ฌด๋กœ ์–ป๋Š” ๊ฒฝํ—˜์€ ์„์‚ฌ์™€ ๊ทผ๋ณธ์ ์œผ๋กœ ๋‹ค๋ฅด๋‹ค.
    • ๋ฐ•์‚ฌ๋Š” ๊ณผํ•˜๋‹ค.
  • ํ•™์‚ฌ๊ฐ€ ํšŒ์‚ฌ์—์„œ ๋ฆฌ์„œ์น˜ ๋Œ€์‹  ๊ฐœ๋ฐœ์„ ํ•  ๋•Œ ๊ฐ€์น˜ ์ฐจ์ด๊ฐ€ ์žˆ๋Š”๊ฐ€?

    • ๋ฆฌ์„œ์น˜๋ฅผ ์›ํ• ๊ฒฝ์šฐ์— ์ฐจ์ด๊ฐ€ ์žˆ๋Š” ๊ฒƒ์ด์ง€ ๊ฐ€์น˜์˜ ์ฐจ์ด๋ฅผ ๋‚˜๋ˆ„๊ธฐ๋Š” ์• ๋งคํ•œ ๋ถ€๋ถ„์ด ์žˆ๋‹ค๊ณ  ์ดํ•ดํ•จ.
    • ์—”์ง€๋‹ˆ์–ด ์ธก๋ฉด์—์„œ๋Š” ๊ฐœ๋ฐœ์ด ๋” ์ข‹์„ ์ˆ˜ ์žˆ๋‹ค.
    • ๋ณธ์ธ์ด ํ•˜๊ณ  ์‹ถ์€ ์ชฝ์ด ์„œ๋น„์Šค ์ชฝ์ธ์ง€ ์—ฐ๊ตฌ ์ชฝ์ธ์ง€ ํŒ๋‹จํ•˜๋Š” ๊ฒƒ์ด ์ข‹๋‹ค.
  • ์ธ๊ณต์ง€๋Šฅ ๋Œ€ํ•™์› ์ž…ํ•™๊ณผ ๋žฉ์‹ค์ด๋ž‘ ์ฐจ์ด

    • ๋ณ„ ์ฐจ์ด ์—†๋‹ค. ํ˜œํƒ, ์žฅํ•™๊ธˆ ์ •๋„๋งŒ ๋‹ค๋ฅด๋‹ค.
    • ์ˆ˜์—…์€ ๋‹ค๋ฅผ ์ˆ˜ ์žˆ๋‹ค. ๋žฉ์—์„œ ์ „๊ณต์ด ์„ž์ด๋ฉฐ ์ƒ๋Œ€ ์ „๊ณต์˜ ์ˆ˜์—…๋„ ๋“ค์–ด์•ผ ํ•  ์ˆ˜๋„ ์žˆ๋‹ค.
  • ์ธ๊ณต์ง€๋Šฅ ๋Œ€ํ•™์› TO

    • TO๋Š” ๊ณ ์ •๋ผ ์žˆ๋Š”๊ฒƒ์ด ์›์น™์ด๋‚˜ ์œตํ†ต์„ฑ์žˆ๊ฒŒ ํ•˜๊ธฐ๋„ ํ•œ๋‹ค.
      • ์นด์ด์ŠคํŠธ๋Š” ์ •ํ•ด์ ธ ์žˆ๋‹ค
      • ์„œ์šธ๋Œ€๋Š” ์ปจํƒ์ด ์ „๋ถ€
  • AI ๋ถ„์•ผ ๋Œ€ํ•™์›์—์„œ ์—ฐ๊ตฌ๋ฅผ ํ•  ๋•Œ OS๊ฐ™์€ CS ๊ด€๋ จ ์ง€์‹์ด ํ™œ์šฉ๋  ์ˆ˜ ์žˆ๋Š”์ง€, ํ™œ์šฉ๋  ์ˆ˜ ์žˆ๋‹ค๋ฉด ์–ด๋–ป๊ฒŒ ํ™œ์šฉ๋˜๋Š”์ง€.

    • DL ๊ณต๋ถ€ ๊ด€๋ จ ํ™˜๊ฒฝ์—์„œ ๋„์ปค, ์ฟ ๋‹ค ๋“ฑ์˜ ๋ฌธ์ œ ํ•ด๊ฒฐ์— ๋„์›€์ด ๋˜๋Š”๊ฑฐ?
    • CS ์ง€์‹์ด ๊ทธ๋‚˜๋งˆ ํ™œ์šฉ๋˜๋Š” ๋ถ€๋ถ„์€ ์ „์ฒ˜๋ฆฌ ๋“ฑ์—์„œ ๋ฉ€ํ‹ฐ ํ”„๋กœ์„ธ์‹ฑํ•˜๋Š” ๋ถ€๋ถ„? (๋…๋ฆฝ์ ์ธ ๋ถ€๋ถ„์—์„œ์˜ ์“ฐ๋ž˜๋“œ ํ™œ์šฉ๋“ฑ)
    • ์—ฐ๊ตฌ์— ์ง์ ‘์ ์œผ๋กœ ํ™œ์šฉ๋˜์ง€ ์•Š์ง€๋งŒ ๋„์›€์„ ์ค„ ์ˆ˜ ์žˆ๋Š” ์ •๋„

์งˆ๋ฌธ ๊ณต์œ 

  • Github Discussion์„ ์ด์šฉ?

๋ฉ˜ํ† ๋ง

  • ์ˆ˜ํ•™, ๋ฌผ๋ฆฌ, ํ†ต๊ณ„ + ์ปด๊ณต ์„์‚ฌ๊ฐ€ ๋” ์ทจ์ง์— ์œ ๋ฆฌํ•˜๋‹ค (์ฃผ๊ด€์  ์˜๊ฒฌ. ๋งน์‹ ํ•˜์ง€๋Š” ๋ง์ž.)
  • MRC QA์ธ๋ฐ ๋ฐฑ๊ทธ๋ผ์šด๋“œ๊ฐ€ ์ข€๋” ์žˆ๋‹ค..? (์ž˜ ์ดํ•ด๋ชปํ–ˆ๋„ค์šฉ)
  • ์ทจ์—…, ์ง„ํ•™ ๋ชจ๋‘ ๋„์›€์„ ์ฃผ์‹ค ์ˆ˜ ์žˆ๋‹ค.
    • DM์œผ๋กœ ๋ฌผ์–ด๋ณด๋ฉด ๋‹ต๋ณ€์ฃผ์‹ ๋‹ค๊ณ  ํ•˜์…จ์Œ.
  • ์ˆ˜ํ•™๊ณผ๊ฐ€ ์œ ๋ฆฌํ•œ ๋ถ€๋ถ„์ด ์ถฉ๋ถ„ํžˆ ๋งŽ๋‹ค. (ํŠนํžˆ ํ†ต๊ณ„)
  • ๋ชจ๋ธ์€ ๋„ˆ๋ฌด ์ž์ฃผ ๋ฐ”๋€Œ๋Š” ๋ถ€๋ถ„์ด ์žˆ์–ด์„œ, ์ „์ฒ˜๋ฆฌ ๋‹จ๊ณ„์˜ ์งˆ๋ฌธ๋„ ๋งŽ๋‹ค. ex) TF-IDF, Word2Vec ๋“ฑ
  • ์•„์ด๋””์–ด๋ฅผ ์„œ๋น™ํ•˜๋Š” ๊ฒƒ

๋ฉ˜ํ† ๋ง ์ผ์ • ๋ฐ ๊ถŒ์žฅ์‚ฌํ•ญ

  • ๋งค์ฃผ ๋ชฉ์š”์ผ ์˜คํ›„ 5์‹œ
  • ๊ฐ•์˜์—์„œ ๋‹ค๋ฃฌ ๋‚ด์šฉ์€ ๊ฐ€๋Šฅํ•˜๋ฉด ํ”ผ์–ด์„ธ์…˜์—์„œ ์ถฉ๋ถ„ํžˆ ๊ณ ๋ฏผ ํ›„ ๋ฉ˜ํ† ์—๊ฒŒ ์งˆ๋ฌธ.
  • ํ…Œํฌ๋‹‰์ด๋‚˜ ๊ฐ•์˜์—์„œ ๋‹ค๋ฃจ์ง€ ์•Š์€ ๋‚ด์šฉ์€ ๋ฐ”๋กœ ์งˆ๋ฌธํ•ด๋„ ์ข‹๋‹ค.
  • ์˜ค์ „๋ณด๋‹ค๋Š” ์ƒˆ๋ฒฝ. ์˜คํ›„ 3์‹œ ์ดํ›„์— DM ๊ฐ€๋Šฅ.