Caption Content Review Findings 61 KO - teamswyg/laya-tools GitHub Wiki
61: ๋จ์ ์ค๋ช ๋ฌธ๊ณผ ๊ตฌํ์ ์๋ฏธ ๊ฒํ
๊ธฐ์กด59์ ๋จ์ 615๊ฐ ๊ฒํ ํญ๋ชฉ์ ๋ชจ๋ ์ฝ๊ณ ์ํ๋ฅผ ๊ธฐ๋กํ์ต๋๋ค. pending์ ๋ฌด์กฐ๊ฑด ํต๊ณผ๋ก ๋ฐ๊พธ๋ ์์
์ ์๋๋๋ค. ์ด๋ฒ ๋ฒ์์์ 446๊ฐ๋ ์ ํ๋ ๊ทผ๊ฑฐ์ ์ผ์นํ๊ณ ,94๊ฐ๋ ์ถฉ๋ํ๋ฉฐ,10๊ฐ๋ ์๊ตฌ ๋ฒ์๊ฐ ๋น ์ก๊ณ ,65๊ฐ๋ ๋ฏธํด๊ฒฐ์
๋๋ค. ์ด๋ ํ๋ณด๋ฅผ ์น์ธํ๊ฑฐ๋ ์ ํ์ต ์ ๋ต์ ๋ง๋ ๊ฒฐ๊ณผ๊ฐ ์๋๋๋ค.
๋ฒ์๋ ๊ธฐ์กด15๊ฐ์กฑ/60๋ถ๋ชจ/180ํ๋ณด ์์น/49์์ค ID/60๊ฐ ์๋ก ๋ค๋ฅธ ์ค๋ช
๋ฌธ SHA/114 literal์
๋๋ค. ๋ถ๋ชจ๋ง๋ค2ยท3ยท4ํ๋ณด๊ฐ ์๋ ์๋11ยท38ยท11์ด๊ณ ์๋ ์์๋ฅผ ์ ์งํ์ต๋๋ค. ๊ธฐ์กด60์123๊ฐ overlay๋ฅผ ์์ ํ๊ฑฐ๋ ๋ค์ ์์ฑํ์ง ์์์ต๋๋ค. ์๋59์738๊ฐ pending snapshot๋ ๊ทธ๋๋ก์ด๋ฉฐ,61์ ์ overlay๊ฐ615๊ฐ ํญ๋ชฉ์ ์ค๋ช
ํฉ๋๋ค.
| ๊ธฐ์กด59 ํญ๋ชฉ ์ข ๋ฅ | ๊ทผ๊ฑฐ์ ์ผ์น | ์ถฉ๋ | ๋ฒ์ ๋๋ฝ | ๋ฏธํด๊ฒฐ |
|---|---|---|---|---|
| ์์ฒญ์ ๊ณ์ฝ ํํ60 | 42 | 0 | 3 | 15 |
| ํ๋ณด ๊ตฌํ์ ์ ํ๋ ์์กด ๊ด๊ณ ์ฝ๊ธฐ180 | 180 | 0 | 0 | 0 |
| ์ค๋ช ๋ฌธ์ด ์๊ธฐ ๊ตฌํ์ ์ถฉ์คํ๊ฐ180 | 177 | 0 | 0 | 3 |
| ์ค๋ช ๋ฌธ์ด ์์ฒญ์ ์ถฉ์กฑํ๋๊ฐ180 | 32 | 94 | 7 | 47 |
| ๊ณ์ฝ literalยท๊ด์ฐฐ ํ๋15 | 15 | 0 | 0 | 0 |
| ํฉ๊ณ615 | 446 | 94 | 10 | 65 |
๊ด์ฐฐ ํ๋์ ๋ถ์ ยท๊ฒฝ๊ณ ์กฐ๊ฑด์ ๋ณ๋360๊ฐ record๋ก ๋จ๊ฒผ์ต๋๋ค. ๊ธฐ์กด ํญ๋ชฉ, ๋ถ๋ชจ๋ ํ๋ณด๊ฐ ๋์ด๋ ๊ฒ์ ์๋๋๋ค. ๊ด์ฐฐ ์ถ180๊ฐ๋ ์ผ์น16/๋๋ฝ117/๋ฏธํด๊ฒฐ47, ๋ถ์ ยท๊ฒฝ๊ณ ์ถ180๊ฐ๋ ์ผ์น121/๋๋ฝ10/๋ฏธํด๊ฒฐ49์
๋๋ค. ์ ์ฒด975๊ฐ record ๋ชจ๋ ๊ฐ์ ๊ธฐ์กด4์ถ๊ณผ5๊ฐ ์ํ ์ดํ๋ฅผ ์ฌ์ฉํฉ๋๋ค. source_closure_only๋ ๊ธฐ์กด closure ํญ๋ชฉ์ ๊ธฐ๋กํ๊ธฐ ์ํด source_fidelity ์ถ์ ์ฐธ์กฐํ์ง๋ง caption_fidelity_assessment=false์ด๊ณ ,177๊ฐ์ ์ค์ fidelity ์ผ์น ์์๋ ํฌํจ๋์ง ์์ต๋๋ค.
๊ฐ์ฅ ์ค์ํ ๊ฒฐ๊ณผ๋ ํ๋ฆฐ ๊ตฌํ์ ์ ํํ ์ค๋ช ํ๋ ๋ฌธ์ฅ๋ ๋ง๋ค๋ ์ ์ ๋๋ค. ์๋ฅผ ๋ค์ด ๊ด๋ฆฌ์์๊ฒ๊น์ง ๊ฒ์ฆ์ ์๊ตฌํ๋ ์ค๋ช , ๋ชจ๋ ์ค๋ณต์ ์ง์ฐ๋ ์ค๋ช , ์คํจ ๋ release๋ฅผ ์๋ตํ๋ ์ค๋ช ์ ์ค์ ์ฝ๋์ ์ถฉ์คํ ์ ์์ต๋๋ค. ๊ทธ๋ ๋ค๊ณ ๊ด๋ฆฌ์ bypass, ์ธ์ ์ค๋ณต๋ง ์ ๊ฑฐ, ํ๋ ํ ๋ชจ๋ terminal ๊ฒฐ๊ณผ์ release๋ฅผ ์๊ตฌํ๋ ์์ฒญ์ ์ถฉ์กฑํ์ง๋ ์์ต๋๋ค.177๊ฐ fidelity ์ผ์น๋ฅผ177๊ฐ ์ ๋ต์ด๋ ์น์ธ ํ๋ณด๋ก ์ฝ์ผ๋ฉด ์ ๋ฉ๋๋ค.
์๋ ๋ฌธ์ฅ์ ๋ฏธํด๊ฒฐ ๊ตฌ๊ฐ๋ ๋ณด์กดํ์ต๋๋ค.
Reject only ...ํํ์ closed-window์ nondecreasing paraphrase๋ ์์ ํ ๊ฑฐ์ ๊ท์น์ธ์ง, ๊ฑฐ์ ์ ํ์์กฐ๊ฑด๋ง ๋งํ๋์ง ์ฝ๊ธฐ๊ฐ ๊ฐ๋ฆฝ๋๋ค. ๊ธ์ ยทempty ์กฐ๊ฑด์ ์์ค์์ ๊ฐ์ ธ์ ๋ฌธ์ฅ์ ๊ฐํํ์ง ์์์ต๋๋ค.- rotate-left์ ์ค๋ช ์ ์ฒซ ๊ฐ์ ๋ค๋ก ์ฎ๊ธฐ๋ ํ๋์ ํํํ์ง๋ง ์์ฒญ์ด ๋ช ์ํ empty ์ฒ๋ฆฌ๊น์ง ํํํ์ง ์์ต๋๋ค. ์ฝ๋์ empty guard๋ fidelity ๊ทผ๊ฑฐ์ผ ์ ์์ด๋ ์ค๋ช ๋ฌธ์ coverage๋ฅผ ๋์ ํ์ง ์์ต๋๋ค.
- snapshot ์ค๋ช
๋ค์ copy/alias/nil/empty/์ฆ์ ์
๋ ฅ ๋ณ๊ฒฝ์ ํํํ์ง๋ง ์์ฒญ์
never panic์ ํํํ์ง ์์ coverage์ observation ๋๋ฝ์ ๊ธฐ๋กํ์ต๋๋ค. - quoted-delimiters์ ์งง์ ์์ฒญยท์ค๋ช ์ ์ผ๋ฐ์ ์ธ error/clearing output์ ํํํด๋ exact Syntax/Bounds/ASCII enum๊ณผ no-panic ๊ด์ฐฐ์ ์ ๋ถ ํํํ์ง ์์ต๋๋ค. ๋ช ํํ๊ฒ ๋งํ ๋ถ๋ถ์ escapeยทpartial-output ์ถฉ๋์ ๊ธฐ๋กํ๋, ๊ธฐ์กด ๋ค unknown ๋ถ๋ชจ๋ฅผ ์ ๋ต์ผ๋ก ์น๊ฒฉํ์ง ์์์ต๋๋ค.
- graph-mutates-input์
erase root edges๋ ๋ ผ๋ฆฌ์ Count=0์ธ์ง ์ ์ฅ๋Children[4]๊ฐ๊น์ง ์ง์ฐ๋์ง ๋ถ๋ถ๋ช ํฉ๋๋ค. ์ค์ ์์ค๋ Count๋ง0์ผ๋ก ํ๊ณ graph Count๋ฅผ ์ค์ด๋ฉฐ Children ๊ฐ์ ์ง์ฐ์ง ์์ต๋๋ค. ์ด ์ธ ์์น์ fidelity๋ ๋ฏธํด๊ฒฐ์ ๋๋ค. ์ด๋ ์ฝ๊ธฐ๋ ์ ๋ ฅ์ ๋ณ๊ฒฝํ๋ค๋ ์ฌ์ค์ unchanged-input ์์ฒญ๊ณผ ์ถฉ๋ํ๋ฏ๋ก coverage๋ ๋ณ๋๋ก ํ๋จํ์ต๋๋ค.
๊ด์ฐฐํ ์ ์๋ ๋ฒ์๋ฅผ ํผํฉํ์ง ์์์ต๋๋ค. Legacy checker๋ ๋ณต์ ํ ์
๋ ฅ๊ณผ ๋ฐํ ์ํ์ค๋ฅผ slices.Equal๋ก ๋น๊ตํ๋ฉฐ panic์ด๋ ์
๋ ฅ ๋ณ๊ฒฝ์ unknown์ผ๋ก ์ฒ๋ฆฌํฉ๋๋ค. Nil/empty, aliasing, capacity์ allocation์ ๊ฒ์ฆํ์ง ์์ต๋๋ค. Snapshot์ ๋
ผ๋ฆฌ์ ๊ธธ์ด0..4์์ nil/empty, ๋ณต์ฌ ์งํ ์
๋ ฅ, ๊ฒฐ๊ณผ์ ์ด ๋ค ์
๋ ฅ, ์
๋ ฅ์ ์ด ๋ค ๊ฒฐ๊ณผ๋ฅผ ๊ตฌ๋ถํฉ๋๋ค. Inspector๊ฐ ์ํํ๋ ์์ฐจ ์ฐ๊ธฐ์ ํ๋ณด์ ์
๋ ฅ ๋ณ๊ฒฝ์ ๋ณ๊ฐ์ด๋ฉฐ spare capacityยทwhole-memory๋ฅผ ๊ด์ฐฐํ ๊ฒ์ ์๋๋๋ค.
Lifecycle์ ์ค์ context/resource ๋์ ๊ธธ์ด0..8 enum ์ด๋ฒคํธ์ ๋ฐํ Events/Count/Status๋ฅผ ๊ด์ฐฐํฉ๋๋ค. Finish/fail before begin ๊ฐ์ ์ง์ ์ ์ธ ์กฐ๊ฑด์ ์ ์คํจ label์ด ์๋๋๋ค. Quoted๋ ์ค๋ฅ์ ์ ํํ enum๊ณผ Count ๋ฐ8๊ฐ Tokens๋ฅผ ๋ฐ๋ก ๋น๊ตํ๋ฉฐ, ์ฌ๋ฌ ์ค๋ฅ ์กฐ๊ฑด์ด ๋์์ ์๊ธฐ๋ ๋ชจ๋ ๋ฌธ์์ด์ precedence๋ฅผ ์๋ก ์ฆ๋ช ํ์ง ์์์ต๋๋ค. Graph๋ ์ ํจํ1..4๋ ธ๋์ root0 ํ์๊ณผ error enum, ์ ์ฒด post-call graph ๊ฐ์ ๊ด์ฐฐํ๋ฉฐ, ์๋ชป๋ count/index๋ ์ง์ ์คํจ๋ก ๋จ๊น๋๋ค.
๊ทผ๊ฑฐ๋ ๊ณตํต catalog,15๊ฐ family shard์ manifest์ ์์ต๋๋ค. Original decoded request/caption์ SHAยทUTF-8 ๊ธธ์ดยท์ ํํ byte quote ๋ฒ์์ official60 JSON pointer๋ฅผ ์ฐ๊ฒฐํ์ต๋๋ค. ๋ฌผ๋ฆฌ์ ์ธ raw source span98๊ฐ๋ฅผ ๊ณต์ ํด์ ๊ฐ์ enum ์ ์ธ์ ๊ฐ๋ฆฌํค๋ ์ฌ๋ฌ ID๋ฅผ ํฉ์น๊ฑฐ๋ ์ฝ๋ ๋ณธ๋ฌธ์ ๋ฐ๋ณต ๋ณต์ฌํ์ง ์์์ต๋๋ค. ๋
ผ๋ฆฌ์ declaration catalog link105๊ฐ, observer/type line11๊ฐ, literal source15๊ฐ๊ฐ ์๊ณ ๊ธฐ์กด49 root/172 component ๊ด๊ณ๋ฅผ ์ ์งํฉ๋๋ค. Input/Want์ ๊ธฐ์กด authored literal์ด๋ฉฐ ์ per-vector Got์ ๋ง๋ค๊ฑฐ๋ ํ๋ณด๋ฅผ ์คํํ์ง ์์์ต๋๋ค.
์คํ ์ฅ๋ถ๋ ๋ค์ ์์
์ ๊ตฌ๋ถํฉ๋๋ค. ์ค์ source/text review๋1ํ, record ์ง๋ ฌํ ์คํ์1ํ ์ฑ๊ณต/์คํจ0์
๋๋ค. ์ง๋ ฌํ ๋๊ตฌ์ ์ค๋น ๋น๋๋2ํ ์ค ์ฒซ map trailing-comma ๋ฌธ๋ฒ ์ค๋ฅ1ํ ํ ์ฑ๊ณต1ํ์์ต๋๋ค. ์์ฑ์ byte verifier๋2ํ ์ค ์ฒซ ์์ฒด ์ซ์ ํ์
๊ฐ์ ์ค๋ฅ(number_bytes)1ํ ํ helper๋ง ์์ ํ์ฌ ์ฑ๊ณตํ์ต๋๋ค. Assessment/catalog/shard/manifest๋ฅผ ๋ค์ ์์ฑํ๊ฑฐ๋ ํ๋จ์ ๋ฐ๊พธ์ง ์์์ต๋๋ค. ์ด์ reference QA1ํ ์ฑ๊ณต ๋ฐ ์ค๋น61 ์ ์์์ metadata ์์ฑ1ํ ์ฑ๊ณต์ ๋ณ๋ ๊ธฐ๋ก์
๋๋ค.
์์ฑ์ byte ๊ฒ์ฌ์์๋975 record digest/ํ์ ํ๋,615+360 ์ผ๋์ผ index,1860 text-reference pointer/SHA/๊ธธ์ด ๋์กฐ,984 quote ๋ฒ์,98 raw source span์ ํ์ธํ์ต๋๋ค. ๋ณ๋ ๋ ๋ฆฝ byte ๊ฒํ ์ CI๋ ๋ถ๋ชจ ์์ ์ด ์ํํฉ๋๋ค. ์ด byte ๋ฌด๊ฒฐ์ฑ์ ์๋ฏธ ํ๋จ์ ๊ฐ๊ด์ ์ ๋ต์ด๋ ํ์ต ์๊ฒฉ์ ์ฆ๋ช ํ์ง ์์ต๋๋ค. ์์ฑ์ receipt, ์ค์ review/์์ฑ ์ฅ๋ถ, byte ๊ฒ์ฌ ์ฅ๋ถ, ๋น๋ ์ฅ๋ถ๋ฅผ ๊ตฌ๋ถํด ์ฝ์ด์ผ ํฉ๋๋ค.
๊ฒํ ์๋ ์๋ caption/fixture/CLI ๋ฐ ์ค๋น61 ์์ฑ๊ธฐ์ ์ ์์ ๋
๋ฆฝ์ด์ง๋ง protocol60 ์ค๋นยท์ ํ ๊ฒํ ์ด๋ ฅ๊ณผ metadata/outcome ๋
ธ์ถ์ด ์์ต๋๋ค. ๋ฐ๋ผ์ blind ํ๊ฐ ๋๋ ๋
๋ฆฝ ๋ฐ์ดํฐ ์์ฑ ์์ฒ์ ์ฃผ์ฅํ์ง ์์ต๋๋ค. ์ด ๊ฒํ ๋ Codex ํ์
์์์ AI๊ฐ ์ํํ source/text ์ฝ๊ธฐ์
๋๋ค. model_calls=0ยทpaid_calls=0๋ ๋ณ๋ judge ์ถ๋ก /API/benchmark ํ๋ก์ธ์ค๋ฅผ ์คํํ์ง ์์๋ค๋ ๋ป์
๋๋ค. ์ด ๋ํ์ AI ์ฌ์ฉ๋์ด๋ ๋น์ฉ์ด0์ด๋ผ๋ ๋ป์ด ์๋๋ฉฐ ์ผ๋ฐ ํ์
๋น์ฉ์ ์ธก์ ํ์ง ์์์ต๋๋ค.
๊ธฐ์กด subset unknown18/์ ์ฒด21, ๊ทธ๋ฃน17/known-containing16, original72/216๊ณผ closed-window/clamp-window ๊ณต์ ๊ทธ๋ฃน8์ ๊ทธ๋๋ก ์ ์งํ์ต๋๋ค. ์ labelยทrolesยทfitยทweightsยทprotected-final ์ฝ๊ธฐ๋0์ด๊ณ training_ready=false์
๋๋ค. ๊ธฐ์กด synthetic_single_pipeline/no_roles_plan ๋ฐ ๋ฐ์ดํฐ ์์ฒ ํธํฅ ๋ฌธ์ ๋ฅผ ์ด ๋ฌธ์ฅ ๊ฒํ ๋ก ํด์ํ๋ค๊ณ ์ฃผ์ฅํ์ง ์์ต๋๋ค. ์15์ ์ฅ์ gate๋ ๋ชจ๋ ๊ฐ๋ฐ fit์2400๊ฐ๋ฅผ ์๊ตฌํ๋ ์กฐ๊ฑด์ ์ถ๊ฐํ์ง ์์๊ณ , ๋ณ๋ protected-final์ ๋๋ฉ์ธ๋ณ ๋
๋ฆฝ ์์ฒญ ์ต์2400๊ฐ ๋ชฉํ๋ ์ ์งํฉ๋๋ค.