팀 NLP 11조 Week15 Day3

목차

• 피어세션
  • 구글 메일
  • 수작업 규칙
    • 현 entity 상황
    • 최종 entity 계획
    • 검증 계획
    • 파일 나누기
    • 변환 가이드
    • NER

일자

• 2021.11.10 수

팀원

• 문석암_T2075
• 박마루찬_T2078
• 박아멘_T2090
• 우원진_T2137
• 윤영훈_T2142
• 장동건_T2185
• 홍현승_T2250

주간 일정

피어세션

구글 메일

Relation map

가이드 라인 링크

• [email protected] 문석암
• [email protected] 박아멘
• [email protected] (장동건)
• [email protected] 박마루찬
• [email protected] 홍현승
• [email protected] 우원진
• [email protected] 윤영훈

수작업 규칙

현 entity 상황

{
    'TERM': 3140, 
    'DATE': 473, 
    'QUANTITY': 741, 
    'PERSON': 375, 
    'OCCUPATION': 144, -> PERSON done!
    'CIVILIZATION': 500 -> NONE  done!
    'ARTIFACT': 294 -> NONE      done!
    'COUNTRY': 107, -> NONE      done!
    'ORGANIZATION': 569,
    'THEORY': 123 -> NONE        done!
    'ANIMAL': 21, -> 삭제
    'STUDY_FIELD': 417, 
    'LOCATION': 32 -> NONE       done!
    'EVENT': 48 -> NONE          done!
    'TIME': 14 -> NONE           done!
    'MATERIAL': 21 -> NONE       done!
    'CITY': 10 -> NONE            done!
    'DISEASE': 7 -> 삭제
    'PLANT': 2 -> 삭제
}

최종 entity 계획

{
    'TERM': 3140,
    'DATE': 473, 
    'QUANTITY': 741, 
    'PERSON': 519, 
    'ORGANIZATION': 569,
    'STUDY_FIELD': 417, 
    'None' : 1149
}

검증 계획

검증 하고자 하는 것

1. Entity 를 분류한 것을 공유한다

• sub,obj 자동 매핑 이 관계

파일 나누기

• 문석암 (434)
• 박마루찬 (867)
• 박아멘 (1300)
• 우원진 (1733)
• 윤영훈 (2166)
• 장동건 (2599)
• 홍현승 (3032)

변환 가이드

1. 잘못 분류된 (범위 등) entity 수정
2. 없는 entity(문장내에 단어중 entity중 하나에 속하는것 같은데, entity로 처리가 안된 애들) 추가
3. annotation할 때,
4. None -> TERM, DATE, PER, ORG
5. FIELD -> TERM
6. OCCUPATION -> PERSON
7. CIVILIZATION, QUANTITY, THEORY, COUNTRY, CITY -> None
8. ANIMAL, PLANT, DISEASE 삭제
9. CITY ->
10. 대명사 등은 절대로 사용하지 말 것.
11. 한 문장 당 label 중복하지 않고 최대한 많이

NER

1. TERM(용어, 별칭, 부품, 장치, 도구, 하위분류, 수행, 제품, 반의어)
2. DATE(시기)
3. PER(사람)
4. ORG(회사)