팀 NLP 11조 Week16 Day3

목차

• 피어세션
  • 데이터제작시 데이터셋 구성
• 프로젝트
  • TODO
    • 데이터
    • 서비스
  • 팀프로젝트 아이디어
  • 데이터 신청 중
  • 프로젝트 (가제:여행가자)
    • 모델
      • 데이터 수집
      • DATP
      • 훈련 계획
      • 데이터 형식
    • 서비스
      • 플랫폼 (Web, App 등등)
      • 사용자 관련

일자

• 2021.11.17 수

팀원

• 문석암_T2075
• 박마루찬_T2078
• 박아멘_T2090
• 우원진_T2137
• 윤영훈_T2142
• 장동건_T2185
• 홍현승_T2250

주간 일정

작업 할당

1:(0~352)

2:(353~706)

3:(707~1060)

4:(1061~1414)

5:(1415~1768)

6:(1769~2122)

7:(2123~2473)

• 1. 문석암 1 2 3 4 5
• 2. 박마루찬 2 3 4 5 6
• 3. 박아멘 3 4 5 6 7
• 4. 우원진 4 5 6 7 1
• 5. 윤영훈 5 6 7 1 2
• 6. 장동건 6 7 1 2 3
• 7. 홍현승 7 1 2 3 4

피어세션

데이터제작시 데이터셋 구성

• train, validation, test set의 label별 비율을 모두 동일하게 하여 8:1:1로 나눈다.
• 동일 문장에 대해서는 다른 데이터셋에 담기지 않도록 한다? -> train으로 모두 포함

프로젝트

TODO

사용자 : 문장 ->

train input

• 리뷰를 그대로 사용하는것도 괜찮을듯..? (라벨은 어떻게 될까요?) 위치(정답)
  • 리뷰 (1000자) -> [input,(50자)-위치(라벨)] 블로그 (문장별로 다 짤라버리기)
• 묘사하는 글을 생성
• 직접 수정

input

문장 -> 인코딩 벡터 vs 어떤 과정 -> 문서 -> 인코딩 벡터

output 지명,문서

데이터

1. OPENAPI 에서 데이터 가져오기 및 전처리

   • 그외 정보도 포함
   • 주소 정보 필요
     • 위치 지명
     • 위치 리스트

2. 블로그 리뷰 관련 전처리 방식 준비 (API 없음 구글 제외)

   • 네이버 지도 리뷰
     • 제목에서 지명 필터링
     • 본문 처리에 대해서는 논의가 더 필요
   • 구글 지도 리뷰

3. 리뷰 정보 저작권 확인

서비스

• 지역명 나오면 API -> 링크

• 차후 프로젝트 관련은 프로젝트 문서에도 중복해서 올리도록 한다.

팀프로젝트 아이디어

데이터 신청 중

1. 범죄에 대한 판결 예측 및 관련 판례 자료

• 민사
  • 약 32천개 추측(API 확인 필요)
  • 국가법령정보센터

2. 문장으로 가고 싶은 곳을 묘사하고, 추천해주는 서비스

   • Tour API 3.0

   • 여행지 정보, 리뷰를 활용

   • 여행지 리스트가 필요함!

   • input (장소에 대한 묘사만 해주세요)

     • 장소를 묘사해 주세요 ??
       • XXX
     • 누구랑 가시나요 ??
       • XXX
     • 기간은 얼마나 생각하나요?

프로젝트 (가제:여행가자)

입력 : 지금 쯤 ~ 근처에 단풍 구경 가고 싶어. 출력 : 대둔산국립공원 ~봉 다리 괜찮아요. 지금은 단풍 구경이 불가능해요? 입력 : 출력 :

모델

데이터 수집

• google API

  • 세부적인 관광지

• 네이버 블로그

  • ex) 여수 관련 정보 없음X (네이버 지도 리뷰 기준)
  • ex) 해수욕장 이런식

DATP

여행 도메인 데이터

훈련 계획

데이터 형식

• dataset에 들어갈 feature

서비스

플랫폼 (Web, App 등등)

• 가능한 간단하게
• API만으로 구현하는 것도 방법.

사용자 관련

• 무엇을 입력하는지
• 누가 사용하는자
• 언제 사용하는지
• 사용자가 원하는 건 뭘까?