회고0822 - steelbear/HMG_Softeer_DE GitHub Wiki

  • formatter 만들기
    • 현재 크롤러는 커뮤니티마다 데이터 구조가 다름
      • 분명 공통 구조를 정한거 같은데...
      • 이래서 class 강요를 하는 듯 하다
    • 이를 위해 크롤링이 된 데이터의 구조와 타입을 맞춰줄 필요가 있다
      • 이 작업은 이미 EDA하면서 미리 만들어둔 모듈이 있어서 이를 재활용
    • lambda를 통한 구현
      • 처음에 dcinside 게시글을 변환하는 lambda 생성
      • 이후 각 커뮤니티에 맞춘 기능 추가