회고0705 - steelbear/HMG_Softeer_DE GitHub Wiki

  • 데이터 엔지니어가 생각보다 넒게 알아야 한다
    • 그 부서의 요구사항을 이해하려면 그 부서가 하는 일과 배경지식이 어느정도 필요하다
      • 데이터 엔지니어로서 나의 가치를 올려주는 포인트
    • 데이터 엔지니어 직무가 더 재밌어 보이게 되었다
  • 절대 요구사항을 그대로 수용만 하지 말 것
    • 중요한건 요구사항 충족이 아니라 목적 달성
      • 어떤 목적 달성을 위해 데이터 엔지니어에게 요구하지만, 정작 그게 정말 필요한지는 요청한 사람이 잘 모를 수 있다.
  • 데이터 사이언스가 데이터를 보기만 하는 사람이 아니다
    • 우리가 원하는 답이 주어진 데이터에 없을 수 있다
    • 항상 추가 데이터가 필요하진 않은지 확인해야 한다
    • MTCars
      • 대부분 feature가 cyl에 의존하고 있다
      • 없는 의미를 뽑아내느라 너무 고생했었다. 오히려 처음에 생각했던 '비용 데이터가 필요하지 않을까'하는 생각이 맞았던 것
    • 정답은 없다. 없는 정답에 몰두하지 말고 필요한게 있으면 적극적으로 얻어내자