학습 중 궁금했던 것

• Transformer에서 loss function

  • 과제에서는 label_smoothed_cross_entropy를 사용했었음

  • word의 순서는 상관이 없을까?

    home go I

    I go home

    go i home

    임베딩시에는 똑같은 값이 나오기 때문에 같은 결과가 나옴

  • 순서를 기억하기 위해 positional encoding 사용

• 추천 시스템에서의 추천 방식?

  • 유저 베이스는 나랑 비슷한 성향의 사람이 구매한 아이템을 추천
  • 아이템 베이스는 이 아이템을 구매한 사람이 구매했던 다른 아이템을 추천

DACON 뉴스 토픽 분류 : 전처리

• 오늘까지 진행했던 내용 공유
• 김민식 캠퍼님
  • https://dacon.io/competitions/official/235747/codeshare/3069?page=1&dtype=vote
  • 링크의 소스 참고해서 모델링을 진행해보는중

기타.. Tips

• 셀 코드 바꾸는 코드

  https://stackoverflow.com/questions/49429585/how-to-change-the-background-color-of-a-single-cell-in-a-jupyter-notebook-jupy

• 타이타닉 age missing value 추측시 이름에서 Mr, Mrs, Ms, miss 등의 정보를 추출해 age의 유추가 가능합니다.