08.18

과제 관련

• repr를 쓰는 방법
• get_submodule 사용법

대회 대비 git repository join

sampler, shuffle 차이 ? sampler는 shuffle에 비해 조건을 더 부여해서 섞는 느낌

왜 Domain을 선택했는지에 대한 의견 공유

멘토님 질문

• CV 분야는 연구된 분야가 많아서 엔지니어링 쪽이 중요하고 NLP는 리서치쪽에 치중이 되있는지 ?

  네이버 클로버에서 NLP 인턴을 했는데.. CV는 길이 많다..? 정돈되있음.. 알려져있는 것이 많음 torchvision만 해도 많음.. 연구된 분야가 많지만 연구할 수 있는 부분이 아직도 많긴 함 ! 비디오쪽은 아직도 연구가 많이 되고 있음 반대로 NLP도 그렇게 보기는 힘들 것 같음..NLP가 아직 많이 덜 연구가 되있다고해서

  제일 중요한 것은 뭐가 재밌을지 ? 제가 봤을 때는 CV쪽이 눈에 보여서 재밌을 것 같음..

  멀티모달쪽이 연구되는 추세.. 어차피 나중에는 다 공부를 할 것 같기는 함..

  NLP는 거의 무조건 어텐션을 쓰는 추세.. 어텐션을 쓰면 GPU가 거대함.. 감당하지 못하는 회사도 아직 많을 것임..

• 1대1 면담

• 2주 반 남은 시점에서 피어세션을 어떻게 활용하는 것이 좋을까?

  논문 리뷰.. 세미나, 이미지 분류 대회할 때 도움이 될 만한 공부?

  https://kmhana.tistory.com/3

  논문을 최신부터 ? or 예전거부터 보는 것이 좋은지 ?

  추천하시는 것은 수학적인 이해가 강의가 힘들다고 하시는데.. 논문을 읽어보려 하는 것도 당연히 좋은데 좌절감을 느끼는 것 보다는 그냥 지나쳤던 부분을 보는 것이 좋지 않을까.. 선택과제 3번 같은 것을 풀어보는 것도 좋을 것 같다.. 이건 사실 여러분들이 정하는 문제..

  Mixer: https://arxiv.org/abs/2105.01601 재미있는 느낌 2순위 → 이해하기 쉬울걸 ?

  EfficientNet: https://arxiv.org/pdf/1905.11946.pdf 이런 deep한 모델 연구 3순위

  ResNet: https://arxiv.org/pdf/1512.03385.pdf 그래도 좀 봤으니까? 1순위

  논문을 쭉 설명하는 것이 좋을 것 같기도 함.. 익숙하거나.. 진행해보고 싶다.

  아니면 다 같이 한줄 한줄 읽는 것도 괜찮을 것 같음..

  레즈넷을 한줄 한줄 읽어나가보기 모르는 것 있으면 채팅을 해서 공유를 해주세요 !

  일요일에 1대1 면담 시간..