머학원생 살려

안녕하세요. 오늘도 아무글쓰는 대학원생안첨지입니다 요 며칠간 meta-learning쪽도 한번 봐줘야 하겠다는 필요성을 느껴서 한번 보려는데, 어떻게 시작해야할지 하다가 이쪽 분야의 고수라고 불리시는 finn교수님의 cs330강의와 자료를 쓰면 좋겠다고 판단했고 조금씩 듣고 있습니다. 그중 1,2강에서는 meta-learning이 어떠한 concept을 가지고 있고, 논지를 전개해나가는지를 간단하게 설명들었고 이를 바탕으로 정리를 해보려고 글을 작성하고자 합니다.

딥러닝 논문리뷰 2020. 12. 31. 04:34

며칠간 포스팅을 하면서 느낀 결과로는 그냥 블로그에 제가 관심있는 논문을 위주로 작성하려구요. (사실 계속 그래왔다는거!!!) 아무래도 블로그가 공개된 포스트들이다보니 남들에게 더 보여지기 쉬운 general한 논문들을 포스팅하고도 싶었는데, 사실 수많은 논문리뷰 블로그들 중에서 누가 이걸보겠어욯ㅎㅎ 자기만족과 글쓰기 실력을 위한 블로그 정리이기 때문에 related work에서 필요한 자세한 용어설명은 건너뛰려구요 (attention이나 graph fourier변환이나 RESCAL, DistMult 등등) 결론 : minor할수도 있지만 내가 개인적으로 궁금한 최신 논문위주로 작성하려 합니다. 설마 보겠어? 그래서 오늘은 attention을 다른 시각으로 해석한 두 논문을 확인하고, 공통적으로 중요하게..

딥러닝 논문리뷰 2020. 12. 29. 10:08

안녕하세요!!!! 다시 돌아온 초보대학원생입니다. 오늘은 어제 포스팅 chumji.tistory.com/3의 다음 파트인 hyperbolic embedding의 연산에 대해 알아보겠습니다. 3. Hyperbolic embedding의 연산 방법 Hyperbolic embedding의 연산이 기존의 우리가 아는 연산과 다른 이유는, hyperbolic space위의 점들을 poincare disk위로 projection하는 과정에서 생긴다고 확인했는데요. 이제 그 disk위에서의 각 점을 식으로 표현해보겠습니다. 이를 위해서 우리는 manifold를 사용한다고 하네요..... 으앙 이건 뭐지? 하는 분들을 위해 좀더 자세하게 설명해보겠습니다. 일단 식을 보죠! 무슨 말인지 잘 모르시겠죠? 저도 그랬어요. ..

딥러닝 논문리뷰 2020. 12. 27. 22:30

요즘 Non-Euclidean Embedding에 관한 논문들이 꽤나 나오고 있는데요?! 이게 수식도 어렵고 굳이 왜 이렇게 해야하나 싶더라구요. (지난 게시글 chumji.tistory.com/2 에서 나온것처럼 torus에서의 euclidean distance가 적합하느냐 같은 질문도 들고....) 그래서 공부를 하다보니 Non-Euclidean Embedding에 대한 논문들을 알아보고 찾아보겠습니다. 그중 Hyperbolic Embedding에 대해서 여러 논문을 찾아보고 작성해보려고 합니다. 먼저 이를 Poincaré Embeddings for Learning Hierarchical Representations (Nickel. 2017)을 확인해 보겠습니다. papers.nips.cc/paper..

딥러닝 논문리뷰 2020. 12. 26. 23:56

안녕하세요. 초보 대학원생 안첨지입니다. 이는 그냥 논문 정리하려는 용도의 블로그입니다. 대학원생활을 시작하는 용도로 혼자 논문을 리뷰해보려구요 나중에 이불도 좀 차겠지만... 아무거나 적어보려구요ㅋㅋㅋㅋㅋ 저도 처음이라 아무거나 읽어보는 논문입니다. 오늘 다룰 논문인 TorusE는 knowledge graph에서의 link prediction문제입니다. knowledge graph에서의 link는 기본적으로 head와 tail이 relation의 관계로 이루어져 있다고 하네요!! 그렇다면 이러한 knowledge graph에서의 link prediction 문제는 object pair (h,t)이 주어지고 이 사이에 r의 관계가 있을지를 판단하는 문제겠군요? 기중 Translation-based mod..

딥러닝 논문리뷰 2020. 12. 16. 00:04