사월의눈의 DevBlog

Comicolorization : Semi-automatic manga colorization 논문을 읽고 리뷰아닌 감상문. 한달 전에 우연히 도쿄도서관 웹페이지에서 받은 만화가 109편있는 manga109 dataset을 받은적이 있는데 어떻게 활용해야 할지 고민하다가 클라우드에 넣은채 썩혀두고 있었는데 마침 페이스북 페이지 "Nextobe"에서 딥러닝을 이용해 만화를 자동으로 색칠해주는 모델에 대한 논문이 올라와 흥미가 생겨 한번 읽어보게 되었습니다. 그런데 읽어보니 제 데이터셋은 사용못하겠더라구요. 만화의 단색 이미지와 채색된 결과 이미지가 쌍으로 필요한데 manga109 dataset은 표지를 제외하곤 흑백이미지라 학습시키는게 불가능하다고 생각됩니다. 기존의 Colorization의 Model과 ..

Tacotron : Toward End-To-End Speech Synthesis을 읽고 쓰는 리뷰 아닌 감상문. ※주의사항. 필자는 논문을 많이 읽어본 적이 없으며 전문지식 또한 그렇게 많지 않은 편인 1학년 학부생입니다. 흥미위주로읽고 그에 대한 감상문을 쓰는 정도임을 알아주었으면 합니다. 이전 게시물에서는 제가 이 논문을 읽게된 배경과 이 논문의 소개 및 장단점을 소개하고 Model이 어떤 Network들로 구성되어 있는지를 보여드리고 마쳤습니다. 이번 게시물에서는 각각의 Network에 대한 Detail을 기록하고자 합니다. 1) Encoder CBHG Module.(Figure 1. Encoder CBHG Module) Encoder란? 한글 또는 영어로 구성된 문장의 정보를 가장 잘 나타내는 ..

Tacotron : Toward End-To-End Speech Synthesis 을 읽고 쓰는 리뷰아닌 감상문 ※주의사항. 필자는 논문을 많이 읽어본 적이 없으며 전문지식 또한 그렇게 많지 않은 편인 1학년 학부생입니다. 흥미위주로 읽고 그에 대한 감상문을 쓰는 정도임을 알아주었으면 합니다중간고사 전에 Speech Generation에 대한 프로젝트를 구상중이었는데 그사이에 Facebook에서 제가 생각중이던 것과 아주 비슷한 내용의 게시물이 있어 읽어보았는데 김태훈님이 발표하신 "책 읽어주는 딥러닝"의 발표자료였습니다. 이 아이디어만큼은 내가 먼저다! 라고 생각하고 있었는데 약간 아쉽...지만 읽고 참고해보았습니다. 그 내용을 정리해보자면, 1. 데이터 전처리 : Google Speech API + ..