ICLR 2020より，factorized embeddingとパラメタ共有によるパラメタ削減及び文順序予測タスクを採用したALBERTを解説しました．
今回紹介した記事はこちらのissueで解説しています． <a href="https://github.com/jojonki/arXivNotes/issues/348">https://github.com/jojonki/arXivNotes/issues/348</a>
サポーターも募集中です． <a href="https://www.patreon.com/jojonki">https://www.patreon.com/jojonki</a>

ICLR 2020より，factorized embeddingとパラメタ共有によるパラメタ削減及び文順序予測タスクを採用したALBERTを解説しました． 今回紹介した記事はこちらのissueで解説しています． https://github.com/jojonki/arXivNotes/issues/348 サポーターも募集中です． https://www.patreon.com/jojonki

ICLR 2020より，factorized embeddingとパラメタ共有によるパラメタ削減及び文順序予測タスクを採用したALBERTを解説しました．
今回紹介した記事はこちらのissueで解説しています． <a href="https://github.com/jojonki/arXivNotes/issues/348" rel="noopener noreferrer">https://github.com/jojonki/arXivNotes/issues/348</a>
サポーターも募集中です． <a href="https://www.patreon.com/jojonki" rel="noopener noreferrer">https://www.patreon.com/jojonki</a>

ep47 (ICLR): ALBERT: A Lite BERT for Self-supervised Learning of Language Representations

Leading NLP Ninjaでは最近のNLP (Natural Language Processing）に関連する論文をjojonkiが短く紹介します．気になったこと・質問・間違い等，フィードバック頂けると嬉しいです．
紹介する論文は，基本的に下記の論文まとめから取り上げる予定です．
https://github.com/jojonki/arXivNotes/issues

Technology

Leading NLP Ninjaでは最近のNLP (Natural Language Processing）に関連する論文をjojonkiが短く紹介します．気になったこと・質問・間違い等，フィードバック頂けると嬉しいです． 紹介する論文は，基本的に下記の論文まとめから取り上げる予定です． https://github.com/jojonki/arXivNotes/issues

Share ep47 (ICLR): ALBERT: A Lite BERT for Self-supervised Learning of Language Representations

Sign up to save your podcasts

ep47 (ICLR): ALBERT: A Lite BERT for Self-supervised Learning of Language Representations

ep47 (ICLR): ALBERT: A Lite BERT for Self-supervised Learning of Language Representations