BETA

日本語BERT一覧

投稿日:2020-04-17
最終更新:2020-04-17

日本語BERT一覧です。

わかる範囲での比較

作成者 事前学習コーパスの種類 単語分割 ライセンス 備考
京都大学 Wikipedia Juman++ + BPE Apache 2.0
菊田氏 Wikipedia SentencePiece Apache 2.0
ホットリンク社 ツイッター SentencePiece 商用利用不可
東北大 Wikipedia MeCab(IPA 辞書)+ BPE CC BY-SA 3.0 huggingface/transformersで利用可能
NICT Wikipedia MeCab(Juman 辞書)+ BPEあり/なし CC BY 4.0 転移学習時の性能が一番良いかも?
Laboro.AI社 Webページ SentencePiece 商用利用不可
技術ブログをはじめよう Qrunch(クランチ)は、プログラマの技術アプトプットに特化したブログサービスです
駆け出しエンジニアからエキスパートまで全ての方々のアウトプットを歓迎しております!
or 外部アカウントで 登録 / ログイン する
クランチについてもっと詳しく

この記事が掲載されているブログ

@opqrstuvcutの技術とか技術以外のブログ 最近フリーランスになりました

よく一緒に読まれる記事

0件のコメント

ブログ開設 or ログイン してコメントを送ってみよう