Sentencepiece : ニューラル言語処理向けトークナイザ
少し時間が経ってしまいましたが、Sentencepiceというニューラル言語処理向けのトークナイザ・脱トークナイザを公開しました。MeCabやKyTeaといった単語分割ソフトウエアとは趣旨や目的...
648
442
Comment6
2 search resultsShowing 1~2 results
Stocked
You need to log-in
Sentencepiece の分割を MeCab っぽくする
Sentencepieceは公開から約6年経ち、月間のpipダウンロード数が1000万を超え、開発者として嬉しい限りです。ただ、Sentencepieceを使用する際にMeCabなどの形態素解析...
54
32
Comment1
2 search resultsShowing 1~2 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles