Update README.md
Browse files
README.md
CHANGED
@@ -25,6 +25,8 @@ This is a T5 (Text-to-Text Transfer Transformer) model pretrained on Japanese co
|
|
25 |
本モデルにも、大規模コーパスを用いた言語モデルにつきまとう、学習データの内容の偏りに由来する偏った(倫理的ではなかったり、有害だったり、バイアスがあったりする)出力結果になる問題が潜在的にあります。
|
26 |
この問題が発生しうることを想定した上で、被害が発生しない用途にのみ利用するよう気をつけてください。
|
27 |
|
|
|
|
|
28 |
|
29 |
# 転移学習のサンプルコード
|
30 |
|
|
|
25 |
本モデルにも、大規模コーパスを用いた言語モデルにつきまとう、学習データの内容の偏りに由来する偏った(倫理的ではなかったり、有害だったり、バイアスがあったりする)出力結果になる問題が潜在的にあります。
|
26 |
この問題が発生しうることを想定した上で、被害が発生しない用途にのみ利用するよう気をつけてください。
|
27 |
|
28 |
+
SentencePieceトークナイザーの学習には上記Wikipediaの全データを用いました。
|
29 |
+
|
30 |
|
31 |
# 転移学習のサンプルコード
|
32 |
|