キーワード解説
Hugging Face Tokenizersを用いたLlama専用のカスタム語彙追加と再学習
Llamaモデルの性能を向上させるため、特定のドメインに特化したカスタム語彙を追加し、トークナイザーを再学習させる手順を紹介します。
0 関連記事
Hugging Face Tokenizersを用いたLlama専用のカスタム語彙追加と再学習とは
親クラスター「Hugging Face 連携」の解説よりLlamaモデルの性能を向上させるため、特定のドメインに特化したカスタム語彙を追加し、トークナイザーを再学習させる手順を紹介します。
このキーワードが属するテーマ
このキーワードに紐付く記事はまだありません