キーワード解説
エンベディングによる意味的フィルタリングを用いたトークンパージ手法
テキストをエンベディング化し、意味的な類似度に基づいて不要な情報をフィルタリングすることで、プロンプトからトークンを効率的に削減します。
0 関連記事
エンベディングによる意味的フィルタリングを用いたトークンパージ手法とは
親クラスター「トークン削減テク」の解説よりテキストをエンベディング化し、意味的な類似度に基づいて不要な情報をフィルタリングすることで、プロンプトからトークンを効率的に削減します。
このキーワードが属するテーマ
このキーワードに紐付く記事はまだありません