キーワード解説

RAGにおける小規模言語モデル(SLM)の活用による推論コストの最小化

特定のタスクやシンプルなクエリに対して、大規模LLMよりも安価で軽量なSLMを使い分けることで、RAG全体の推論コストを大幅に削減します。

0 関連記事

RAGにおける小規模言語モデル(SLM)の活用による推論コストの最小化とは

親クラスター「RAGのコスト最適化」の解説より

特定のタスクやシンプルなクエリに対して、大規模LLMよりも安価で軽量なSLMを使い分けることで、RAG全体の推論コストを大幅に削減します。

このキーワードが属するテーマ

このキーワードに紐付く記事はまだありません