キーワード解説
RAGにおける小規模言語モデル(SLM)の活用による推論コストの最小化
特定のタスクやシンプルなクエリに対して、大規模LLMよりも安価で軽量なSLMを使い分けることで、RAG全体の推論コストを大幅に削減します。
0 関連記事
RAGにおける小規模言語モデル(SLM)の活用による推論コストの最小化とは
親クラスター「RAGのコスト最適化」の解説より特定のタスクやシンプルなクエリに対して、大規模LLMよりも安価で軽量なSLMを使い分けることで、RAG全体の推論コストを大幅に削減します。
このキーワードが属するテーマ
このキーワードに紐付く記事はまだありません