キーワード解説
各種LLM APIのレスポンス遅延(レイテンシ)とスループットの定点観測
主要なLLM API(OpenAI, Anthropic等)について、リアルタイムアプリケーションで重要なレスポンス遅延(レイテンシ)と、処理能力を示すスループットを定点観測し、その比較データを提供します。
0 関連記事
各種LLM APIのレスポンス遅延(レイテンシ)とスループットの定点観測とは
親クラスター「LLM比較・検証」の解説より主要なLLM API(OpenAI, Anthropic等)について、リアルタイムアプリケーションで重要なレスポンス遅延(レイテンシ)と、処理能力を示すスループットを定点観測し、その比較データを提供します。
このキーワードが属するテーマ
このキーワードに紐付く記事はまだありません