Meta: Llama 3.1 8B Instruct

meta-llama/llama-3.1-8b-instruct

Meta's latest class of model (Llama 3.1) launched with a variety of sizes & flavors. This 8B instruct-tuned version is fast and efficient. It has demonstrated strong performance compared to...

Modalities
Text
輸入 / 輸出價格
₩88 / ₩140
1M
Context
13.11萬
發佈日期
2024年7月23日

FAQ

常見問題

如何呼叫此模型?

向 `/api/v1/chat/completions` 發送請求,並將 `model` 設定為此模型 ID。只需更改 OpenAI SDK 的 base_url 即可。

價格如何計算?

將 USD 的上游成本乘以匯率與利潤,得出 KRW 價格。每次請求的成本會記錄在回應標頭 (response headers) 與您的活動日誌中。

這會在本地 GPU 上執行嗎?

如果本地 GPU 提供此模型,會優先使用。當沒有本地插槽或執行失敗時,請求會轉向外部供應商。

我的對話會被儲存嗎?

API 請求主體絕不會被儲存。只有來自 Chat 畫面的對話會被儲存,您可以在設定中關閉此功能。

了解更多