跳到正文
北京时间
原文
OpenAI:官网动态·· 2024-10-01精选AI 评分67

OpenAI API 推出 Prompt Caching,对近期见过的输入自动折扣

Prompt Caching in the API

AI 导读

OpenAI 在 API 中推出 Prompt Caching 功能,对模型最近见过的输入内容自动提供折扣。该功能面向 API 用户,可降低重复前缀类请求的输入成本。

来源:OpenAI:官网动态 · openai.com