INTEGRITY Документация

Custom costs

AI Gateway позволяет задавать Custom Costs на уровне запроса. Благодаря этой функции показатели затрат точно отражают ваши уникальные тарифы, переопределяя стандартные или публичные затраты на модель.

Custom cost

Чтобы добавить Custom Costs к своим запросам API, используйте cf-aig-custom-cost заголовок. Он позволяет задать стоимость за токен отдельно для входных (отправленных) и выходных (полученных) токенов.

Количество знаков после запятой не ограничено, что обеспечивает точные расчёты стоимости независимо от того, насколько малы значения.

Custom costs будут отображаться в логах с подчёркиванием, что позволяет легко определить, когда применено пользовательское ценообразование.

В этом примере, если у вас согласованная цена $1 за миллион входных токенов и $2 за миллион выходных токенов, включите cf-aig-custom-cost заголовок, как показано ниже.

Запрос с Custom Cost
curl https://gateway.ai.cloudflare.com/v1/{account_id}/{gateway_id}/openai/chat/completions \
  --header "Authorization: Bearer $TOKEN" \
  --header 'Content-Type: application/json' \
  --header 'cf-aig-custom-cost: {"per_token_in":0.000001,"per_token_out":0.000002}' \
  --data ' {
        "model": "gpt-4o-mini",
        "messages": [
          {
            "role": "user",
            "content": "When is Cloudflare’s Birthday Week?"
          }
        ]
      }'