Що таке Інференція ШІ?
Калькулятор вартості AI-інференсу оцінює, скільки ви витратите на виклики AI API, моделюючи зв'язок між використанням токенів, ціною за токен та обсягом запитів. Він приймає три основні параметри — скільки токенів використовує кожен запит (розділених на вхідні та вихідні), скільки ваш постачальник стягує за мільйон токенів та скільки запитів ви очікуєте на день — і прогнозує ваші місячні витрати.
Ціноутворення AI-інференсу підпорядковується простій формулі, але деталі мають значення: вхідні токени (ваш промпт та контекст) завжди дешевші за вихідні токени (відповідь моделі), ціни суттєво різняться між постачальниками та рівнями моделей, а витрати масштабуються лінійно з обсягом. Чат-бот, що обробляє 10 000 щоденних запитів на GPT-4o-mini, може коштувати $30/міс, тоді як той самий обсяг на Claude Opus може перевищити $300.
Цей калькулятор допомагає порівнювати постачальників, обирати правильний рівень моделі для вашого випадку, оцінювати витрати перед запуском AI-функції та розуміти, куди насправді йде ваш бюджет на інференс. Він призначений для розробників, продукт-менеджерів та засновників стартапів, які створюють AI-додатки.
Коли використовувати цей калькулятор
- Бюджетування функції AI перед запуском — оцінка щомісячних витрат при прогнозованих обсягах запитів для розуміння витрат на інфраструктуру.
- Порівняння постачальників моделей та рівнів — моделюйте те саме навантаження на GPT-4o, Claude Opus, GPT-4o-mini та Claude Haiku, щоб знайти оптимальний за вартістю варіант.
- Оцінка власного хостингу проти API — визначення порогу обсягу, при якому власний хостинг моделі open-weight стає дешевшим за поштову оплату API.
- Оптимізація дизайну промптів — розуміння впливу коротких промптів, кешованих системних промптів та зменшеної довжини виходів на витрати.
- Планування масштабу — прогнозування зростання витрат по мірі збільшення щоденних запитів з 1K до 100K та визначення того, де оптимізація витрат стає критичною.
- Обґрунтування витрат на інфраструктуру AI — формування задокументованих бюджетних запитів, що показують зацікавленим сторонам, у що обходиться інференс AI при поточних та прогнозованих обсягах.
Кроки:
- Введіть кількість вхідних токенів на запит (ваш промпт + контекст).
- Введіть кількість вихідних токенів на запит (відповідь моделі).
- Введіть вартість входу за мільйон токенів у вашого постачальника.
- Введіть вартість виходу за мільйон токенів у вашого постачальника.
- Введіть очікуваний обсяг запитів на день.
- Перегляньте прогнозовані щомісячні витрати, вартість за токен та токенів за долар.
Формула
Щомісячні витрати = Запитів/день × 30 × [(Вхідні токени × Вартість входу за 1М / 1.000.000) + (Вихідні токени × Вартість виходу за 1М / 1.000.000)]
Вартість за токен = (Вхідні токени × Вартість входу за 1М + Вихідні токени × Вартість виходу за 1М) / (Вхідні токени + Вихідні токени)
Токенів за долар = 1 / Вартість за токен
Приклад:
Вхідні токени = 1.000, Вихідні токени = 500
Вартість входу = $2,50/1М, Вартість виходу = $10,00/1М
Запитів/день = 10.000
Вартість за запит = (1.000 × $2,50 / 1М) + (500 × $10,00 / 1М)
= $0,0025 + $0,0050 = $0,0075
Щомісячні витрати = 10.000 × 30 × $0,0075 = $2.250/місяць
Випадки використання
- Бюджетування функції AI перед запуском — оцінка щомісячних витрат при прогнозованих обсягах запитів для розуміння витрат на інфраструктуру.
- Порівняння цін між постачальниками (OpenAI, Anthropic, Google, моделі з відкритою вагою) для конкретного випадку використання
- Оцінка власного хостингу проти API — визначення порогу обсягу, при якому власний хостинг моделі open-weight стає дешевшим за поштову оплату API.
- Оптимізація дизайну промптів — розуміння впливу коротких промптів, кешованих системних промптів та зменшеної довжини виходів на витрати.
- Планування масштабу — прогнозування зростання витрат по мірі збільшення щоденних запитів з 1K до 100K та визначення того, де оптимізація витрат стає критичною.
- Обґрунтування витрат на інфраструктуру AI — формування задокументованих бюджетних запитів, що показують зацікавленим сторонам, у що обходиться інференс AI при поточних та прогнозованих обсягах.
Ключові переваги
- Миттєва оцінка щомісячних витрат на AI API для будь-якої комбінації постачальника та моделі
- Порівняння цін між OpenAI, Anthropic, Google та моделями з відкритою вагою
- Моделювання масштабування витрат по мірі зростання обсягу запитів від прототипу до продакшна
- Визначення найдешевшого рівня моделі, що відповідає вашим вимогам до якості
- Розуміння впливу оптимізації промптів та стратегій кешування на витрати
- Упевнене планування бюджетів інфраструктури до прив'язки до постачальника AI
- Безкоштовне використання, реєстрація не потрібна
Поради
- Почніть з найдешевшої моделі, що відповідає вашим вимогам до якості, та оновлюйте лише при недостатній точності — різниця у вартості часто становить 10–30 разів
- Оптимізуйте системний промпт для стислості та ефективності — кожен токен у повторюваному системному промпті множиться на кожен запит
- Використовуйте кешування промптів для робочих навантажень з повторюваними префіксами, щоб зменшити вартість вхідних токенів на 50–90%
- Відстежуйте вартість на функцію, а не лише загальні витрати — це показує, які можливості AI найдорожчі та де оптимізація матиме найбільший ефект
- Налаштуйте сповіщення про бюджет на 50% та 80% вашого щомісячного ліміту, щоб уникнути неочікуваних рахунків від сплесків трафіку
Поширені помилки
- Розрахунок лише вартості вхідних токенів та забування про те, що вихідні токени зазвичай коштують у 2–8 разів дорожче за токен
- Ігнорування токенів системних промптів, що надсилаються з кожним запитом та накопичують значні витрати при великому обсязі
- Неврахування історії розмов у багатоетапних чат-додатках, де контекст зростає з кожним етапом
- Припущення, що флагманські моделі завжди необхідні — менші моделі часто досягають 90%+ точності за 5–10% вартості для простих завдань
- Відсутність бюджету на повторні спроби, помилки обмеження швидкості та граничні випадки, що генерують довші відповіді, ніж очікувалося
Ключові терміни
- Токен: Базова одиниця тексту, що обробляється моделлю AI — приблизно 0,75 англійських слів або 1,5 китайських символів. Як вхідні, так і вихідні токени окремо рахуються.
- Вхідні токени: Токени у вашому промпті та контексті, які модель читає перед генерацією відповіді. Зазвичай дешевші за вихідні токени.
- Вихідні токени: Токени, які модель генерує у своїй відповіді. Дорожчі за вхідні токени, оскільки генерація є обчислювально- та послідовнообмеженою.
- Вікно контексту: Максимальна кількість токенів, яку модель може обробити в одному запиті (вхід + вихід разом). Перевищення потребує обрізки або поділу на частини.
- Кешування промптів: Техніка оптимізації витрат, при якій часто використовувані префікси (такі як системні промпти) кешуються постачальником та рахуються за нижчим тарифом.
- Тарифікація за токен: Вартість за мільйон токенів, зазвичай розділена на окремі вхідний та вихідний тарифи, які відрізняються залежно від рівня моделі.
Пов'язані концепції
- Калькулятор вартості обчислень GPU: Для робочих навантажень, що виправдовують власний хостинг, розуміння вартості GPU допомагає порівняти локальний інференс з цінами API. Наш калькулятор вартості обчислень GPU моделює погодинні тарифи хмарного GPU відносно пропускної здатності токенів.
- Калькулятор вартості хмарного хостингу: Інфраструктура AI-інференсу часто працює поруч з іншими хмарними сервісами — наш калькулятор вартості хмарного хостингу допомагає запланувати бюджет повного стека інфраструктури.
- Калькулятор монетизації API: Якщо ви створюєте продукт, що використовує AI-інференс та стягує плату з користувачів, розуміння маржі між вартістю інференсу та доходом на запит має вирішальне значення. Наш калькулятор монетизації API моделює цю одиничну економіку.
- Калькулятор одиничної економіки: Вартість AI-інференсу на запит — це ключовий параметр для одиничної економіки вашого продукту — поєднання CAC, LTV та витрат на запит показує реальну прибутковість.
- Калькулятор виживання стартапу: Високі витрати на інференс можуть суттєво вплинути на темп спалювання капіталу — наш калькулятор виживання стартапу допомагає змоделювати, як витрати на інфраструктуру AI впливають на ваш фінансовий запас.
Приклад
Чат-бот підтримки надсилає 800 вхідних токенів (системний промпт + історія розмови) та отримує 400 вихідних токенів на запит. Використовуючи GPT-4o-mini по $0,15/1М входу та $0,60/1М виходу, при 15.000 запитів на день:
Вартість за запит = (800 × $0,15 / 1М) + (400 × $0,60 / 1М)
= $0,00012 + $0,00024 = $0,00036
Щомісячні витрати = 15.000 × 30 × $0,00036 = $162/місяць
Оновлення до GPT-4o по $2,50/1М входу та $10,00/1М виходу:
Вартість за запит = (800 × $2,50 / 1М) + (400 × $10,00 / 1М)
= $0,002 + $0,004 = $0,006
Щомісячні витрати = 15.000 × 30 × $0,006 = $2.700/місяць — зростання витрат у 16,7 разів при тому самому обсязі.
Інтерпретація результатів
Прогноз щомісячних витрат — це ваш основний показник для планування — він представляє те, що ви фактично заплатите при даному обсязі та тарифікації. Вартість за токен показує, наскільки дорога кожна одиниця тексту, що корисно для порівняння моделей. Токенів за долар показує, скільки тексту можна згенерувати за $1, що допомагає зрозуміти продуктивність.
Якщо ваші щомісячні витрати здаються високими, основні важелі зменшення: (1) перехід на нижчий рівень моделі, якщо складність завдання дозволяє, (2) оптимізація промптів для зменшення кількості токенів, (3) впровадження кешування промптів для повторюваних префіксів та (4) об'єднання запитів там, де постачальник пропонує пакетні тарифи.
Майте на увазі, що цей калькулятор моделює прямі витрати API. Для повної картини витрат також врахуйте: повторні спроби (додайте 5–15%), накладні витрати системних промптів (додайте токени системних промптів на запит × обсяг), зростання історії розмов у багатоетапних додатках та запас 20–30% на сплески трафіку та граничні випадки.
Порівнюючи постачальників, пам'ятайте, що найдешевший тариф за токен не завжди найдешевший загалом — модель, що генерує коротші, стислі відповіді, може використовувати менше вихідних токенів та бути дешевшою навіть при вищому тарифі за токен.

