Вартість генерації токенів падає в 2-10 разів на рік вже 4 роки

e/acc chatблизько 3 годин тому0 переглядів

Вартість генерації токенів однакового рівня якості знижується в 2-10 разів на рік протягом останніх чотирьох років. Це робить AI API значно доступнішими для бізнесу будь-якого масштабу.

ВердиктПозитивнаImpact 6/10

📊 Тренд без цифр для дії. Пост про падіння цін токенів без конкретних тарифів, дат чи інструментів — для компаній до 200 людей тут нема чого впроваджувати, просто зазначте: API стає дешевшим.

🎯 Чи підходить це вашому бізнесу?

Заповніть профіль компанії — і ми автоматично покажемо, чи варто вам це впроваджувати.

Заповнити профіль · 30 секунд
Детальний розбір ↓

TL;DR

  • Вартість генерації токенів однакової якості падає 2-10 разів на рік вже 4 роки поспіль
  • Джерело: пост у Telegram-каналі e/acc chat без посилань на бенчмарки чи прайси
  • Конкретні цини, моделі чи дати в статті відсутні — лише констатація факту
  • Тренд дійсний: GPT-3.5-turbo коштував $0.002/1K токенів на старті, GPT-4o mini — $0.00015/1K
  • Для бізнесу це означає: сценарії, які були надто дорогими рік тому, зараз можуть бути прибутковими

Як це змінить ваш ринок?

Маркетингові агентства та e-commerce компанії, які раніше відмовилися від масштабного використання LLM через вартість, можуть переглянути бізнес-кейси. Головний блокер — ціна за токен — зникає для простих задач (класифікація, екстракція, генерація описів). Але для складного рассудження (o1, Claude 3.5 Sonnet) ціни залишаються високими, тому економия не універсальна.

Визначення: Token — мінімальна одиниця тексту, яку обробляє LLM (близько 0.75 англійського слова). Оплата API зазвичай розраховується за 1 млн токенів вхідних/вихідних.

Для кого це і за яких умов

  • Будь-який масштаб: якщо ви вже платите за API — перевірте актуальні прайси, вони могли впасти в 2-5 разів за півроку
  • Без IT-команди: достатньо оновити конфіг з моделлю на дешевшу (наприклад, з GPT-4o на GPT-4o mini для простих задач)
  • Час на зміну: 15-30 хвилин на тест якості дешевшої моделі на ваших промптах
  • Ризик: дешевші моделі гірше слідують інструкціям, втрачають контекст, галлюцинують частіше — тестуйте на реальних даних

Альтернативи

GPT-4o miniClaude 3.5 HaikuGemini 1.5 FlashЛокальні моделі (Llama 3.1 8B)
Ціна вхід/вихід за 1M токенів$0.15 / $0.60$0.25 / $1.25$0.075 / $0.30$0 (власне залізо)
Де працюєOpenAI APIAnthropic APIGoogle AI StudioВаш сервер / GPU-хмара
Мін. вимогиAPI ключAPI ключAPI ключGPU 8-16 GB VRAM
Ключова різницяНайдешевша з топових пропрієтарнихКраща якість за подібну цінуНайдешевша з великих вендорівПовний контроль, але потрібні DevOps

💬 Часті запитання

За 4 роки сукупно — так. GPT-3.5-turbo на старті (березень 2023) коштував $0.002/1K вхідних токенів. GPT-4o mini (липень 2024) — $0.00015/1K. Це ~13x дешевше. Але рік у рік темпи сповільнюються.

Такий розбір щоранку о 08:00

Персональний AI-дайджест для вашої галузі — щодня у Telegram

7 днів безкоштовно
tokencostsAIeconomicsLLMpricingAPIcostsAIaffordability

Навчіть вашу команду будувати такі AI-автоматизації

За 5 днів кожен співробітник побудує автоматизацію для своєї ділянки роботи.

Дізнатись більше → aiupskill.live