AI News
ДІЇ НЕМАПозитивнаImpact 5/10BetaВід 50 людей📺 Медіа і Контент🏭 Виробництво і Промисловість

Проект тижня ML – визначення глибини сцени в реальному часі

Редакція AI NewsДжерело: Data SecretsОпубліковано Оновлено
Data Secrets•3 місяці тому•4 перегляди•

Проект інженера з Software Mansion (Польша) показує нейромережу, яка за ~8 мс на чипі M4 Pro відновлює карту глибини сцени з одного 2D‑зображення. Весь ланцюг працює в браузері з частотою 60 fps, код не відкрито й може бути проданий Zoom.

ВердиктПозитивнаImpact 5/10

🚀 Швидкий прототип. Точна глибина в браузері за 8 мс — для команд AR/медіа, які потребують реального часу без серверів.

🎯 Чи підходить це вашому бізнесу?

Заповніть профіль компанії — і ми автоматично покажемо, чи варто вам це впроваджувати.

Заповнити профіль · 30 секунд
Детальний розбір ↓

TL;DR

  • •Проект ML‑тижня демонструє визначення глибини сцени з одного 2D‑зображення за ~8 мс на чипі M4 Pro.
  • •Весь ланцюг — від нейромережі до рендерингу зі світлом — працює в одному GPU‑пайплайні без передачі даних CPU↔GPU.
  • •Демо працює в браузері з частотою 60 fps, що дозволяє реалтайм‑AR без серверної обробки.
  • •Код не відкрито; можливо, проект планують продати компанії Zoom за кілька мільйонів доларів.
  • •Технологія базується на бібліотеці TypeGPU, що дозволяє писати GPU‑шейдери прямо на TypeScript.

Як це змінить ваш ринок?

Медіа та розважальна індустрія зможуть створювати AR‑ефекти у веб‑браузері без потреби у дорогостоятьому серверному обчисленні, знімаючи блокер високих затримок та витрат на хмарну інфраструктуру. Це особливо цінно для кампаній, що потребують швидкого розгортання та низких операційних витрат.

Визначення: Глибина сцени (depth map) — зображення, у якому кожен піксель кодує відстань від камери до відповідної точки сцени, що дозволяє відновлювати 3D‑геометрію з плоских даних.

Для кого це і за яких умов (ОБОВ'ЯЗКОВО: мін. обладнання/бюджет, потрібна команда чи ні, мін. масштаб, час на впровадження.)

Для тестування потрібен MacBook з M4 Pro або еквівалентний GPU, без додаткової IT‑команди, впровадження демо займає менше години. Для продакшн‑рішення потрібна адаптація під конкретне залізо, відкритий код або ліцензія, а також команда розробників з досвідом у GPU‑програмуванні.

Альтернативи

ПродуктЦінаДе працюєМін. вимогиКлючова різниця
TypeGPU‑демо (цей проект)дані не розкритіБраузер (WebGPU)M4 Pro або еквівалентний GPUПовний GPU‑пайплайн у браузері, без CPU‑GPU копіювання
Apple ARKitбезкоштовноiOS/iPadOSПристрій з A12 або новішимПотребує нативного додатка, не працює в чистому вебі
Google ARCoreбезкоштовноAndroidПристрій з підтримкою ARCoreАналогічно ARKit — потребує нативного додатка
MiDaS (open‑source)безкоштовноВеб, desktop, mobileGPU з підтримкою WebGL/WebGPUПотребує окремого серверного або клієнтського коду, не є повним GPU‑пайплайном у браузері

💬 Часті запитання

Чи працює це на звичайних ноутбуках без M4 Pro?

Наразі продемонстрована швидкість ~8 мс виміряно лише на чипі M4 Pro. На іншому залізі (наприклад, Intel Iris або середній GPU) продуктивність може бути значно нижче, тому для ноутбуків потрібна додаткова оптимізація.

Чи є доступний код для завантаження та використання?

Ні, у статті зазначено, що кода в опенсорсі немає й можливо планують продати проект компанії Zoom. Тому без ліцензії або комерційного доступу використати неможливо.

Як ця технологія порівнюється з традиційними методами stereoscopic depth?

Традиційні стерео‑методи потребують двох зображень та обчислень на CPU або GPU з передачею даних між ними. Представлене рішення працює з одним 2D‑зображенням і залишає весь ланцюг на GPU, скорочуючи латентню та енергоспоживання.

Чи може це бути використано в комерційних AR‑додатках сьогодні?

Тільки якщо ви отримаєте доступ до коду або ліцензії від авторів. Без цього це залишається демонстраційним прототипом, а не готовим продуктом для комерційного впровадження.

Підтекст

Проект демонструє можливість запуску складних нейромереж у браузері з мінімальною затримкою, що відкриває двері для AR‑додатків без серверної обробки. Однак закритий код та можливий продаж Zoom обмежують його доступність для широкого використання. Це сигнал про зростаючий інтерес до інтеграції ШІ у веб‑платформи.

Такий розбір щоранку о 08:00

Персональний AI-дайджест для вашої галузі — щодня у Telegram

Підписатися безкоштовно
depthestimationreal-timeTypeGPUM4ProbrowserAR

AI Advisory Board

Навчіть вашу команду будувати такі AI-автоматизації

За 5 днів кожен співробітник побудує автоматизацію для своєї ділянки роботи.

Дізнатись більше → aiadvisoryboard.me