ПозитивнаImpact 5/10🧪 Beta🏢 Від 50 людей📺 Медіа і Контент🏭 Виробництво і Промисловість

Проект тижня ML – визначення глибини сцени в реальному часі

Data Secrets2 днi тому0 переглядів

Проект інженера з Software Mansion (Польша) показує нейромережу, яка за ~8 мс на чипі M4 Pro відновлює карту глибини сцени з одного 2D‑зображення. Весь ланцюг працює в браузері з частотою 60 fps, код не відкрито й може бути проданий Zoom.

ВердиктПозитивнаImpact 5/10

🚀 Швидкий прототип. Точна глибина в браузері за 8 мс — для команд AR/медіа, які потребують реального часу без серверів.

🎯 Чи підходить це вашому бізнесу?

Заповніть профіль компанії — і ми автоматично покажемо, чи варто вам це впроваджувати.

Заповнити профіль · 30 секунд
Детальний розбір ↓

TL;DR

  • Проект ML‑тижня демонструє визначення глибини сцени з одного 2D‑зображення за ~8 мс на чипі M4 Pro.
  • Весь ланцюг — від нейромережі до рендерингу зі світлом — працює в одному GPU‑пайплайні без передачі даних CPU↔GPU.
  • Демо працює в браузері з частотою 60 fps, що дозволяє реалтайм‑AR без серверної обробки.
  • Код не відкрито; можливо, проект планують продати компанії Zoom за кілька мільйонів доларів.
  • Технологія базується на бібліотеці TypeGPU, що дозволяє писати GPU‑шейдери прямо на TypeScript.

Як це змінить ваш ринок?

Медіа та розважальна індустрія зможуть створювати AR‑ефекти у веб‑браузері без потреби у дорогостоятьому серверному обчисленні, знімаючи блокер високих затримок та витрат на хмарну інфраструктуру. Це особливо цінно для кампаній, що потребують швидкого розгортання та низких операційних витрат.

Визначення: Глибина сцени (depth map) — зображення, у якому кожен піксель кодує відстань від камери до відповідної точки сцени, що дозволяє відновлювати 3D‑геометрію з плоских даних.

Для кого це і за яких умов (ОБОВ'ЯЗКОВО: мін. обладнання/бюджет, потрібна команда чи ні, мін. масштаб, час на впровадження.)

Для тестування потрібен MacBook з M4 Pro або еквівалентний GPU, без додаткової IT‑команди, впровадження демо займає менше години. Для продакшн‑рішення потрібна адаптація під конкретне залізо, відкритий код або ліцензія, а також команда розробників з досвідом у GPU‑програмуванні.

Альтернативи

ПродуктЦінаДе працюєМін. вимогиКлючова різниця
TypeGPU‑демо (цей проект)дані не розкритіБраузер (WebGPU)M4 Pro або еквівалентний GPUПовний GPU‑пайплайн у браузері, без CPU‑GPU копіювання
Apple ARKitбезкоштовноiOS/iPadOSПристрій з A12 або новішимПотребує нативного додатка, не працює в чистому вебі
Google ARCoreбезкоштовноAndroidПристрій з підтримкою ARCoreАналогічно ARKit — потребує нативного додатка
MiDaS (open‑source)безкоштовноВеб, desktop, mobileGPU з підтримкою WebGL/WebGPUПотребує окремого серверного або клієнтського коду, не є повним GPU‑пайплайном у браузері

💬 Часті запитання

Наразі продемонстрована швидкість ~8 мс виміряно лише на чипі M4 Pro. На іншому залізі (наприклад, Intel Iris або середній GPU) продуктивність може бути значно нижче, тому для ноутбуків потрібна додаткова оптимізація.

Такий розбір щоранку о 08:00

Персональний AI-дайджест для вашої галузі — щодня у Telegram

7 днів безкоштовно
depthestimationreal-timeTypeGPUM4ProbrowserAR

Навчіть вашу команду будувати такі AI-автоматизації

За 5 днів кожен співробітник побудує автоматизацію для своєї ділянки роботи.

Дізнатись більше → aiupskill.live