Waymo показала 5-нм carTPU: це сенсорний «вхід», а не мозок роботаксі

Власний процесор Waymo Sensor Fusion Processor, який усередині компанії, за повідомленнями, називають carTPU, варто сприймати як обчислювальний шар системи Waymo Driver, що працює безпосередньо із сенсорами. Створений за 5-нм техпроцесом ASIC приймає потоки даних із камер, лідара й радара, виділяє ознаки та формує об’єднані ML-представлення для головного комп’ютера автономного кермування. Це спеціалізований сенсорний фронтенд, а не окремий пристрій, здатний замінити весь комплекс автономного водіння. 171

Головне відкриття: спеціалізований чип перед основним «мозком»

Waymo описала процесор як спеціально розроблений 5-нм ASIC, призначений для обробки та злиття даних із сенсорів, а також запуску нейронних мереж у реальному часі. Заявлена мета — скоротити проміжок між надходженням першого пікселя із сенсора та появою представлення, яке використовує система для прийняття рішень на дорозі. 1719

Такий розподіл завдань має принципове значення. ASIC бере на себе складний ранній етап сприйняття навколишнього середовища, тоді як ширша бортова платформа залишається гетерогенною: у ній поєднуються власні ML-компоненти, центральні та графічні процесори, а також інші прискорювачі для координації, переміщення даних, журналювання й супутніх операцій. 1

Отже, йдеться не про те, що «Waymo замінила Nvidia одним чипом». Серед партнерів компанія назвала Nvidia та AMD, а також Micron, Samsung, SanDisk, Socionext і TSMC. 173

Які дані процесор об’єднує в реальному часі

У публічному описі Waymo прямо згадує три категорії сенсорів:

• лідар — для отримання тривимірної інформації про середовище;
• радар — для додаткового виявлення об’єктів і визначення відстані;
• камери, зокрема потоки з камер високої роздільної здатності.

Процесор у реальному часі виконує попередню обробку, виділення ознак і нейромережеве злиття даних із цих джерел. Waymo також описала часову фільтрацію шумів для сприйняття сцени в умовах слабкого освітлення. 1

За даними про презентацію на Hot Chips, система одночасно обробляє 13 потоків із камер високої роздільної здатності, а вбудовування даних із камер, лідара та радара надходять до енкодера сенсорного злиття. 158

Доступні первинні матеріали не підтверджують незалежно, що розкритий процесор також об’єднує дані з мікрофонів. Тому мікрофонні дані не варто вважати підтвердженою функцією цього ASIC. У шостому поколінні сенсорної системи Waymo справді є зовнішні аудіоприймачі, але сама їхня наявність не доводить, що ці мікрофони обробляє саме carTPU. 23

Заявлені характеристики з матеріалів Hot Chips

Найдетальніші цифри надійшли з матеріалів презентації та публікацій про Hot Chips, а не з офіційного повідомлення Waymo. У них наведено таку конфігурацію: 1516

Характеристика	Заявлені дані
Техпроцес	Автомобільна реалізація TSMC 5 нм N5
Корпус	FCBGA, 45 × 45 мм
Площа кристала	208 мм²
Пам’ять	LPDDR5X у корпусі чипа
Пропускна здатність пам’яті	273 ГБ/с
Споживання	Менш як 75 Вт
Продуктивність ML	Понад 1000 TOPS
Підключення до хоста	PCIe Gen5 x8 і Ethernet 25 Гбіт/с

Розміри корпусу й кристала, характеристики пам’яті та показник споживання слід сприймати саме як дані, наведені в повідомленнях про презентацію, а не як деталі, незалежно підтверджені офіційним оголошенням Waymo. Це важливе розмежування: офіційна публікація підтверджує призначення чипа, 5-нм виробництво, гетерогенну архітектуру, показник понад 1000 TOPS і список партнерів, тоді як значну частину технічних подробиць додали вторинні джерела. 1715

Гетерогенна архітектура, побудована навколо затримки

За даними висвітлення Hot Chips, у конструкції поєднано розроблені Waymo блоки обробки зображень, відеокодеків, приймання даних через MIPI та локальної scratchpad-пам’яті. Також згадуються можливості стороннього GPU, PCIe Gen5, Ethernet 25 Гбіт/с і IP-блоки безпечного завантаження. Для кожного обчислювального елемента, як повідомляється, передбачено 2 МБ банківської SRAM. 1516

Пріоритетом архітектури є не просто велике число в рекламному рядку продуктивності. Підхід Waymo зосереджений на передбачуваному виконанні з малою затримкою та тісному спільному проєктуванні апаратного й програмного забезпечення. У матеріалах презентації йдеться про компіляторний підхід до виконання великих «мегаядер», завдяки якому програмний стек і кремнієва частина оптимізуються разом — від надходження сенсорних даних до формування вбудовувань. 15

Для автомобільних обчислень це не косметична перевага. Система має в реальному часі обробляти величезні обсяги даних, працюючи в умовах обмежень за енергоспоживанням, тепловиділенням, фізичним простором, вібраціями та відмовостійкістю. Waymo заявляє, що її обчислювальна платформа використовує рідинне охолодження та два незалежні обчислювальні двигуни: якщо один виходить із ладу, другий може перебрати його функції. 1

Чому показник 1000 TOPS не варто сприймати без контексту

Понад 1000 TOPS — найгучніша цифра в описі чипа, але сама по собі вона не показує, наскільки ефективно комп’ютер працюватиме в автономному автомобілі. Важливо знати, які саме операції враховано, наскільки ефективно виконуються моделі, який обсяг даних потрібно переміщувати та як швидко система переходить від необробленого сигналу сенсора до корисного представлення.

Розкриття Waymo позиціонує власний ASIC як фронтенд-прискорювач, оптимізований під сенсорний комплекс і моделі компанії. Він має підвищити ефективність використання пропускної здатності та зменшити затримку, обробляючи дані ближче до місця їх надходження в автомобіль, замість того щоб передавати кожен необроблений потік безпосередньо на універсальний центральний процесор. 172

Доступні матеріали також не встановлюють, чи стосується показник понад 1000 TOPS одного обчислювального двигуна, чи пари резервованих двигунів. Тому без додаткових пояснень його не можна трактувати як простий показник доступної продуктивності всієї системи. 14

Стратегічний сигнал: мультимодальна автономність і спільне проєктування

Деніел Розенбанд сформулював мету Waymo як створення «надлюдського водія, який потрапляє в набагато менше аварій, ніж люди», а не системи, що лише імітує людське сприйняття. Цю позицію він висловив у контексті захисту підходу з камерами, лідаром і радаром — на противагу стратегії, що покладається тільки на камери. 6

Апаратна стратегія компанії відповідає цій логіці: Waymo спільно проєктує сенсори, алгоритми та кремнієві компоненти під вимоги автономного кермування. У шостому поколінні Waymo Driver використовується мультимодальна сенсорна система, де камери високої роздільної здатності, зображувальний радар і лідар працюють як єдиний комплекс. 22

Розенбанд також говорив про довгострокові плани запускати в автомобілі значно більші моделі штучного інтелекту — зрештою навіть модель із трильйоном параметрів — і зменшити бортовий комп’ютер від розміру «коробки для піци» до габаритів ноутбука. Це майбутні цілі, а не можливості, заявлені як частина нинішнього процесора. 6

Що саме розкрила Waymo

Найточніший висновок такий: Waymo не представила один чип, який сам здатен керувати роботаксі. Компанія створює спеціалізований обчислювальний конвеєр для найскладнішого раннього етапу — перетворення численних високошвидкісних потоків із сенсорів на надійні представлення з малою затримкою, які потім використовує основна система автономного кермування.

Підтверджене ядро оголошення — власний 5-нм ASIC для обробки сенсорів із продуктивністю ML понад 1000 TOPS, злиттям даних камер, лідара й радара в реальному часі, гетерогенною обчислювальною платформою, резервованими обчислювальними двигунами та широкою мережею апаратних партнерів. 171

Детальніші характеристики з Hot Chips — корпус 45 × 45 мм, кристал площею 208 мм², пропускна здатність LPDDR5X 273 ГБ/с і споживання менш як 75 Вт — допомагають краще уявити конструкцію, але переважно залишаються даними вторинних джерел. 1511 Разом ці матеріали показують, що Waymo розглядає автономне кермування як завдання периферійних обчислень і системної інженерії, де затримка, надійність, різноманітність сенсорів та енергоефективність не менш важливі, ніж «сирий» AI-потенціал.