Компанія Google представила смартфони Pixel 6 і Pixel 6 Pro, в яких використовується процесор власної розробки. Також Google показала кілька нових алгоритмів машинного навчання для роботи із зображеннями. Трансляція презентації проходила на YouTube.
Google Tensor
Головною відмінністю нових смартфонів став процесор (система на чіпі) Google Tensor, який компанія розробила самостійно. У центральному процесорі вісім ядер: два високопродуктивних Cortex-X1 (для порівняння, в Qualcomm Snapdragon одне таке ядро), два середніх і ще чотири високоефективних. У чіпі також використовується 20-ядерний відеопроцесор і три допоміжних блоки: співпроцесор для постійної фонової роботи деяких алгоритмів, таких як розпізнавання музики навколо; процесор для прискорення алгоритмів машинного навчання, архітектура якого розроблена з урахуванням нейромережевих моделей, що використовуються розробниками Google; і сигнальний процесор, в який на апаратному рівні винесена частина нейромережевої обробки кадрів. У чіпі є апаратно і програмно ізольоване ядро зі своєю операційною системою для роботи з важливими даними, а крім нього у смартфона є ще один окремий чіп для важливих даних.
Pixel 6 и 6 Pro
Самі смартфони виділяються насамперед дизайном блоку камер, розтягнутим по всій ширині задньої панелі. В обох смартфонах є основна камера з роздільною здатністю 50 мегапікселів і ширококутна на 12 мегапікселів, а в Pixel 6 Pro є і третя. У ній використовується об'єктив з перископічною конструкцією і чотириразовим збільшенням (і 20-разовим програмно-апаратним збільшенням, про принцип роботи якого ми розповідали раніше). Її дозвіл становить 48 мегапікселів. Роздільна здатність передньої камери становить 11,1 мегапікселя для Pro і 8 для звичайної моделі.
Версії розрізняються розміром екрану: у звичайній моделі це 6,4 дюйма з роздільною здатністю FullHD і частотою 60-90 герц, а в Pro 6,7 дюйма, роздільна здатність QHD і підтримка частот від 10 до 120 герц. В обох моделях використовується OLED-матриця з вбудованим датчиком відбитка пальця. Обидві моделі підтримують бездротову зарядку, в тому числі і зворотну, працюють в 5G-мережах і захищені від води і пилу за стандартом IP68. Обсяг оперативної пам'яті - 8 у звичайній моделі і 12 у Pro. Гаджети надійдуть у продаж 28 жовтня за ціною 599 і 899 доларів відповідно. Примітно, що Google пообіцяла випускати оновлення безпеки для Pixel 6 протягом як мінімум п'яти років.
Алгоритми
Крім апаратних поліпшень, смартфони отримали і кілька програмних, заснованих на алгоритмах машинного навчання. Велика частина з них стосується камери. Зокрема, смартфони навчилися боротися з розмитими обличчями на знімках. Ще до того, як користувач натиснув на кнопку зйомки, алгоритми відстежують обличчя в кадрі. Якщо перед камерою є обличчя людини, яке швидко рухається, то крім основної камери смартфон починає знімати на ширококутну, причому з меншою витримкою для зменшення змащеності. Потім, вже після натискання на кнопку зйомки, він покращує різкість обличчя на основному кадрі, «накладаючи» більш різке обличчя з ширококутної камери.
Додаток Google Photo навчили розуміти і пропонувати видалити об'єкти, зафарбувавши їх реалістичною заміною. Ссама функція видалення об'єктів давно застосовується в деяких програмах, проте зазвичай без автоматичного визначення зайвих деталей.
Розробники поліпшили і можливості зйомки відео: Pixel 6 і 6 Pro отримали підтримку зйомки HDR-відео в роздільній здатності 4K і частотою 60 кадрів на секунду. Для цього використовується нейромережа HDRnet +, частина обчислень якої апаратно прискорюються на процесорі. Варто відзначити, що iPhone вже не перший рік вміє знімати HDR-відео, роблячи замість кожного кадру пару з недо- і переекспонованих знімків, які потім об'єднуються.
Компанія розповіла, що доотримала додаток камери і Google Photo на датасеті з людьми, які мають відмінний від білого колір шкіри, що дозволило краще передавати колір і яскравість їх шкіри на фотографіях.
Крім алгоритмів для фото і відео, Google також допрацювала нейромережеві моделі для розпізнавання і перекладу тексту прямо на пристрої (без відправки даних на сервер) і поліпшила підтримку автоматичного перекладу в месенджерах:
Нещодавно свої нові смартфони показала Apple. Головні зміни в них торкнулися системи камер, а найпомітнішим зовні став зменшений виріз в екрані.