Obsah
Google Pixel 4 a Pixel 4 XL se mohou pochlubit nejlepšími softwarovými funkcemi a schopnostmi fotoaparátu, které jsou částečně možné díky začlenění jádra Pixel Neural Core. Tento malý čip sedí vedle hlavního procesoru Pixel 4, aby efektivně fungoval výkonný strojový stroj Google. Tyto možnosti sahají od zpracování obrazu po rozpoznávání hlasu a přepisování.
Neurální jádro však není první trhlinkou společnosti Google u interního procesního stroje pro učení chytrých telefonů. Pixel 2 a 3 dodávaný s Pixel Visual Core, navržený tak, aby odložil zobrazovací úlohy jako HDR + pro lepší výkon a energetickou účinnost. Neurální jádro Pixel 4 staví na tomto základu s vylepšenými funkcemi a výběrem nových případů použití.
Nenechte si ujít: Zde je to, co umí Astro režim Pixel 4
Jak funguje Neurální jádro Pixelu?
Google dosud nesdělil podrobnosti o tom, co se přesně děje uvnitř jeho neuronového jádra. Víme však, jak funguje jeho předchozí generace Visual Core a jaký typ technik se obvykle používá v procesorech strojového učení (ML).
Na rozdíl od tradičního CPU vytvořeného pro zpracování široké škály výpočetních úloh jsou procesory strojového učení (NPU), jako je Neurální jádro, optimalizovány pro několik specifických složitých matematických úloh. Díky tomu jsou spíše jako procesory s digitálním signálem (DSP) nebo jednotky pro zpracování grafiky (GPU), ale jsou optimalizovány pro specifické operace používané algoritmy strojového učení.
Sloučená vícenásobná akumulace je velmi běžná operace zobrazování a hlasové ML, kterou nenajdete v rozsáhlé podpoře uvnitř CPU. Na rozdíl od moderních 32bitových a 64bitových procesorů se tyto operace provádějí na velikostech dat pouhých 16, 8 a dokonce 4 bitů. Pro podporu těchto operací při maximální účinnosti jsou vyžadovány vlastní hardwarové bloky.
Neurální jádro urychluje obrazové a hlasové algoritmy, které běží méně efektivně na CPU nebo GPU.
Neural Core zabuduje vyhrazené aritmetické logické jednotky do hardwaru, aby tyto pokyny zvládl rychle as minimální spotřebou energie, místo aby zabíral více cyklů CPU. Čip s největší pravděpodobností zahrnuje stovky těchto ALU ve více jádrech, se sdílenou místní pamětí a mikroprocesorem dohlížejícím na plánování úloh.
Google bude téměř jistě optimalizovat svůj nejnovější hardwarový design kolem svých algoritmů asistenta, hlasu a obrazu. Závislost na ALU schopnostech Neural Core je důvodem, proč se nejnovější fotografické funkce Pixel 4 nedostanou na starší telefony.
Co může Neurální jádro udělat?
Neurální jádro se jeví jako klíčová složka v řadě nových funkcí zabalených do zařízení Google Pixel 4 a Pixel 4 XL. Tato vylepšení se soustředí hlavně na zpracování obrazu a hlasu.
Na straně fotografie obsahuje seznam ovládání dvojí expozice, režim astrofotografie, živé náhledy HDR + a noční vidění. Pixel 4 společnosti Google provádí dvojí úpravy expozice a HDR + v reálném čase, takže uživatelé mohou vidět výsledky svých obrázků před zasažením závěrky. To ukazuje na velké zvýšení výpočetní síly pro obrázky ve srovnání s Pixel 3.
Kromě toho tyto telefony zavádějí vyvážení bílé barvy do svého kamerového systému, který opravuje žluté odstíny často spojené s nízkým světlem. V režimu Astro Night Sight se používá více expozičních snímků, detekce oblohy a kombinace obrázků, které vyžadují velké množství inteligentních čipů pro zpracování a detekci obrazu. Nakonec funkce Časté tváře Pixel 4 identifikuje a doporučuje lepší fotografie osob, které často fotografujete.
Pixel 4 se může pochlubit také aktualizovaným asistentem, který vylepšuje jazykové modely, které nyní mohou běžet nativně na zařízení a ne v cloudu. Nové hlasové funkce také zahrnují pokračování konverzací, přepis zvuku pomocí aplikace Rekordér a vylepšené rozpoznávání řeči. Neurální jádro také pravděpodobně hraje roli v technologii 3D odemykání obličeje telefonu.
Vlna budoucnosti
Neurální jádro společnosti Google je dosud nejsilnějším výrobcem inteligentního křemíku pro chytré telefony společnosti Google, který umožňuje efektivnější úpravy obrázků v reálném čase než dříve. Google se pyšní svými špičkovými technologiemi strojového učení a největší prodejní body Pixel 4 se spoléhají na plody těchto investic.
Pixel 4 však není jediným chytrým telefonem, který je výkonným strojovým procesorem pro učení. Všechny smartphony poháněné Snapdragonem 855 nabízejí vyhrazený hardware pro strojové učení. Přestože Google má zjevně různé potřeby a možná ještě silnější požadavky na své chytré telefony. Podobně se Kirin 990 od společnosti Huawei může pochlubit dvěma interními jednotkami NPU, které jsou dostatečně výkonné, aby umožňovaly efekt videa v reálném čase a další.
Hardware pro strojové učení se rychle stává základním kamenem vlajkových lodí smartphonu pro obraz, video a AI. Google se svými pixely 4 a neuronovým jádrem umisťuje hned vedle horní části balení.
Až poté: Fotoaparáty Pixel společnosti Google se vůbec nesnaží být fotoaparáty
