Глибоке занурення в технологію обробки фотографій Qualcomm Snapdragon 888

За останні кілька років камери смартфонів стали набагато кращими. Частково це пов’язано з тим, що сенсори та об’єктиви камер стають все більшими і кращими. Але це також багато в чому пов’язано з тим, про що люди не часто замислюються: Покращення обробки зображень, що забезпечується чіпсетом вашого телефону. У наступному поколінні висококласних телефонів Android обробка зображень буде значною мірою забезпечуватися новим процесором Qualcomm Snapdragon 888.

• Використовуйте три камери одночасно
• Говорячи про штучний інтелект …
• Магія серійної зйомки
• Коли ви насправді побачите ці можливості?

Є багато речей, які роблять Qualcomm Snapdragon 888 кращим чіпсетом для фотографії, і це в основному зводиться до процесора сигналу зображення Spectra 580, або ISP – хоча є кілька інших речей, які також грають свою роль. Ось короткий огляд нової технології обробки зображень, що використовується в Snapdragon 888, і того, як вона може вплинути на те, як ви будете знімати фотографії та відео в 2021 році.

Використовуйте три камери одночасно

Мабуть, найбільшою головною особливістю Snapdragon 888 є той факт, що Spectra 580 має потрійні провайдери. Що це означає? Ну, по суті, це означає, що ви можете використовувати до трьох камер одночасно на своєму телефоні.

• Підступне оновлення iOS змусило мене знову зрадіти iPhone 14 Pro
• Тільки що придбали новий iPhone? Ось 12 порад та підказок для його освоєння
• Apple може скасувати iPhone SE 4 в наступному році – і я радий

Насправді це трохи корисніше, ніж здається. У минулі роки камери смартфонів регулярно використовували дві камери одночасно, при цьому ви не обов’язково замислювалися про це. Хорошим прикладом цього є використання датчика глибини, який збирає дані, необхідні смартфону для точної обробки таких ефектів, як боке або розмиття фону для портретного режиму.

Завдяки одночасній роботі потрійної камери можна знімати три відеопотоки 4K HDR одночасно – що може стати в нагоді відеооператорам, які, можливо, захочуть повернутися пізніше і вирізати між різними відеопотоками. Або ви можете зробити три 28-мегапіксельні фотографії і одночасно переглядати їх у видошукачі, що допоможе вам зробити найкращу фотографію, яку ви можете зробити.

“Ви можете знімати двома камерами, спрямованими на світ, а однією – на користувача, так що якщо ви збираєтеся зробити якийсь документальний фільм, який ви знімаєте двома камерами, наприклад, зі збільшенням, а потім ви хочете також зняти своє обличчя під час розповіді, ви також можете це зробити”, – сказав Джадд Хіп (Judd Heape), віце-президент з управління продуктами Qualcomm, в інтерв’ю виданню Digital Trends.

Штучний інтелект також може зіграти в цьому свою роль. AI Engine, вбудований в Snapdragon 888, може використовуватися в поєднанні з потрійною камерою, щоб гарантувати, що ваш об’єкт завжди буде правильно обрамлений. Qualcomm демонструє демонстраційну версію, створену ArcSoft, яка автоматично збільшує масштаб об’єкта, коли він відходить від камери, краще кадруючи кадр і створюючи більш якісне відео.

Іншою головною перевагою потрійних провайдерів є той факт, що вони можуть обробляти три потоки даних одночасно. Це трохи технічно, але спосіб, яким багато камер смартфонів роблять чудові фотографії в наші дні, полягає в тому, що вони роблять купу різних фотографій з різною експозицією, а потім об’єднують їх разом, щоб створити яскраву і деталізовану фотографію з широким динамічним діапазоном. За допомогою Snapdragon 888 така ж технологія може бути застосована до відео, що дозволить створювати набагато детальніші HDR-відео.

Говорячи про штучний інтелект …

ШІ буде грати інші ролі в обробці зображень на Snapdragon 888, особливо коли мова йде про автоматичну експозицію, автофокус і автоматичний баланс білого – також відомий як 3A. Раніше ШІ не обов’язково відігравав велику роль в цих областях, але на Snapdragon 888 він відіграє важливу роль – і Qualcomm заявляє, що це може мати значний вплив на мобільну фотографію.

“Ми фактично навчили нейронну мережу, засновану на системі людського зору”, – сказав Хіп. “Ми взяли групу людей і наділи їм на голови гарнітури віртуальної реальності, показали їм купу фотографій і відео, а також відстежували рух їхніх очей. Ви бачите, що користувач не обов’язково дивиться на ті частини сцени, які камера може вважати основними точками фокусування і експозиції. Там можуть бути люди вдалині, або цікаві об’єкти, які знаходяться за іншими об’єктами”.

Звичайно, ще належить з’ясувати, як саме це буде працювати в реальних умовах фото- та відеозйомки. Деякі користувачі можуть виявити, що це дуже зручна система, в той час як інші, ймовірно, захочуть зберегти ручне керування фокусуванням камери. Сподіваємося, що це допоможе зробити фокусування та експозицію більш інтуїтивно зрозумілими – зрештою, більшість людей просто хочуть, щоб камери їхніх смартфонів “просто працювали”. Зрештою, виробники телефонів зможуть вирішувати, які функції – або частини функцій – вони хочуть реалізувати, коли справа доходить до розробки додатків для своїх камер.

Магія серійної зйомки

У минулому році Qualcomm вітала Snapdragon 865, який пропонує швидкість обробки 2-гігапікселів в секунду, проте в цьому році компанія збільшує швидкість до 2,7 гігапікселів в секунду. В основному, результат полягає в тому, що Spectra 580 ISP може обробляти на 35% швидше, ніж Spectra 480 минулого року.

Що це означає для вас? Ну, простіше кажучи, технологія зможе робити до 120 фотографій з роздільною здатністю 12 Мп щосекунди, виводячи серійну фотозйомку на новий рівень на смартфонах.

“Ви можете натиснути кнопку на камері один раз, і вона зробить серію зйомки, яка захопить 120 зображень за одну секунду. Тобто 120 кадрів за секунду з роздільною здатністю 12 мегапікселів”, – сказав Хіп.

Це дуже вражає – і хоча виробникам доведеться впроваджувати деяке цікаве програмне забезпечення, щоб гарантувати, що у вас не буде звалища з 120 фотографій в пам’яті камери кожного разу, коли ви натискаєте кнопку зйомки, сам факт того, що це можливо, повинен допомогти гарантувати, що ви зможете знімати навіть дуже швидко рухомі об’єкти.

Коли ви насправді побачите ці можливості?

Всі ці нові функції є чудовими, але вони нічого не означають, якщо виробники смартфонів не впровадять їх або не включать їх у програмне забезпечення. Звичайно, терміни дійсно залежать від кожного виробника, але перший крок – це, звичайно, увімкнення таких функцій на апаратному рівні.

“Ми співпрацюємо з [виробниками] дуже рано, і ми отримуємо їхні відгуки на роки вперед”, – сказав Хіп. “Ми почали визначати цей чіп, коли я приєднався до Qualcomm ще в 2017 році, тому ми повинні планувати досить далеко вперед. Ми повинні подивитися на ринок і сказати: “Чи вважаємо ми, що нам потрібен потрійний ISP?”. Камера – це область, в якій багато [виробників] люблять диференціювати себе. Вони обирають різний набір функцій камери, об’єктивів, датчиків тощо. Хороша новина полягає в тому, що ми можемо забезпечити все це”.

Рекомендації редакції

• Samsung Galaxy S23: дата виходу, характеристики, ціна, чутки та новини
• Як iPhone 14 Plus став одним з найбільших технологічних провалів 2022 року
• Як налаштувати новий телефон Samsung Galaxy як професіонал
• Фотографічні стилі – найбільш недооцінена функція камери iPhone 14, яку ви не використовуєте
• З Pixel 8 Google повинен вирішити проблему з камерою, яка набридла багатьом користувачам

Source: digitaltrends.com