Фотосъемка на базе ии что это такое
Модуль ИИ в камере Хуавей: что это такое
11.12.2019 7,666 Просмотры
Под аббревиатурой ИИ принято понимать искусственный интеллект. В настоящее время им оснащается большое количество устройств. И смартфоны HUAWEI – не исключение. Что представляет собой данный модуль, какие возможности он предоставляет и как им пользоваться, будет рассмотрено в статье.
Что это такое
Компания ХУАВЕИ в 2019 году на слуху у всех. И это неудивительно, ведь она создала большое количество разработок, которые призваны изменить мир к лучшему. Камеры устройств, выпущенных ею, оснащены специальным процессором, используемым в ходе проведения нейросетевых вычислений. Альтернативное его наименование – ускоритель искусственного интеллекта. Этот ход компании стал прогрессивным.
Зачем это нужно
Особого внимания заслуживает камера устройства. С ее помощью можно без труда распознавать всевозможные сцены в кадре, а также осуществлять поиск и выбор оптимальных настроек. Количество этих сценариев в последнее время увеличилось. Новый показатель стал равняться 1500. Это дало пользователям возможность объединять несколько элементов в кадре и делать уровень адаптации более высоким.
Наряду с этим доступно одновременно несколько фильтров, которые делают картинку более красивой. Основной цвет при этом заметно выделяется, а фон при желании пользователя может быть размытым. Вместе с этим модуль ИИ позволяет осуществлять анализ пользовательских действий и делать соответствующие выводы.
Компания постоянно радует пользователей оригинальными новинками, в числе которых не только смартфоны, но и прочие устройства. Качество их постоянно растет, а цены остаются на приемлемом уровне.
Сегодня самые удивительные инновации в области цифровой фотографии создаются не благодаря инженерам, разрабатывающим сенсоры и объективы, а благодаря искусственному интеллекту и самообучающимся алгоритмам.
Конечно, зеркальные фотоаппараты умеют делать фото с размытым задним фоном уже много десятилетий. Вот только для этого им нужен крупный объектив. Большой объектив невозможно вставить в маленький смартфон, так что до появления двойных камер ни один мобильный телефон не был способен делать снимки с размытым задним фоном.
Впрочем, на этом прогресс не остановится. Совсем скоро искусственный интеллект позволит отказаться от двойных камер и вернуться к системам с единственным сенсором. Умный алгоритм будет определять объект съемки на фото и размывать фон вокруг него. Таким образом, необходимость в двойной камере отпадет.
Например, многие пользователи хотели бы снимать профессиональным зеркальным фотоаппаратом, но их отпугивает огромное количество настроек и параметров. Тут на выручку тоже приходит искусственный интеллект. К примеру, стартап Arsenal разрабатывает одноименное устройство, которое представляет собой умный ассистент фотографа. Миниатюрный гаджет подключается к фотоаппарату и позволяет пользователю удаленно менять настройки фотокамеры при помощи смартфона. Но еще более важно то, что Arsenal может сам устанавливать оптимальные параметры для каждого конкретного снимка. То есть, если раньше фотографу приходилось самому выбирать оптимальные выдержку, чувствительность и прочие параметры, теперь этим может заняться ассистент.
Поразительных результатов в обработке фотографий добились нейросети компании Google. Инженеры компании загрузили в машину тысячи профессиональных фотографий, сделанных людьми. Нейросеть проанализировала эти снимки и сделала собственные выводы о том, как должна выглядеть качественная фотография. Затем эти знания были загружены в камеры, установленные на автомобилях Google Street View. Когда такая машина едет по улицам, камера делает снимки в автоматическом режиме. “Понимание” того, как должна выглядеть хорошая фотография, позволило камерам сделать множество великолепных снимков.
Позже инженеры Google провели небольшой тест. Они перемешали снимки, сделанные в автоматическом режиме камерами Google Street View, с фотографиями, сделанными профессиональными фотографами. Затем группе случайных людей было предложено оценить качество всех фото. Примерно 40% снимков, сделанных искусственным интеллектом Google Street View, получили столь же высокие оценки, как и фотографии признанных мастеров.
Также компания Adobe тестирует работу искусственного интеллекта в самом Photoshop. К примеру, в ноябре разработчики опубликовали видео с демонстрацией экспериментального инструмента обрезки. Раньше, чтобы вырезать что-то из фотографии, пользователь был вынужден долго и кропотливо обводить этот объект вручную. Теперь же искусственный интеллект может сделать это за доли секунды:
Создание не только лиц, но и личностей: как искусственный интеллект влияет на фотографию
Эксперты фотобанка Depositphotos рассказывают, какое будущее искусственный интеллект готовит для фотографии
ИИ (за)меняет фотографию
Cегодня ИИ меняет саму суть фотографии. Только представьте, что получить фото можно вообще без камеры. Это уже реально благодаря разработке Drawing Bot от компании Microsoft. Для того чтобы создать изображение, программе достаточно общего описания. Она может с нуля, пиксель за пикселем нарисовать что угодно — от пейзажа до абсолютно сюрреалистических картин. При этом каждое изображение содержит детали, которых не было в описании. Это доказывает, что ИИ не просто выполняет задачу, но и проявляет собственное воображение.
В основе этой технологии две модели машинного обучения. Одна создает изображения из текстовых описаний, а другая использует их, чтобы оценить подлинность сгенерированных картинок. Простыми словами, первая пытается создать поддельные изображения, а вторая не хочет, чтобы ее обманули. Поэтому обе постоянно совершенствуются. В результате получаются настолько реалистичные картинки, что их легко спутать с фотографиями.
Ваши удачные фото — заслуга ИИ
Развитие фотокамер движется в сторону все большей автоматизации. В первую очередь это касается камер смартфонов. Компания Apple использовала методы машинного обучения в портретном режиме для iPhone. Суть в том, что одна камера распознает людей, а вторая выделяет объект, размывая фон, в итоге получаются глубокие и выразительные кадры. И хотя технология распознавания людей с помощью машинного обучения не была новой, у обычных потребителей впервые появилась возможность применять ее в повседневной жизни с помощью своих смартфонов.
Последние модели iPhone оснащены уже полноценной ИИ-камерой. Прежде чем пользователь нажимает на кнопку, чтобы сделать фото, она снимает восемь кадров. После камера сравнивает полученные результаты и объединяет лучшие пиксели каждого из них в оптимальное изображение. В Apple эту инновационную функцию на базе нейронной сети назвали глубоким синтезом (deep fusion). Это первый раз, когда ее применили в фотосъемке.
ИИ создает новую реальность
Искусственный интеллект дает возможность буквально создать новую действительность. Компания Nvidia посвятила этому целое исследование, в ходе которого получила невероятно реалистичные фотографии фейковых знаменитостей. И хотя идея не нова, эти снимки стали самыми убедительными и детальными из когда-либо сделанных.
Современные технологии позволяют создавать не просто новые лица, но и личностей. Лил Микела — 19-летняя певица из Лос-Анджелеса и самый известный ИИ-инфлюенсер с более 1,9 млн подписчиков в Instagram. Она — творение компании Brud, которая специализируется на робототехнике и ИИ.
Honor 10 обрел разум или камера с искусственным интеллектом. Примеры фото
Нечто удивительное и странное происходит с современными камерами в смартфонах — они становятся умными. Теперь камеры научили понимать, что они видят, и они связаны с искусственным интеллектом, который используя свои знания, улучшает качество фотографий. В некоторых случаях камера способна подсказать пользователю, как усовершенствовать композицию — когда снимок необходимо приблизить, отдалить, или выровнять. Но есть ли толк от искусственного интеллекта и действительно ли он улучшает качество фотографий? Этот вопрос интересует многих пользователей, и незадолго до анонса Honor 10 его создатели решили наглядно показать преимущества AI.
Сегодня глава Honor опубликовал в сети примеры фото на камеру флагмана Honor 10, выполненные в обычном режиме и с использованием искусственного интеллекта. У вас есть возможность самостоятельно сравнить и сделать выводы о качестве снимков, а также понять, есть ли в конечном счете, прок от AI.
Напомним, что премьера Honor 10 назначена на 19 апреля и среди его характеристик называют чип Kirin 970, широкоформатный дисплей, двойную фронтальную камеру, два объектива на тыльной стороне, где один из них получил датчик на 40 Мп.
Как искусственный интеллект меняет фотографию
Если вас заботит вопрос о том, насколько будет хороша камера вашего следующего смартфона, то стоит обратить внимание на то, что производитель говорит о наличии искусственного интеллекта (ИИ). Если отбросить шумиху и чистый маркетинг, то нет смысла отрицать, что эта технология подняла прогресс фотографии на новый уровень за последние несколько лет и нет никаких сомнений полагать, что темп прогресса замедлятся.
Аппаратное обеспечение тоже не стоит на месте, но самые впечатляющие достижения в области фотографии за последнее время случились на программном уровне, и это во многом благодаря ИИ, который даёт понять объективам куда их навёл пользователь.
Сервис Google Фото продемонстрировал, как искусственный интеллект умеет взаимодействовать с огромными массивами снимков. До его запуска Google использовала машинное обучение для категоризации изображений в Google+, эти навыки перекочевали в Google Фото. ИИ привел в порядок миллиарды неорганизованных пользовательских библиотек в порядок.
Искусственный интеллект Google Фото основывался на предыдущей разработки компании DNNresearch, которую поисковый гигант приобрел в 2013 году. Компания создала нейронную сеть с контролируемым обучением, она могла находить визуальные подсказки на уровне пикселей, чтобы идентифицировать категорию. Со временем алгоритм научился правильно распознавать изображения с помощью шаблонов, например, по снимку панды он обучился правильно идентифицировать другие фотографии панд. Он определяет, где черный мех, а где белый, а также пропорции животного. Используя эту информацию ИИ отличает панд от коров голштинской породы. Все эти «знания» классифицируются и заносятся в базу данных, они используются для поиска снимков по абстрактным терминам, таким, как «животное» или «завтрак».
Подобный алгоритм требует много времени и вычислительной мощности, поэтому вся работа выполняется на серверах компании после того, как снимок загружается в облако. Как только фотографии попадают в центр обработки данных (ЦОД) Google начинает использование алгоритма для анализа и маркировки. Примерно через год после запуска сервиса Google Фото компания Apple анонсировала функцию поиска фотографий, которая аналогичным образом задействовала нейронные сети, но в рамках обязательств компании по обеспечению конфиденциальности категоризация выполняется процессором устройства без отправки данных на сервера. Обычно этот процесс занимает несколько дней и происходит в фоновом режиме.
Эти компоненты используются в «вычислительной» фотографии, под этот термин попадают такие явления современного мобильного фото, как эффект глубины резкости портретных режимов и алгоритмы, позволяющие создавать качественные изображения в смартфонах Pixel. Apple использует эту технологию для управления портретным режимом в смартфонах с двумя камерами. Процессор обработки изображений iPhone идентифицирует в кадре человека с помощью одной камеры, а вторая камера создает карту глубины резкости, чтобы отделить объект и размыть фон.
Google остается очевидным лидером в области «вычислительной фотографии» и превосходные результаты камер всех трех поколений Pixel тому доказательство. Режим HDR+ использует сложный алгоритм, объединяющий несколько снимков с разным уровнем экспозиции в одну фотографию. Наличие машинного обучения означает, что система продолжает улучшаться со временем. Google обучил свой искусственный интеллект огромному набору данных с помощью сервиса Google Фото и эти знания помогают камере Pixel в подборе правильной экспозиции.
Говоря о преимуществе смартфонов Google стоит упомянуть режим Night Sight, который с помощью длинных выдержек и алгоритма машинного обучения показывает впечатляющие результаты на съемках в условиях плохого освещения. Эта функция наилучшим образом реализована в Pixel 3, потому что алгоритмы разрабатывались с учетом аппаратного обеспечения этого устройства. Несмотря на это, Google сделала режим Night Sight доступным для всего модельного ряда смартфонов Pixel, даже для самых первых, в которых отсутствует оптическая стабилизация. Это решение доказывает, что программное обеспечение выходит на первый план, когда дело доходит до мобильной фотографии.
Тем не менее, аппаратная составляющая все еще имеет значение, особенно в случаях, когда она умеет взаимодействовать с искусственным интеллектом. Отдельные процессоры обработки изображения были очень важны для качества мобильной фотографии, но похоже, что чипы с ИИ будут играть более важную роль в развитии цифровой фотографии. Huawei была первой компанией, представившей систему на кристалле (SoC) с искусственным интеллектом — Kirin 970, хотя Apple Bionic A11 в конечном итоге первым добрался до пользователей. Крупнейший поставщик процессоров Qualcomm не уделяет особого внимания машинному обучению. Google разработала свой собственный чип под названием Pixel Visual Core, который помогает решать задачи связанные с ИИ. Последняя версия Apple A12 Bionic оснащена восьмиядерным нейронным движком, который может выполнять задачи в среде машинного обучения Apple до 9 раз быстрее, чем A11. Apple сообщает, что это дает камере лучшее понимание фокальной плоскости, а это помогает создавать более реалистичную глубину резкости.
Эта технология важнее для эффективного и производительного машинного обучения прямо на устройстве. Google продемонстрировала впечатляющую работу, которая снижает нагрузку на обработку с ghvhom. ЦОД, в то же время нейронные движки (Neural Engine) становятся быстрее с каждым годом. На раннем этапе развития «вычислительной» фотографии у камер смартфонов, которые разрабатывались для работы в тандеме с машинным обучением, есть реальные преимущества. Из всех возможностей искусственного интеллекта, фотография — наиболее практичная область применения. Камера — неотъемлемая часть любого смартфона, а ИИ — отличный способ её улучшить.