Фотосъемка на базе ии что значит
Как искусственный интеллект меняет фотографию
Если вас заботит вопрос о том, насколько будет хороша камера вашего следующего смартфона, то стоит обратить внимание на то, что производитель говорит о наличии искусственного интеллекта (ИИ). Если отбросить шумиху и чистый маркетинг, то нет смысла отрицать, что эта технология подняла прогресс фотографии на новый уровень за последние несколько лет и нет никаких сомнений полагать, что темп прогресса замедлятся.
Аппаратное обеспечение тоже не стоит на месте, но самые впечатляющие достижения в области фотографии за последнее время случились на программном уровне, и это во многом благодаря ИИ, который даёт понять объективам куда их навёл пользователь.
Сервис Google Фото продемонстрировал, как искусственный интеллект умеет взаимодействовать с огромными массивами снимков. До его запуска Google использовала машинное обучение для категоризации изображений в Google+, эти навыки перекочевали в Google Фото. ИИ привел в порядок миллиарды неорганизованных пользовательских библиотек в порядок.
Искусственный интеллект Google Фото основывался на предыдущей разработки компании DNNresearch, которую поисковый гигант приобрел в 2013 году. Компания создала нейронную сеть с контролируемым обучением, она могла находить визуальные подсказки на уровне пикселей, чтобы идентифицировать категорию. Со временем алгоритм научился правильно распознавать изображения с помощью шаблонов, например, по снимку панды он обучился правильно идентифицировать другие фотографии панд. Он определяет, где черный мех, а где белый, а также пропорции животного. Используя эту информацию ИИ отличает панд от коров голштинской породы. Все эти «знания» классифицируются и заносятся в базу данных, они используются для поиска снимков по абстрактным терминам, таким, как «животное» или «завтрак».
Подобный алгоритм требует много времени и вычислительной мощности, поэтому вся работа выполняется на серверах компании после того, как снимок загружается в облако. Как только фотографии попадают в центр обработки данных (ЦОД) Google начинает использование алгоритма для анализа и маркировки. Примерно через год после запуска сервиса Google Фото компания Apple анонсировала функцию поиска фотографий, которая аналогичным образом задействовала нейронные сети, но в рамках обязательств компании по обеспечению конфиденциальности категоризация выполняется процессором устройства без отправки данных на сервера. Обычно этот процесс занимает несколько дней и происходит в фоновом режиме.
Эти компоненты используются в «вычислительной» фотографии, под этот термин попадают такие явления современного мобильного фото, как эффект глубины резкости портретных режимов и алгоритмы, позволяющие создавать качественные изображения в смартфонах Pixel. Apple использует эту технологию для управления портретным режимом в смартфонах с двумя камерами. Процессор обработки изображений iPhone идентифицирует в кадре человека с помощью одной камеры, а вторая камера создает карту глубины резкости, чтобы отделить объект и размыть фон.
Google остается очевидным лидером в области «вычислительной фотографии» и превосходные результаты камер всех трех поколений Pixel тому доказательство. Режим HDR+ использует сложный алгоритм, объединяющий несколько снимков с разным уровнем экспозиции в одну фотографию. Наличие машинного обучения означает, что система продолжает улучшаться со временем. Google обучил свой искусственный интеллект огромному набору данных с помощью сервиса Google Фото и эти знания помогают камере Pixel в подборе правильной экспозиции.
Говоря о преимуществе смартфонов Google стоит упомянуть режим Night Sight, который с помощью длинных выдержек и алгоритма машинного обучения показывает впечатляющие результаты на съемках в условиях плохого освещения. Эта функция наилучшим образом реализована в Pixel 3, потому что алгоритмы разрабатывались с учетом аппаратного обеспечения этого устройства. Несмотря на это, Google сделала режим Night Sight доступным для всего модельного ряда смартфонов Pixel, даже для самых первых, в которых отсутствует оптическая стабилизация. Это решение доказывает, что программное обеспечение выходит на первый план, когда дело доходит до мобильной фотографии.
Тем не менее, аппаратная составляющая все еще имеет значение, особенно в случаях, когда она умеет взаимодействовать с искусственным интеллектом. Отдельные процессоры обработки изображения были очень важны для качества мобильной фотографии, но похоже, что чипы с ИИ будут играть более важную роль в развитии цифровой фотографии. Huawei была первой компанией, представившей систему на кристалле (SoC) с искусственным интеллектом — Kirin 970, хотя Apple Bionic A11 в конечном итоге первым добрался до пользователей. Крупнейший поставщик процессоров Qualcomm не уделяет особого внимания машинному обучению. Google разработала свой собственный чип под названием Pixel Visual Core, который помогает решать задачи связанные с ИИ. Последняя версия Apple A12 Bionic оснащена восьмиядерным нейронным движком, который может выполнять задачи в среде машинного обучения Apple до 9 раз быстрее, чем A11. Apple сообщает, что это дает камере лучшее понимание фокальной плоскости, а это помогает создавать более реалистичную глубину резкости.
Эта технология важнее для эффективного и производительного машинного обучения прямо на устройстве. Google продемонстрировала впечатляющую работу, которая снижает нагрузку на обработку с ghvhom. ЦОД, в то же время нейронные движки (Neural Engine) становятся быстрее с каждым годом. На раннем этапе развития «вычислительной» фотографии у камер смартфонов, которые разрабатывались для работы в тандеме с машинным обучением, есть реальные преимущества. Из всех возможностей искусственного интеллекта, фотография — наиболее практичная область применения. Камера — неотъемлемая часть любого смартфона, а ИИ — отличный способ её улучшить.
Сегодня самые удивительные инновации в области цифровой фотографии создаются не благодаря инженерам, разрабатывающим сенсоры и объективы, а благодаря искусственному интеллекту и самообучающимся алгоритмам.
Конечно, зеркальные фотоаппараты умеют делать фото с размытым задним фоном уже много десятилетий. Вот только для этого им нужен крупный объектив. Большой объектив невозможно вставить в маленький смартфон, так что до появления двойных камер ни один мобильный телефон не был способен делать снимки с размытым задним фоном.
Впрочем, на этом прогресс не остановится. Совсем скоро искусственный интеллект позволит отказаться от двойных камер и вернуться к системам с единственным сенсором. Умный алгоритм будет определять объект съемки на фото и размывать фон вокруг него. Таким образом, необходимость в двойной камере отпадет.
Например, многие пользователи хотели бы снимать профессиональным зеркальным фотоаппаратом, но их отпугивает огромное количество настроек и параметров. Тут на выручку тоже приходит искусственный интеллект. К примеру, стартап Arsenal разрабатывает одноименное устройство, которое представляет собой умный ассистент фотографа. Миниатюрный гаджет подключается к фотоаппарату и позволяет пользователю удаленно менять настройки фотокамеры при помощи смартфона. Но еще более важно то, что Arsenal может сам устанавливать оптимальные параметры для каждого конкретного снимка. То есть, если раньше фотографу приходилось самому выбирать оптимальные выдержку, чувствительность и прочие параметры, теперь этим может заняться ассистент.
Поразительных результатов в обработке фотографий добились нейросети компании Google. Инженеры компании загрузили в машину тысячи профессиональных фотографий, сделанных людьми. Нейросеть проанализировала эти снимки и сделала собственные выводы о том, как должна выглядеть качественная фотография. Затем эти знания были загружены в камеры, установленные на автомобилях Google Street View. Когда такая машина едет по улицам, камера делает снимки в автоматическом режиме. “Понимание” того, как должна выглядеть хорошая фотография, позволило камерам сделать множество великолепных снимков.
Позже инженеры Google провели небольшой тест. Они перемешали снимки, сделанные в автоматическом режиме камерами Google Street View, с фотографиями, сделанными профессиональными фотографами. Затем группе случайных людей было предложено оценить качество всех фото. Примерно 40% снимков, сделанных искусственным интеллектом Google Street View, получили столь же высокие оценки, как и фотографии признанных мастеров.
Также компания Adobe тестирует работу искусственного интеллекта в самом Photoshop. К примеру, в ноябре разработчики опубликовали видео с демонстрацией экспериментального инструмента обрезки. Раньше, чтобы вырезать что-то из фотографии, пользователь был вынужден долго и кропотливо обводить этот объект вручную. Теперь же искусственный интеллект может сделать это за доли секунды:
Модуль ИИ в камере Хуавей: что это такое
11.12.2019 7,666 Просмотры
Под аббревиатурой ИИ принято понимать искусственный интеллект. В настоящее время им оснащается большое количество устройств. И смартфоны HUAWEI – не исключение. Что представляет собой данный модуль, какие возможности он предоставляет и как им пользоваться, будет рассмотрено в статье.
Что это такое
Компания ХУАВЕИ в 2019 году на слуху у всех. И это неудивительно, ведь она создала большое количество разработок, которые призваны изменить мир к лучшему. Камеры устройств, выпущенных ею, оснащены специальным процессором, используемым в ходе проведения нейросетевых вычислений. Альтернативное его наименование – ускоритель искусственного интеллекта. Этот ход компании стал прогрессивным.
Зачем это нужно
Особого внимания заслуживает камера устройства. С ее помощью можно без труда распознавать всевозможные сцены в кадре, а также осуществлять поиск и выбор оптимальных настроек. Количество этих сценариев в последнее время увеличилось. Новый показатель стал равняться 1500. Это дало пользователям возможность объединять несколько элементов в кадре и делать уровень адаптации более высоким.
Наряду с этим доступно одновременно несколько фильтров, которые делают картинку более красивой. Основной цвет при этом заметно выделяется, а фон при желании пользователя может быть размытым. Вместе с этим модуль ИИ позволяет осуществлять анализ пользовательских действий и делать соответствующие выводы.
Компания постоянно радует пользователей оригинальными новинками, в числе которых не только смартфоны, но и прочие устройства. Качество их постоянно растет, а цены остаются на приемлемом уровне.
Фототест: как работает Искусственный Интеллект при съемке?
Что за смартфон?
Huawei nova 3 — более «молодежная» и доступная «сестра» флагманских P20 Pro и Mate 20 Pro. При этом в nova 3 используется тот же мощный топовый процессор Kirin 970 c отдельным ядром для искусственного интеллекта (аналогичный P20 Pro), отличная двойная основная камера на 24 МП + 16 МП с зумом и двойная фронталка 24 МП + 2 МП — также с поддержкой искусственного интеллекта и аппаратного боке.
В нашем обзоре мы уже отмечали, что это одна из лучших камер в среднем ценовом диапазоне. Все при ней: и двукратный зум без потерь, и качественные модули, и ночная съемка. В нашем материале — тест камеры nova 3 в самых разных условиях на протяжении 10 дней. Получилась ли замена фотоаппарату?
Жесткий свет
Для тестов камеры мы прилетели в солнечный Севастополь. Богатство местной природы позволит произвести съёмку как при ярком контрастном свете, так и в полной темноте, мы найдем пещеры, животных, насекомых. И сделаем несколько селфи — куда же без них!
Большинство фотографий в этом материале представлены в формате слайдеров. С одной стороны представлен снимок в стандартном режиме, а с другой — с включенным AI режимом.
В ночном снимке искусственный интеллект не поскупился на двойную экспозицию — слабее освещенный тротуар на «умной» фотографии высветлен и смотрится значительно ближе к тому, как это выглядело в реальности. Тот же трюк днем может пригодиться при контровом свете, например, если съемка ведется из помещения или из тени в сторону освещенной улицы.
Мягкий свет
Если камера видит зеленую растительность, нейросеть автоматически накладывает специфический фильтр, который повышает насыщенность цветов. Без AI режима сцена с сотрудником аэропорта, который поливает зеленую стену с живыми папоротниками на высоте третьего этажа смотрится не так впечатляюще.
То же касается неба — днем над морем часто бывает не очень живописная белесая дымка, из-за которой вода некрасиво сливается с небом. Но искусственный интеллект приходит на помощь. Обученный миллионами примеров алгоритм точно определяет, небо и линию горизонта и добавляет синевы, отдельно улучшая другие видимые объекты, например, зеленый лес ялтинских предгорий.
Впрочем, в пасмурную погоду это режим работает не хуже.
Как работает ИИ в камере
К слову, в отличие от моделей прошлого года, в nova 3 AI режим работает не только на основной, но и на фронтальной камере.
Благодаря точному распознаванию сцен, смартфон одним щелчком затвора делает снимки, которые потом можно спокойно выгружать в Инстаграм с хештегами #снятонаhuawei и #безобработки — и не нужны ни сторонние редакторы, ни даже встроенные фильтры самой соцсети, кадры и так смотрятся ярко и вызывают зависьть (и лайки).
Но, пожалуй, куда более практически значимой особенностью «умной» камеры Huawei nova 3 можно назвать ее способность делать отлично детализированные, четкие снимки даже при очень плохом освещении.
Тут в дело вступают несколько характеристик. Во-первых, двойная камера уже традиционно для Huawei состоит из основного цветного и второго черно-белого сенсора. Так как ч/б матрице не надо улавливать цветовые оттенки, она способна захватывать больше света, подробнее прорабатывая объекты в темноте с меньшим количеством шумов. Одновременно с этим камера делает и цветной кадр, а потом объединяет сырую информацию с двух цифровых матриц в одно резкое цветное изображение.
Но это еще не все — смартфоны Huawei 2018 года используют комбинацию оптической и «интеллектуальной» цифровой стабилизации изображения. Так называемая AIS (AI image stabilization) предугадывает (почти всегда корректно) движения объектов и направление тряски рук, чтобы снимки с длинной выдержкой меньше смазывались. Работу в темноте можно оценить на кадрах из Мраморной пещеры в горе Чатырдаг, в которой никогда не было естественного света.
А еще продвинутая стабилизация отлично проявляет себя при макросъемке на телеобъектив. С двукратным зумом эффект от всех движений камеры удваивается, и сделать качественный резкий кадр сложнее. AIS решает эту проблему, а искусственный интеллект параллельно увеличивает контрастность и проработку структуры, чтобы мелкие объекты вроде цветов и насекомых лучше выделялись из фона.
В официальной рознице Huawei nova 3 стоит 29 990 рублей с учетом целого вороха подарков для отпуска и продолжительной фото-охоты со смартфоном: внешнего аккумулятора с поддержкой быстрой зарядки Huawei Charge, фитнес-трекера Huawei Band 2 Pro и монопода-штатива.
[Обсуждения] Что такое AI камера в смартфонах?
photo_2020-06-12_22-15-11.jpg (171.1 KB, Downloads: 0)
2020-06-13 03:16:03 Upload
Ежедневно миллионы людей делают различные фотографии с использованием профессиональной камеры либо обычного смартфона. Хороший модуль камеры в смартфоне – залог успеха той или иной модели.
Xiaomi, также как и другие производители смартфонов, создала фирменный искусственный интеллект (ИИ) для прокачки мобильной съемки. Эта возможность позволяет автоматически подбирать настройки камеры для текущей сцены, благодаря чему снимки получаются более живыми и интересными.
1212.jpg (431.65 KB, Downloads: 0)
2020-06-13 03:21:26 Upload
Изначально ИИ использовали для распознавания лица во время съёмки. Потом искусственный интеллект научили распознавать улыбку и жесты используя их как команду для начала съёмки. Теперь искусственный интеллект используется не только в камере но и во всем остальном смартфоне.
Так двайте же разберемся:
Что такое АI камера и для чего она нужна?
AI означает искусственный интеллект. Искусственный интеллект внутри камеры смартфона – это ИИ специально обученный алгоритм, который умеет определять сцену, объект съемки.
Одной из главных задач искусственного интеллекта является автоматический подбор режима съёмки и совместной работе нескольких камер одновременно. Ведь сейчас на флагманы ставят минимум 3 камеры, а на некоторых их даже 5 и все они выполняют свою роль.
После того, как вы направите камеру в правильном направлении, камера AI автоматически переключит настройки для идеального снимка. Камера AI должна определить, какой тип сцены она видит, а также настроить условия освещения в мгновение ока.
Как же это работает?
Производители смартфонов используют машинное обучение для разработки движков распознавания изображений, которые используют нейронную сеть, обученную миллионами изображений. Из этого машинного обучения камера AI развивает умение автоматически идентифицировать сцены, доступный свет и даже угол сцены.
photo_2020-06-12_22-21-19.jpg (339.85 KB, Downloads: 0)
2020-06-13 03:24:06 Upload
Таким образом, ваша камера знает, что она направлена на человека, пищу, природу, животных и т. д. Впоследствии камера AI выбирает наиболее подходящие настройки экспозиции и цвета для идеального снимка.
На этом у меня все, если будет интересно, то в дальнейшем сможем наглядно сравнить фото обычной съемки и съемки AI камеры.
Спасибо за внимание и до встречи на просторах MI Community!