ЧТО ТАКОЕ МОДУЛЬ ИИ В HUAWEI КАМЕРЕ ТЕЛЕФОНА
Модуль искусственного интеллекта в камере телефона Huawei представляет собой набор программных инструментов, которые работают вместе для улучшения качества съемки фотографий и видео.
Один из основных компонентов модуля ИИ — это система распознавания сцены, которая автоматически определяет объекты на снимке и настраивает настройки камеры, чтобы получить наиболее оптимальное изображение. Например, если на фото присутствует еда, камера может автоматически настроить баланс белого и контрастность, чтобы изображение выглядело более ярким и насыщенным.
Другой важный компонент — это система улучшения изображения, которая использует алгоритмы машинного обучения для улучшения качества снимков. Это может включать в себя устранение шума, улучшение резкости и насыщенности цвета, а также коррекцию экспозиции.
Модуль ИИ также может помочь улучшить качество видео. Например, он может стабилизировать изображение, чтобы снимок не был размытым при движении камеры.
В целом, модуль ИИ в камере телефона Huawei позволяет повысить качество фотографий и видео, делает съемку проще и удобнее, что важно для многих пользователей, которые хотят делать хорошие снимки быстро и без особых трудностей.
Как ИИ прокачивает ТВОЙ смартфон?
ЭТО ПРОВАЛ! Нейросети в iOS 17 и почему у Apple все плохо с ИИ?! Есть ли решение для Айфона?!
Зачем смартфону несколько камер?
Как правильно настроить камеру на телефоне Honor и Huawei — Оптимизация стандартной камеры
КАК УЛУЧШИТЬ КАМЕРУ ТЕЛЕФОНА: XIAOMI, SAMSUNG, HONOR, HUAWEI, MEIZU и др. Лучше чем Google Camera!
Модуль искусственного интеллекта
Мастер ИИ – предустановленная функция камеры, которая использует искусственный интеллект для определения объекта и места съемки и автоматически регулирует параметры фотографии для повышения качества снимков.
Функция Мастер ИИ распознает разные типы композиции: сцена, пляж, голубое небо, зелень, текст и др. Функция работает только при съемке на основную камеру.
Откройте приложение />Камера и выберите режим Фото .
Нажмите на значок , чтобы включить функцию Мастер ИИ .
Наведите камеру на объект. Функция Мастер ИИ распознает объект съемки и автоматически генерирует рекомендацию режима (например, портрет, зелень или текст).
Чтобы выключить рекомендованный режим, нажмите на значок напротив названия режима или нажмите на значок , чтобы выключить Мастер ИИ .
Использование режима для съемки луны
Откройте приложение />Камера и выберите режим Фото .
Нажмите на значок , чтобы включить функцию Мастер ИИ .
Наведите камеру на луну, разведите пальцы на экране камеры, чтобы настроить масштаб 10x или больше. Когда устройство распознает луну как объект съемки, автоматически включится режим Луна .
Нажмите на значок , чтобы сделать фото.
Режим Луна распознает луну только начиная с фазы первой четверти. Режим Луна не включится, если луна скрыта облаками.
Зачем Huawei искусственный интеллект?
Отдельный процессор для нейросетевых вычислений (его также называют ускорителем искусственного интеллекта) – хороший ход для компании Huawei, которая активно использует эту технологию в своих устройствах. Как и следовало ожидать, вслед за Huawei почти сразу последовали и конкуренты. HiSilicon Kirin 980 NPU, по словам производителя, стал эффективнее на 226%. Так на какие же задачи сегодня направлена деятельность искусственного интеллекта, спрятанного в смартфоне?
В Huawei Mate 20 Pro у NPU есть несколько направлений деятельности, рассказывает 3DNews. Самое главное – это, конечно, камера. Еще ранее смартфоны Huawei научились распознавать самые разные сцены в кадре и подбирать под них наиболее подходящие настройки. В прошлом году выросло как количество этих сцен (1500 сценариев из 25 категорий съемки), так и появилась возможность объединять по несколько сцен в одном кадре, тем самым повышая качество адаптации изображения под сценарий.
Также искусственный интеллект принимает активное участие в процессе фокусировки – он пытается предсказывать движение объектов, уверенно цепляется за них даже в динамичных сценах и хорошо себя проявляет при съемке видео. При видеосъемке камера Huawei Mate 20 Pro может даже делать приближение к ключевому, по мнению смартфона, объекту.
Также при съемке видео доступно несколько программных фильтров, делающих картинку более «киношной», а также программное размытие фона и выделение цвета при общей монохромной сцене.
Помимо активной помощи пользователю при фото- и видеосъемке нейросети внутри Huawei Mate 20 Pro анализируют действия пользователя и стараются адаптировать его работу для лучшего энергосбережения.
Специальная нейронная сеть работает и при элементарных телефонных звонках – она анализирует внешние шумы и подавляет их, что они не мешали беседе. Ну и, наконец, нейросеть работает в специальном приложении Microsoft для машинного перевода, не требующем постоянного подключения к Сети.
Конечно, ИИ для Huawei – это не только смартфоны. Компания достаточно давно занимается развитием технологий искусственного интеллекта. Совместно с партнерами она создает решения в самых разных областях. Одна из наиболее наглядных сфер применения ИИ — умные города: видеонаблюдение, современные городские ИИ-системы на транспорте и др.
В октябре 2018 года Huawei представила процессоры серии Ascend, оптимизированные для задач ИИ. Разработчики компании пошли по пути перекладывания решения отдельных задач на специализированные чипы, что должно обеспечивать более эффективное выполнение. Стратегия Huawei в области ИИ помимо процессоров включает также продукты и облачные сервисы на их базе, инвестиции в фундаментальные исследования и подготовку кадров, развитие портфолио комплексных решений для разных сценариев использования и создание открытой экосистемы.
В линейке Ascend пока что два процессора. Ascend 310 создан по технологии 12 нм и уже доступен на рынке. Выпуск Ascend 910 запланирован на второй квартал 2019 года. Как сообщается, он создается по технологии 7 нм и будет конкурировать с NVIDIA Tesla V100, обладая более высокой производительностью — 256 Тфлопс против 125 у V100. Серверы Huawei с новыми процессорами появятся в России в 2019 году. Они могут быть востребованы в финансовом секторе и в интернет-сегменте.
Huawei также анонсировала программно-аппаратную вычислительную платформу Atlas для ускоренной обработки рабочих нагрузок, связанных с ИИ. Она включает модули и устройства для создания инфраструктуры, в частности, — модуль ускорителя Atlas 200 AI, карту ускорителя Atlas 300 AI (для датацентров и периферийных серверов), периферийную станцию Atlas 500 AI и платформу Atlas 800 AI.
Новое оборудование Huawei нередко становится основой технологического предложения облаков российских провайдеров – партнеров компании. В их облаках появляются новые возможности для вычислений, связанных непосредственно с искусственным интеллектом.
Huawei также выпустила набор инструментов с открытым исходным кодом на своей облачной платформе, которые помогут разработчикам упростить создание решений ИИ — от моделей машинного обучения до развертывания систем на локальных устройствах. Инструменты будут доступны на сервисной платформе ИИ Huawei Cloud Enterprise Intelligence. Их можно будет применять и для ее движка для интеллектуальных устройств HiAI.
Новый фреймворк Huawei MindSpore на основе унифицированной распределенной архитектуры для машинного обучения поддерживает модели, обученные на других платформах, таких как TensorFlow и PyTorch, а также предоставляет гибкие API-интерфейсы.
Кроме того, Huawei анонсировала вычислительную архитектуру для нейронных сетей (CANN) с инструментарием разработки Tensor Engine, который обеспечивает автоматическую генерацию, настройку и оптимизацию кода. CANN также включает в себя TVM — комплексный оптимизирующий компилятор для задач глубокого обучения. По данным Huawei, CANN может утроить эффективность разработки.
Модуль ии что это
Отдельный процессор для нейросетевых вычислений (его также называют ускорителем искусственного интеллекта) – хороший ход для компании Huawei, которая активно использует эту технологию в своих устройствах. Как и следовало ожидать, вслед за Huawei почти сразу последовали и конкуренты. HiSilicon Kirin 980 NPU, по словам производителя, стал эффективнее на 226%. Так на какие же задачи сегодня направлена деятельность искусственного интеллекта, спрятанного в смартфоне?
В Huawei Mate 20 Pro у NPU есть несколько направлений деятельности, рассказывает 3DNews. Самое главное – это, конечно, камера. Еще ранее смартфоны Huawei научились распознавать самые разные сцены в кадре и подбирать под них наиболее подходящие настройки. В прошлом году выросло как количество этих сцен (1500 сценариев из 25 категорий съемки), так и появилась возможность объединять по несколько сцен в одном кадре, тем самым повышая качество адаптации изображения под сценарий.
Также искусственный интеллект принимает активное участие в процессе фокусировки – он пытается предсказывать движение объектов, уверенно цепляется за них даже в динамичных сценах и хорошо себя проявляет при съемке видео. При видеосъемке камера Huawei Mate 20 Pro может даже делать приближение к ключевому, по мнению смартфона, объекту.
Также при съемке видео доступно несколько программных фильтров, делающих картинку более «киношной», а также программное размытие фона и выделение цвета при общей монохромной сцене.
Помимо активной помощи пользователю при фото- и видеосъемке нейросети внутри Huawei Mate 20 Pro анализируют действия пользователя и стараются адаптировать его работу для лучшего энергосбережения.
Специальная нейронная сеть работает и при элементарных телефонных звонках – она анализирует внешние шумы и подавляет их, что они не мешали беседе. Ну и, наконец, нейросеть работает в специальном приложении Microsoft для машинного перевода, не требующем постоянного подключения к Сети.
Конечно, ИИ для Huawei – это не только смартфоны. Компания достаточно давно занимается развитием технологий искусственного интеллекта. Совместно с партнерами она создает решения в самых разных областях. Одна из наиболее наглядных сфер применения ИИ — умные города: видеонаблюдение, современные городские ИИ-системы на транспорте и др.
В октябре 2018 года Huawei представила процессоры серии Ascend, оптимизированные для задач ИИ. Разработчики компании пошли по пути перекладывания решения отдельных задач на специализированные чипы, что должно обеспечивать более эффективное выполнение. Стратегия Huawei в области ИИ помимо процессоров включает также продукты и облачные сервисы на их базе, инвестиции в фундаментальные исследования и подготовку кадров, развитие портфолио комплексных решений для разных сценариев использования и создание открытой экосистемы.
В линейке Ascend пока что два процессора. Ascend 310 создан по технологии 12 нм и уже доступен на рынке. Выпуск Ascend 910 запланирован на второй квартал 2019 года. Как сообщается, он создается по технологии 7 нм и будет конкурировать с NVIDIA Tesla V100, обладая более высокой производительностью — 256 Тфлопс против 125 у V100. Серверы Huawei с новыми процессорами появятся в России в 2019 году. Они могут быть востребованы в финансовом секторе и в интернет-сегменте.
Huawei также анонсировала программно-аппаратную вычислительную платформу Atlas для ускоренной обработки рабочих нагрузок, связанных с ИИ. Она включает модули и устройства для создания инфраструктуры, в частности, — модуль ускорителя Atlas 200 AI, карту ускорителя Atlas 300 AI (для датацентров и периферийных серверов), периферийную станцию Atlas 500 AI и платформу Atlas 800 AI.
Новое оборудование Huawei нередко становится основой технологического предложения облаков российских провайдеров – партнеров компании. В их облаках появляются новые возможности для вычислений, связанных непосредственно с искусственным интеллектом.
Huawei также выпустила набор инструментов с открытым исходным кодом на своей облачной платформе, которые помогут разработчикам упростить создание решений ИИ — от моделей машинного обучения до развертывания систем на локальных устройствах. Инструменты будут доступны на сервисной платформе ИИ Huawei Cloud Enterprise Intelligence. Их можно будет применять и для ее движка для интеллектуальных устройств HiAI.
Новый фреймворк Huawei MindSpore на основе унифицированной распределенной архитектуры для машинного обучения поддерживает модели, обученные на других платформах, таких как TensorFlow и PyTorch, а также предоставляет гибкие API-интерфейсы.
Кроме того, Huawei анонсировала вычислительную архитектуру для нейронных сетей (CANN) с инструментарием разработки Tensor Engine, который обеспечивает автоматическую генерацию, настройку и оптимизацию кода. CANN также включает в себя TVM — комплексный оптимизирующий компилятор для задач глубокого обучения. По данным Huawei, CANN может утроить эффективность разработки.
Модуль ИИ в камере Хуавей: что это такое
Под аббревиатурой ИИ принято понимать искусственный интеллект. В настоящее время им оснащается большое количество устройств. И смартфоны HUAWEI – не исключение. Что представляет собой данный модуль, какие возможности он предоставляет и как им пользоваться, будет рассмотрено в статье.
Что это такое
Компания ХУАВЕИ в 2019 году на слуху у всех. И это неудивительно, ведь она создала большое количество разработок, которые призваны изменить мир к лучшему. Камеры устройств, выпущенных ею, оснащены специальным процессором, используемым в ходе проведения нейросетевых вычислений. Альтернативное его наименование – ускоритель искусственного интеллекта. Этот ход компании стал прогрессивным.
Зачем это нужно
Особого внимания заслуживает камера устройства. С ее помощью можно без труда распознавать всевозможные сцены в кадре, а также осуществлять поиск и выбор оптимальных настроек. Количество этих сценариев в последнее время увеличилось. Новый показатель стал равняться 1500. Это дало пользователям возможность объединять несколько элементов в кадре и делать уровень адаптации более высоким.
Наряду с этим доступно одновременно несколько фильтров, которые делают картинку более красивой. Основной цвет при этом заметно выделяется, а фон при желании пользователя может быть размытым. Вместе с этим модуль ИИ позволяет осуществлять анализ пользовательских действий и делать соответствующие выводы.
Компания постоянно радует пользователей оригинальными новинками, в числе которых не только смартфоны, но и прочие устройства. Качество их постоянно растет, а цены остаются на приемлемом уровне.
Искусственный интеллект для камер смартфонов: что это и как работает
Прежде чем говорить о том, что такое искусственный интеллект (ИИ), стоит пару слов сказать об интеллекте естественном. Как понимают этот термин ученые, занятые в сфере когнитивных наук, интеллект – это качество психики, благодаря которому человек способен воспринимать и анализировать информацию, обобщать ее, делать выводы и действовать на их основе.
Также понятие «искусственный интеллект» связано с термином «нейросети». По сути, нейросеть является цифровой имитацией человеческого мозга. Клетки-ячейки нейросети (эквиваленты нейронов в человеческом мозге) соединяются друг с другом как и в «биологическом» мозге при помощи синапсов – специфических связей. Они проводят и обрабатывают сигналы, поступающие извне.
Таким образом, под искусственным интеллектом понимается небиологическая система, способная воспринимать и обрабатывать информацию, делать выводы и действовать на их основе.
Термин Artificial intelligence (AI) был впервые использован в 1956 году Джоном Маккарти – автором первого искусственного языка программирования. В шестидесятые годы и далее в разных странах мира, в том числе и в Советском Союзе, велись работы по обучению искусственного интеллекта способам мышления, схожими с человеческим. На данный момент большинство научных сообществ, технических компаний и политических лидеров признают дальнейшее развитие ИИ одной из приоритетных сфер научно-технического прогресса.
Искусственный интеллект сейчас находит применение фактически везде: на производстве, в бизнесе, сфере развлечений, медицине, искусстве, продажах, в банковской сфере и социальных сетях.
Выделяют три вида ИИ в зависимости от уровня развития: слабый, общий и сильный.
Слабый: ИИ может выполнять определенный набор задач и даже делать это лучше человека, постоянно развиваясь в конкретном направлении. Это тот вариант AI, с которым мы имеем дело сейчас, говоря об его использовании при съемке на смартфон.
Общий: ИИ может справляться с интеллектуальными задачами творческого характера. Создавать произведения искусства (например, писать стихи или картины). Или просто расспросить пользователя, как прошел его день, и выразить сочувствие, если что-то случилось. Такая технология используется в голосовых помощниках.
Сильный: ИИ способен справляться с любыми задачами, любого плана. И делать это лучше, чем человек. Соответственно, он сам способен создавать машины более высокого уровня – пожалуй, страшный сон человечества.
До сих пор нет единого понимания и отношения к искусственному интеллекту. Одни видят в нем просто технический инструмент для работы, другие – объект для развлечений, а третьи – опасность для существования человечества. Однозначно можно утверждать лишь то, что в нашей повседневной жизни ИИ играет все большую роль, хотим мы того или нет. И происходит это не где-то в далеком будущем, а здесь и сейчас. Вспомните только гуляющие по интернету ролики, где люди помогают роботам-доставщикам перейти дорогу – такими машинами также управляет искусственный интеллект. И это вовсе не кадры из научно-фантастического фильма.
Как работает AI в смартфонах: процессоры с нейромодулем
Мы уже давно привыкли к тому, что в большинстве камер существует автоматический режим: вот только проблема в том, что к автоматике не прилагается волшебная кнопка «сделать шедевр». А хотелось бы! Поэтому производители активно работают, пытаясь удовлетворить этот запрос пользователей.
Все чаще качество фотографий, сделанных с помощью камеры смартфона, не связано с возможностями самой камеры, количеством мегапикселей и даже творческим потенциалом ее владельца (к некоторому нашему сожалению). Конечный результат съемки зависит от работы процессора – в частности, его нейромодуля, благодаря которому и функционирует ИИ.
С чего все начиналось? В 2016 году компания Google представила свои супер-флагманские смартфоны Pixel и Pixel XL, обозначив переход мира мобильных устройств в эпоху искусственного интеллекта. У продуктов Apple в 2017 году в чипе Apple A11 Bionic также появился так называемый «нейронный движок» (Neural Engine) – он отвечает за работу ИИ.
В 2017 году Huawei представила свои флагманы Mate 10/10 Pro на базе SoC HiSilicon Kirin 970 с выделенным нейронным модулем (NPU). Не стала отставать от конкурентов и компания Qualcomm, выпустив в 2018 году чипсет AI Engine на базе мобильных процессоров Snapdragon.
При съемке ИИ анализирует кадр для установки оптимальных настроек камеры. Для этого нейронный движок должен «пройти обучение», изучив огромное количество изображений: он учится отличать объекты в кадре и понимать условия освещения (свет – один из основных параметров фотографии). В итоге мобильная съемка, сопровождаемая AI, проходит те же этапы, что и съемка, где за все отвечает сам пользователь. Но в случае с умными камерами все задачи по настройке параметров камер и последующей корректировке цвета берет на себя искусственный интеллект – или нейромодуль процессора.
На что способен ИИ при съемке
Постоянно получая и анализируя большое количество информации, ИИ способен вычислить, какая картинка будет наиболее приятна нашему глазу. Исходя из этого, он не только помогает камере настроить параметры съемки, но и производит программную постобработку кадра, применяя определенные алгоритмы по его улучшению в зависимости от исходника.
Итак, на что же способен ИИ в камере смартфона?
Анализ сцены. Первое, что делает AI при съемке – анализирует сцену и объекты, которые пользователь снимает. Оценивается сам предмет съемки: пейзаж, архитектура, ребенок, домашнее животное и т.п. Современные смартфоны с AI-камерами умеют распознавать десятки сюжетов съемки и применяют для них разные алгоритмы обработки. Также анализируются условия освещенности: от них зависит значение экспозиции. Чем меньше света попадает в кадр, тем больше должна быть раскрыта диафрагма и дольше выдержка.
Цвет. Все знают, что цвета предметов на фотографии зависят от уровня освещенности, от того, какой свет присутствует в кадре – естественный или искусственный. Солнце в зените создает в кадре глубокие, черные провалы в тени, а цвета кажутся блеклыми и смазанными. Холодный, жесткий свет ламп дневного освещения, теплый свет ламп накаливания – все эти особенности освещения приходится учитывать фотографу при выставлении вручную так называемого баланса белого. Но с камерой, которой управляет ИИ, пользователю не придется производить дополнительных «телодвижений». Нейронный движок сам выставит правильный баланс белого для каждого кадра и доработает цвета: сделает траву зеленее, небо – голубее, а кожу – румянее.
Удаление из кадра объектов. Вы снимаете сквозь стекло, например, в музее? Или сквозь сетку или решетку в зоопарке? Сегодня искусственный интеллект, который используется в мобильной съемке, умеет даже убирать такие артефакты из кадра.
Бьютификация. Полагаем, что здесь не требуется серьезных объяснений. Эта функция играет особенно важную роль при портретной съемке. ИИ виртуально проводит настоящие косметические процедуры: выравнивает кожу, убирает ее недостатки, придает лицу здоровый цвет и т.д.
Ночная съемка. Во-первых, при съемке в условиях плохого освещения ИИ оценивает, где находится смартфон: держит его пользователь в руках или установил на неподвижную поверхность. В соответствии с этим гаджет выберет выдержку. Во-вторых, в зависимости от объекта съемки и освещения сцены будет выбрана подходящая экспозиция и количество кадров для дальнейшего их попиксельного склеивания (вернее тех из них, которые удачно получились). На конечном этапе работы ИИ проводит анализ всех сделанных кадров, выбраковывает неудачные, а все удачные соединяет в одно итоговое изображение.
Что еще может сделать ИИ? При съемке на высоких значениях ISO в кадре неизбежно появляется тепловой шум – мелкие цветные точки, мешающие восприятию изображения. ИИ способен избавить изображение от них, при этом не уменьшая уровень детализации.
Стабилизация. ИИ способен высчитать уровень тряски телефона и динамически компенсировать ее в каждый отдельный момент времени. Таким образом, благодаря нейродвижку в современных процессорах вы получите ровную, плавную картинку даже при съемке на камеру без оптической стабилизации.
Замещение неудачных фактур. Представьте, что света при съемке не хватает, и резкость кадра оставляет желать лучшего. И здесь на помощь может прийти ИИ. Проанализировав кадр и объекты, изображенные на нем, технология заменит неудавшиеся части снимка на имеющиеся в базе данных изображения. Получить отличный снимок объектов на дальнем расстоянии с помощью камеры смартфона – легко! Например, луны – почему бы нет? ИИ подберет из своей базы данных подходящее изображение и заменит часть исходного снимка на него, подогнав по размеру.
Мультисъемка. У разных производителей этот режим называется по разному: у Honor это «Мультивидео», у Samsung – Director’s View («Режим режиссера»). Вне зависимости от названия суть одна – благодаря технологиям ИИ смартфоны могут вести запись одновременно на две камер: тыльную и фронтальную. Полезная функция для ведения репортажей, записи интервью или памятных моментов.
Кого считать автором фото: человека или ИИ?
В качестве итогов напомним, что на современном этапе развития мобильной фотографии не столь важно, какого размера матрица или какими линзами оснащен объектив. Гораздо важнее, какой процессор и нейромодуль скрывается за всеми действиями камеры смартфона.
Уже сегодня ИИ умеет многое – и продолжает развиваться. Благодаря умным камерам цвета на фото получаются более насыщенными, нет теневых провалов и участков пересвета, а лица людей «обработаны» косметически.
Правда, возникает вопрос: кого считать автором фотографии, созданной с помощью ИИ? Зачастую смартфон выдает такой яркий кадр, что объект на нем выглядит более привлекательно, чем в реальности. Не являются ли такие фотографии заведомым обманом зрителя? А как же первый из законов робототехники Айзека Азимова? Ведь робот не должен причинять вред человеку своим действием или бездействием. А такой обман можно квалифицировать как вред? Вопросов пока больше, чем ответов на них. Однозначно можно сказать одно – такие фотографии наберут много лайков в соцсетях, ведь ИИ знает, как нам понравиться.