Предиктивная съемка что это
Как снимает камера Motion Eye в Sony Xperia XZ2
В камере Motion Eye флагманского смартфона Xperia XZ2 компания Sony использует не только мобильные технологии для смартфонов, но также наработки из профессиональных камер α и компактных моделей Cyber-shot. В основе лежит матрица Exmor RS со встроенной памятью, качественная оптика G Lens и быстрый процессор BIONZ для обработки изображений. А кроме того, камера Xperia XZ2 имеет интеграцию с сигнальным процессором обработки изображений Spectra 280 ISP в чипе Qualcomm Snapdragon 845, что позволяет собирать больше информации о цвете и яркости сцены и повысить качество мобильной съемки в целом.
Еще несколько лет назад в мобильной фотографии ставку делали на быструю фокусировку, стабилизацию, наличие про-режима для ручного изменения параметров съемки, детализацию и цветопередачу изображения. Теперь все это стало стандартом для флагманских смартфонов и поэтому на первое место выходят интеллектуальные алгоритмы и технологии, которые ранее были доступны только в профессиональных и полупрофессиональных камера. Например, для видео это съемка видео в формате 4K HDR, обеспечивающем высокую контрастность, детализацию и передачу цвета, а также сверхзамедленная съемка с частотой 960 кадров в секунду, которая в Xperia XZ1 была представлена впервые на рынке, а в Xperia XZ2 получила поддержку записи с разрешением Full HD. Для фотографии новыми технологиями стала предиктивная съемка, которая автоматически распознает улыбку и движение и начинает записывать информацию с сенсора камеры еще до нажатия кнопки спуска затвора, а также следящий автофокус, способный предугадывать траекторию движения объекта в кадре и не выпускать его из зоны резкости.
Чтобы показать возможности камеры Sony Xperia XZ2 мы подготовили серию фотографий из Стамбула и Каппадокии, снятые в разных условиях освещенности: на рассвете, днем, в сумерках, в пасмурную и солнечную погоду, а также внутри помещений. Первые десять снимков оригиналы, вторые — с небольшой цветокоррекцией, то есть в том виде как мы обычно готовим публикации для Instagram и других соцсетей.
Предиктивная съемка что это
Размеры: 148 x 73 x 7,9 мм
Операционная система: Google Android™ O
Процессор (ЦП): Мобильная платформа Qualcomm® Snapdragon™ 835
Аккумулятор: 2700 мАч
— Smart Stamina 3.0
— Технология адаптивной зарядки Qnovo
— Battery Care
— Режим STAMINA
— Qualcomm® Quick Charge™ 3.0
— Питание через USB
Поддержка SIM-карт:
Nano SIM
Память и хранение:
— ОЗУ 4 ГБ
— 64 ГБ внутренней памяти UFS1
— Поддержка microSDXC (до 256 ГБ)
Сети:
— GSM GPRS/EDGE (2G)
— UMTS HSPA+ (3G)
— LTE (4G) Cat16 со скоростью передачи 1 Гбит/с4
Дисплей:
— 5,2-дюймовый дисплей FHD HDR
— Дисплей TRILUMINOS™
— Технология X-Reality™ для мобильных устройств
— Функция Dynamic Contrast Enhancer
— sRGB 138%
Основная камера: 19 МП камера Motion Eye™
— 1/2,3-дюймовая матрица Exmor RS™ с памятью для мобильных устройств
— Шаг пикселя: 1,22 мкм
— Фирменная 25 мм широкоугольная оптика Sony G Lens с диафрагмой f/2,0
— Технология обработки изображений BIONZ™ для мобильных устройств
— Сверхзамедленная съемка 960 кадров в секунду
— Предиктивная съемка (движение/улыбка)
— Серийная съемка со следящим автофокусом
— 8-кратный цифровой зум
— Съемка фото в режиме HDR
— Быстрый запуск камеры и съемка (0,5 с)
— Светочувствительность: ISO 12800
— Светочувствительность в режиме видеосъемки ISO 4000
— Предиктивный гибридный автофокус
— Затвор с компенсацией искажений
— Технология взаимодействия трех сенсоров
— Технология стабилизации видео SteadyShot™ с умным активным режимом (5-осевая стабилизация)3
— Запись в формате 4K
Фронтальная камера:
— 13 МП
— 1/3,06-дюймовая матрица Exmor RS™ для мобильных устройств
— 22-миллиметровый широкоугольный объектив с диафрагмой f/2,0
— Светочувствительность ISO 6400
— Светочувствительность в режиме видеосъемки ISO 1600
— Технология стабилизации видео SteadyShot™ с умным активным режимом (пятиосевая стабилизация)
Защита корпуса:
— Влагозащита (IP65/68)2
— Стекло Corning® Gorilla® Glass 5
Возможности подключения:
— A-GNSS (GPS + ГЛОНАСС)5
— Wi-Fi Miracast
— Беспроводная технология Bluetooth 5.0®
— DLNA Certified®
— Google Cast
— NFC
— USB 3.1 Gen 16 / USB Type-C™
Сканер отпечатков пальцев
Звук:
— Звук в формате аудио высокого разрешения (LPCM, FLAC, ALAC, DSD)
— DSEE HX™
— LDAC
— Технология шумоподавления
— Функция Clear Audio+
— Стереодинамик с технологией S-Force Front Surround
— Стереозапись
— Аудиотехнология Qualcomm® aptX™ HD7
— Автоматическая оптимизация звука для наушников
— Технология Virtual Phones Technology
Развлечения: PS4 Remote Play
Приложения:
— 3D Creator
— Музыка
— Альбом
— Видео
— Movie Creator
— Spotify
— AR-эффект
— What’s New
— Xperia Lounge
Цвет:
— Лунно-синий
— Черный
— Теплое серебро
— Розовый рассвет
Основные аксессуары:
— Стильный сенсорный чехол SCTG50
— Стильный чехол-подставка SCSG50
— Стерео Bluetooth® гарнитура SBH24
Ведущий инженер по камере Sony Xperia о развитии мобильной фотографии, технологиях Sony и будущем
Кенсуке Машита: «Я бы с удовольствием установил однодюймовый сенсор и объектив G Master в смартфон».
С 2015 года редакция Prophotos.ru начала всерьёз говорить о смартфонах, ведь камера в этих гаджетах стала не просто инструментом в руках фотографа. Сегодня можно констатировать, что вчерашние пользователи смартфонов с хорошей камерой постепенно переходят на любительские и профессиональные фотоаппараты.
Компания Sony Mobile предложила нам взять эксклюзивное интервью у Кенсуке Машиты, старшего менеджера из команды Sony Mobile. Машита-сан отвечает за технологии, используемые в блоке камеры смартфонов Sony Xperia.
Мы постарались задать ему самые важные вопросы о камерах Sony Xperia, о камерах смартфонов в целом и о том, куда мобильная фотография будет двигаться дальше.
— Умер ли сегмент компактных фотоаппаратов с ростом продаж смартфонов?
— Рынок компактных цифровых камер падает. Наши коллеги из Sony Digital Imaging сейчас фокусируются на компактных камерах класса High End. С другой стороны, смартфоны занимают позиции компактов низкого и среднего уровня. И я думаю, что эта тенденция сохранится.
— Какие перспективы есть у смартфонов на фоторынке?
— Смартфоны сегодня добились довольно высокого качества изображения, сравнимого с компактными фотоаппаратами, которые выпускались несколько лет назад. Но смартфон представляет собой не только камеру: здесь есть возможности подключения, продвинутая графика и вычислительные мощности, более сильный, чем в камерах, процессор цифровой обработки, большой дисплей и простой интерфейс. Поэтому смартфоны совершенно другие, они дарят нам новый опыт. Например, если бы не развитие этого рынка, не появилось бы селфи. Нам приходится искать и находить новые сценарии, которые доступны не столько камере, сколько смартфону как камере и мобильному устройству с возможностями подключения к мобильным и беспроводным сетям.
— Насколько камера смартфона сегодня является причиной покупки нового устройства или замены старого?
— По нашим исследованиям, на покупку нового смартфона больше всего мотивируют дизайн устройства, камера и время автономной работы. Эти три фактора являются главными для покупателя, и они работают в связке. Российский рынок особенно ориентирован на дизайн смартфона. Это называется show off, когда главной целью является не наслаждение внешностью гаджета, а некое хвастовство. Здесь имеет место самовыражение через дизайн устройства.
Камера является настолько же важной, потому что она позволяет показать себя в лучшем виде, свои достижения и окружение.
— Не секрет, что компания Sony Semiconductors является основным поставщиком сенсоров для мобильных камер. Как Sony Mobile связана с этой компанией?
— Да, все крупные производители используют в своих смартфонах сенсоры Sony. Но каждый из них устанавливает сенсоры с разными характеристиками. Конечно же, в мобильной фотографии сенсор важен, но важна и оптика. Потому что именно её касаются все ограничения, в том числе по толщине смартфона.
У большинства смартфонов Sony камера не выступает из корпуса, а в iPhone и других устройствах камера выступает на миллиметр или больше. Наши дизайнеры борются за то, чтобы ничего не выступало и при этом не страдали функции и возможности смартфона. Для покупателя дизайн крайне важен, и мы стараемся находить баланс. Но, поверьте, это очень сложно.
Я не могу сказать, какой из сенсоров Sony сегодня лучший. Стратегия Sony Mobile ранее была направлена на высокое разрешение в 23 Мп. Но сегодня большинство производителей ставят сенсоры разрешением 12 Мп, в том числе Samsung и Apple. В этом заключается разница подходов, потому что Sony использовала высокое разрешение из-за больших возможностей стабилизации изображения, лучшего качества картинки при её приближении. Безусловно, в таких сценариях наша камера выигрывает у 12-Мп сенсоров. Но с другой стороны, очень важен физический размер пикселя.
С развитием двойных камер в смартфонах появилось много разных решений на рынке. Например, благодаря зум-объективам качество приближения стало на порядок выше. Можно сказать, что наступила новая эра мобильной фотографии, и в следующем поколении мы покажем своё видение. К сожалению, я не могу делиться деталями нашей новой стратегии, но мы кое-что изменим уже в ближайшем будущем.
Взаимоотношения Sony Mobile и Sony Semiconductors традиционно складывались таким образом, что мы получали топовый сенсор на эксклюзивных условиях. IMX300 достался нам, с IMX400 та же ситуация. Это взаимодействие сохранится и в будущем. Мы выступаем в качестве лидера, который обкатывает новые технологии.
— Насколько новые фишки блока камеры Motion Eye (предиктивная съёмка, сверхзамедленная видеосъёмка и следящий автофокус при серийной съёмке), построенного на базе Sony Exmor IMX400, пользуются популярностью у покупателей смартфонов?
— В процессоре Sony Exmor IMX400 установлен сенсор со стековой памятью объёмом 128 мегабайт, и благодаря этому удаётся записывать видео в режиме сверхзамедленной съёмки, осуществлять предиктивную съёмку. С нашей камерой можно увидеть то, что не улавливает человеческий глаз.
К сожалению, прошло не так много времени с момента выпуска первого смартфона с Motion Eye (Sony Xperia XZ Premium — прим. ред.). Пока не собрано достаточно данных. Мы имеем представление, сколько людей снимают на смартфон фотографии, а сколько — видеоролики. Сейчас стараемся узнать, много ли людей используют сверхзамедленную съёмку. Мы выяснили, что в момент знакомства со смартфоном очень многие пробуют оценить запись со скоростью 960 кадров в секунду. Наша цель — сделать интерес к ноу-хау постоянным. Мне кажется, что сверхзамедленная съёмка Sony превосходит ожидания. Кто-то скажет, что это сделано лишь для привлечения внимания покупателей, но мы действительно хотели создать нечто новое.
— Самый частый довод тех, кто не любит Sony Xperia: «У всех смартфонов стоит сенсор Sony (Samsung, Huawei, iPhone и другие), но все они снимают на порядок лучше, чем смартфоны Sony Xperia». Есть ли у Вас понимание, почему так происходит?
— К сожалению, в мобильной фотографии невозможно добиться лучшего качества в разных условиях. Качество может различаться в зависимости от условий съёмки, используемых функций. Камеры с 12-Мп сенсором и бо́льшим размером пикселя лучше себя чувствуют в условиях недостаточной освещённости, но если снимать дневной пейзаж, то благодаря более высокому разрешению сенсора можно добиться большей детализации. По моему мнению, если снимать пейзаж, Sony Xperia выиграет, но в ряде сценариев мы можем проигрывать конкурентам. Тут тоже важен вопрос подхода. На наш смартфон можно сделать хороший снимок в темноте, и разрешение его будет в полтора раза выше. Мы фокусируемся на высоком разрешении, так как благодаря этому обеспечивается лучшая стабилизация изображения.
Если бы мы сделали такую же камеру, как и другие бренды, возможно, появились бы хейтеры другого порядка, которые докопались бы до истины и нашли бы разницу в работе нашей камеры по сравнению с конкурентами.
К сожалению, большинство обращают внимание на «лабораторные» тесты камеры, а лучше смотреть на реальные фотографии. Иногда одно с другим конфликтует. Конечно же, у нас в приоритете пользовательский опыт.
При этом мы прислушиваемся к обратной связи наших пользователей. Например, в Sony IMX400 разрешение было уменьшено с 23 до 19 Мп, тем самым несколько увеличился размер пикселя. Мы постарались найти компромисс и улучшили ситуацию со съёмкой в условиях низкой освещённости. В то же время появились сверхзамедленная съёмка и стековая память. Благодаря последней улучшилась ситуация с записью видео, в том числе с HDR. Это возможно только с памятью. Вскоре у нас будет ещё одно улучшение, которое пока держится в секрете.
Все камеры Sony Xperia тестируются более чем при 100 различных сценариях. Условия освещения в одно и то же время отличаются в разных точках мира. В России световой день стремится к нулю, поэтому качественная съёмка в условиях недостаточной освещённости для нас крайне важна. При этом есть и разные оттенки света: люди хотят выглядеть хорошо на фотографиях, чтобы кожа смотрелась не только натурально, но и красиво. По всей планете аккумулируется подобная обратная связь из региональных офисов Sony Mobile. Это невозможно стандартизировать, но работа ведётся. Камера функционирует по некому усреднённому алгоритму, достигается компромисс.
— Почему Sony Mobile игнорирует оптическую стабилизацию изображения в основной камере и продолжает использовать свою электронную систему SteadyShot?
— Если бы мы установили оптическую стабилизацию в смартфон, появилось бы много фотографий, на которых движущиеся объекты сильно размываются за счёт увеличения выдержки. Со SteadyShot этого не происходит. Да, возможно, это выглядело бы эффектно, но не уверен, что всем понравится. Благодаря SteadyShot у нас появляется возможность снимать на короткой выдержке и избегать большинства смазов. Автоматика сама понимает, что делать: если в кадре динамичный сюжет, то выдержка будет минимальной; если картинка более статичная, выдержка увеличивается. Безусловно, в нормальных условиях и при отсутствии движущихся объектов в кадре, смартфоны с оптической стабилизацией изображения снимают лучше, чем Sony, но тут снова речь о различных сценариях.
— В каких долях и что влияет на мобильную фотографию: сенсор, оптика, алгоритмы постобработки?
— Сенсор — 30%, оптика — 30%, процессор обработки изображения (ISP) — 30% и алгоритмы постобработки — 10%. Всё зависит от типа процессора. Например, в зеркальных камерах постобработки почти нет. В смартфонах есть технические ограничения, поэтому обработка и постобработка очень важны.
Любой модуль, разработанный в Sony Mobile, показывают в подразделении Digital Imaging. Они тестируют наши функции и выдают некий сертификат соответствия.
— Sony Mobile — единственный бренд на рынке, за исключением смартфона Google Pixel 2, который полностью игнорирует тенденцию двойной камеры. Почему это происходит? Когда ждать двойную камеру от Sony?
— Мы отслеживаем различные тенденции. Есть идеи по созданию тройных, четверных камер, сочетаний различных камер. Мы представили миру камеру со стековой памятью. На наш взгляд, она даёт лучший опыт по сравнению с двойной камерой. Технологии в процессорах и графике развиваются, как и камера. В ближайшем будущем настанет время показать и двойную камеру. Возможно, у Sony получится вас удивить.
— Когда приложение «Камера» в устройствах Sony Mobile станет более удобным?
— Мы работаем не только для профессионалов, но и для широкой аудитории, которая не так хорошо разбирается в различных настройках.
Если говорить о ручных настройках, то для большинства пользователей хватает таких параметров, как скорость затвора, светочувствительность, фокусировка, баланс белого и экспозиция. Всё это есть в нашем приложении. Но существуют более продвинутые и требовательные пользователи. Я не могу вдаваться в детали, но в ближайшем будущем в приложении будут изменения.
В этот момент Машита-сан спросил нас о том, что мы бы хотели увидеть в смартфонах Sony. Наш ответ был прост: RAW-формат.
— Хотелось бы узнать ваше отношение к тестированию DxOMark. На данный момент смартфонов Sony нет даже в десятке.
— Мы всегда смотрим на таблицу результатов и обратную связь с этого сайта. Некоторые их замечания очень помогают нам. Но я не уверен, что их тесты могут быть на 100% полезны большинству людей в их сценариях использования. Ваши коллеги из DxOMark давали нам много обратной связи, разрабатывая политику тестирования, и она действительно во многом была полезной. Однако в сентябре бенчмарк изменился, в нём появились оценки для оптического увеличения и размытия заднего плана, и, безусловно, новая система сфокусирована на двойную камеру. Мы всегда всерьёз относились и относимся к этой площадке, но хотим посмотреть на новую методику раздачи оценок, понять логику и тенденции. Должно пройти время.
На самом деле речь идёт не только о DxOMark, но и о других лабораторных тестах и методиках, которые используются на рынке. На мой взгляд, лучше любых тестов показывают работу камеры реальные снимки. Мы продолжим наблюдать методику, смотреть на результаты и, возможно, вновь обратимся к ним за обратной связью.
— Какие сегодня существуют технические ограничения в камерах мобильных телефонов? Возможно ли увидеть какой-то серьёзный прорыв? Например, однодюймовую матрицу (как это сделали в Panasonic CM-1) или настоящий телезум-объектив. Если пофантазировать, что бы Вам хотелось увидеть в мобильной камере? И что реально может появиться?
— По моему мнению, однодюймовый сенсор в камере смартфона — отличное решение. Но наверняка из-за этого увеличатся толщина корпуса и вес гаджета. Оптический телезум-объектив тоже требует больше места. И сегодня рынок предлагает нам решение в виде двойной камеры. Но нам этого недостаточно. Скорее всего, в ближайшее время размеры сенсоров не изменятся. Возможно, проблемы как-то решат двойные, тройные и «умные» камеры с искусственным интеллектом и машинным обучением.
Думаю, что увеличение модуля камеры — это следующий шаг смартфоностроения. Но если пофантазировать, то однодюймовый сенсор это здорово, но его очень трудно вставить в корпус смартфона. Может быть, имеет смысл разделить смартфон и камеру, но это было у Sony в серии QX. Может, что-то изменится в оптике: вместо оптики G Lens будет использоваться G Master. Стоимость такого смартфона будет очень выгодной для нас, но люди, скорее всего, не оценят этого. Технически подобное внедрение возможно.
Всё же ограничений в зеркальных и беззеркальных камерах гораздо меньше, чем в смартфонах. Но вычислительные мощности на стороне смартфонов. У камер свой путь развития, у смартфонов — свой. Фотоаппараты должны быть удобными и эргономичными, и стоят они обычно дороже смартфонов.
Предикативная аналитика: как предсказать эпидемию и успех в бизнесе
Что такое предикативная аналитика
Предикативная (или предиктивная, прогнозная) аналитика — это прогнозирование, основанное на исторических данных. С помощью статистических инструментов можно выявить закономерности в изменениях показателей в предыдущих периодах и предсказать, как они будут вести себя в будущем. Например, проанализировав котировки акций, можно просчитать обвал или изменение цен. Банки используют предикативную аналитику, когда оценивают заемщика, анализируя финансовые показатели и рассчитывая вероятность того, что клиент не сможет выплатить кредит.
Крупные компании создают целые отделы, занимающиеся предикативной аналитикой. Они преследуют разные цели — от оптимизации затрат на рекламу до повышения эффективности производства. Считается, что из всех видов бизнес-аналитики именно предикативная аналитика приносит наибольшую выгоду компаниям.
Как строится процесс
Основа прогнозной аналитики — большие данные (от англ. big data). Это огромные массивы информации, которые невозможно обработать с помощью привычных инструментов. Сейчас ИТ-компании предлагают готовые программы, которые анализируют большие данные и визуализируют их в виде дашбордов — наглядных таблиц, графиков и отчетов. Самый актуальный дашборд на сегодняшний день был создан центром системных наук и инжиниринга Университете Джона Хопкинса. Он демонстрирует количество заболевших коронавирусом во всех странах.
Большие данные появляются постоянно — их генерируют компании, устройства и мы сами, когда пользуемся смартфонами и компьютерами, делаем покупки и путешествуем. Кроме того, они легко собираются и оцифровываются: например, если раньше мы покупали продукты на рынках и расплачивались наличными, то теперь чаще оплачиваем товары банковскими картами или делаем заказы в интернет-магазине.
Распространенные примеры данных:
Если перечисленные источники уже можно назвать «классическими», то в последние годы компании научились обрабатывать менее очевидные данные: зарплаты игроков американского футбола, содержание фильмов и географические координаты ударов молнии.
Построение прогноза состоит из нескольких этапов:
Предикативная аналитика не может быть точной на 100%. Иначе, например, биржа не имела бы смысл — каждый мог бы предсказать, как поведут себя те или иные акции. В реальности на каждый бизнес-показатель влияет множество факторов, но точность предикативной модели можно повышать, работая над качеством данных и обучая ее.
Примеры применения предикативной аналитики
Компании анализируют историю покупок и текущую активность клиента. Если по итогам анализа покупатель попадает в сегмент тех, кто потенциально может перейти к конкурентам, то ему могут предложить скидку, бонусы или подарок.
HR-специалисты используют предикативную аналитику, чтобы заранее выявить, кто из работников уволится, кто из кандидатов на вакансию преуспеет, сколько позиций нужно открыть в следующем году, сколько сотрудников воспользуются разными опциями медицинской страховки и т.д. Google использует ее, чтобы сохранить кадры — если аналитика предсказывает, что ценный работник скоро уйдет из компании, ему предлагают повышение или другую должность.
Анализируя данные об использовании оборудования, можно определить, когда оно будет нуждаться в профилактическом ремонте. Так, в феврале Mail.ru Group объявила, что создаст для «Сухого» цифровую платформу предикативной аналитики. Данные о работе промышленного оборудования и параметрах выполнения операций позволят прогнозировать исправность станков и осуществлять их своевременное обслуживание.
В этой сфере прогнозная аналитика используется особенно широко. Например, с ее помощью выявляются мошеннические транзакции. Банки смотрят на данные прошлых лет о нормальном поведении: расходах, обычном времени и географии транзакций. В случае аномалий организация получает уведомление и может запросить у клиента дополнительное подтверждение операции.
Прогнозная аналитика особенно эффективна в интернет-маркетинге, где легко собрать информацию и быстро внести изменения. Она помогает снизить расходы на рекламу, показать объявление, подходящее конкретному пользователю, квалифицировать посетителя сайта как будущего платящего клиента, улучшить клиентский опыт и т.д.
Специалисты сервиса BlueDot в декабре 2019 года определили, что вспышка заболевания будет именно в провинции Хубэй, опубликовав первую научную публикацию, в которой были предсказания о глобальном распространении вируса.
Бывают неожиданные области применения предикативной аналитики с искусственным интеллектом. О них рассказал технический директор Redmadrobot Data Lab Алексей Соколов:
«Системы, построенные на машинном обучении, стремительно развиваются. Основная «пища» для алгоритмов такого рода — это данные и вычислительные мощности, и их становится все больше. Через пять лет машинные алгоритмы будут пронизывать все вокруг точно также, как электричество, — добавляет Алексей Соколов. — Скорее всего, государства научатся корректно регулировать интеллектуальные технологии, беспилотные автомобили станут нормой, а в медицине произойдут прорывы, которые позволяют людям жить дольше».
Подписывайтесь и читайте нас в Яндекс.Дзене — технологии, инновации, эко-номика, образование и шеринг в одном канале.