Европейский проект CLASS: автомобили научились «видеть» обстановку за поворотом

20.10.2021

Загруженные дороги итальянского города Модены стали испытательным полигоном при разработке сенсорной технологии, которая позволяет автомобилям «видеть» сквозь здания и другие транспортные средства, чтобы избежать столкновения.

Еще недавно система hands-free, а до этого усилитель рулевого управления устанавливались в автомобилях в качестве дополнительной опции. Но есть одна важная функция, внедрение которой все еще запаздывает: автоматическая система обеспечения безопасности движения и предотвращения столкновений, работающая в режиме реального времени.

Реализация европейского проекта CLASS по инициативе Барселонского суперкомпьютерного центра (BSC) началась в 2018 году и завершилась в июне текущего года. Муниципалитет Модены, компания Atos, автопроизводитель Maserati и команда IBM Research из г. Хайфа (Израиль) в сотрудничестве с Университетом Модены и Реджо-Эмилии (UNIMORE) превратили загруженные дороги Модены в лабораторию под открытым небом.

Мы доказали: город и автомобили можно оснастить датчиками, которые позволят транспортным средствам «знать», что находится за объектами поблизости, а также «заглядывать» за углы. Это решение поможет водителям избегать столкновений и будет способствовать улучшению дорожной обстановки.

CLASS: прототип системы перекрестной проверки слепых зон в масштабах города

Заблаговременно предупредить автомобиль или водителя о приближающемся транспортном средстве или внезапном появлении ребенка из-за припаркованной машины не способен ни один из существующих датчиков.

Между тем современные автомобили, как правило, могут подключаться к интернету через сотовую сеть. На многих улицах в большинстве крупнейших городов разных стран постоянно осуществляется мониторинг. Для этого используются принадлежащие муниципальным властям камеры и датчики. Если бы данные с этих камер и датчиков передавались движущимся по прилегающим дорогам автомобилям, они смогли бы «чувствовать» ту или иную приближающуюся, но пока не находящуюся в зоне их видимости опасность.

С другой стороны, автомобили с датчиками и возможностями подключения, движущиеся по улицам в разных направлениях, стали бы источником информации на участках, которые не просматриваются муниципальными устройствами.

В рамках данного проекта мы разработали экспериментальный прототип системы, которая сочетает периферийные вычисления с облачными инфраструктурами, объединяя муниципальные устройства и транспортные средства как источники информации для проведения перекрестной сверки в режиме реального времени.

Датчики на каждом шагу

Сначала мы установили на улицах высокотехнологичные датчики и подключили их к основному ЦОД города через оптоволоконную сеть. Этот центр стал выполнять роль облака для проекта. Затем мы оснастили автомобили Maserati — седан Quattroporte и кроссовер Levante — множеством датчиков, в том числе HD-камерами, лидарами и GPS, подключенными к инфраструктуре города через выделенный сегмент LTE-сети.

Мы также установили на эти автомобили графические ускорители Nvidia Jetson и ноутбуки, служившие макетом консоли бортовой системы Advanced Driver Assistance System (ADAS), чтобы водители могли получать уведомления CLASS от городского ЦОД.

В ходе испытаний в рамках проекта CLASS автомобили Quattroporte и Levante передвигались по улицам Модены, отправляя данные с датчиков в городской центр. Предупреждения о потенциальных опасностях выводились на экраны ноутбуков, служивших макетом системы ADAS.

Для профессиональных водителей-испытателей Maserati все эти протоколы и компоненты стали единым каналом уведомлений, отображающихся на консоли ADAS. Уведомления заблаговременно предупреждали водителей о возможных столкновениях и препятствиях, предоставляя достаточно времени, чтобы среагировать.

Залогом эффективной работы прототипа CLASS стала интеграция в реальном времени данных от камер и датчиков, установленных на рядом проезжающих транспортных средствах, с автомобилем и облаком. Обработка этих данных включала обнаружение объектов, отмеченных видеокамерами, лидарами и радарами, анализ потенциальных траекторий движения этих объектов и прогнозы ДТП.

За прогнозирование траекторий и столкновений отвечал движок Lithops, который в рамках проекта адаптировали для быстрой обработки периферийных и облачных данных с минимальными затратами и на инфраструктуре serverless.

Планирование рабочего процесса с учетом временных ограничений и необходимости передачи данных от периферийных устройств в облако осуществлялось с помощью инструментов COMPS и dataClay от BSC. Использовав высокоскоростную глубокую нейронную сеть (YOLO), команда университета UNIMORE осуществила преобразование входных видеоданных в аналитический поток объектов, что позволило поднять производительность мобильного графического ускорителя выше характеристик по умолчанию.

Рабочий процесс «облако — автомобиль» европейского проекта CLASS.

Для оценки производительности прототипа CLASS мы разработали и применили первый универсальный инструмент сопоставительного анализа для Apache OpenWhisk под названием owperf, предназначенный специально для обработки событий. В рамках проекта CLASS было задано новое направление развития вычислений serverless с использованием одного из фреймворков EXPRESS, который изначально нацелен на снижение эксплуатационных расходов.

От улиц Модены до вашего города

Проект CLASS завершился летом 2021 года, но мы только начинаем детально анализировать результаты. Он продемонстрировал возможность построения единой системы дорожного движения, а также пользу комплексных ИТ для водителей и для администрации муниципалитетов, открывая дорогу к созданию интеллектуальных городов будущего.

Оригинальный материал на английском читайте здесь. Источник — habr.com.

Представлены смартфоны Google Pixel 6 и 6 Pro с фирменным процессором Tensor

19.10.2021

Компания Google официально представила шестое поколение фирменного смартфона Pixel. Главной особенностью новинки стал отказ от процессоров Qualcomm в пользу внутренней разработки.

У нового Google Pixel 6 плоский экран с не самыми тонкими рамками на рынке, задняя панель разделена на две части большим выпирающим блоком камер. Во всех вариантах верхняя часть задней панели отличается по оттенку от нижней. Смартфон оборудован 6,4-дюймовым AMOLED-экраном с разрешением 2340 х 1080 пикселей, соотношением сторон 20:9, частотой обновления 90 Hz и встроенным сканером отпечатков пальцев. За защиту отвечает закаленное стекло Corning Gorilla Glass Victus.

Устройство построено на базе восьмиядерного 5-нм процессора Tensor (8 ядер CPU, 20 ядер GPU) — собственной разработки компании Google. Отмечается, что чип обеспечивает Pixel 6 на 80% большую производительность по сравнению с прошлогодним Pixel 5. В состав Tensor также входит сопроцессор безопасности Titan M2. Благодаря функциям машинного обучения Pixel 6 быстрее обрабатывают снимки и открывает новые возможности при взаимодействии с голосовым помощником Google Assistant. Объем оперативной памяти LPDDR5 составляет 8 Gb, емкость флэш-памяти UFS 3.1 – 128 или 256 Gb.

Производитель заметно прокачал камеры в Pixel 6. На смену 12 Мп основному датчику пришел современный датчик Samsung GN1 на 50 Мп (f/1,85). По умолчанию снимки получаются с разрешением 125 Мп путем объединения соседних пикселей матрицы для повышения светочувствительности. Ультраширокоугольный модуль остался прежним с разрешением 12 Мп (f/2.2, угол обзора 114 градусов). В блоке камер также скрывается лазерный автофокус. Фронтальная камера не претерпела никаких изменений и по-прежнему имеет разрешение 8 Мп. Смартфон получил несколько новых программных функций камеры. Специальный режим движения позволяет снимать движущиеся объекты, придавая им эффект скорости, а размытые лица на снимках можно автоматически исправить. В приложении «Google Фото» доступна возможность удалять нежелательные объекты с фотографий. Фронтальная камера разрешением 8 Мп (f/2.0).

Питание Pixel 6 получает от аккумуляторной батареи емкостью 4614 мАч с поддержкой быстрой 30-ваттной проводной и 21-ваттной беспроводной зарядками. В оснащение входят поддержка 5G, адаптеры Wi-Fi 802.11 a/b/g/n/ac/ax, 2,4/5/6 GHz и Bluetooth 5.2, GPS, GLONASS, Galileo, QZSS, NFC и стереодинамики. Смартфон получил защиту от воды по стандарту IP68. Габариты составляют 158,6 х 74,8 х 8,9 мм, вес — 207 гр. Адаптер питания в комплекте поставки отсутствует. Заявлено 5 лет обновлений безопасности и как минимум 4 крупных обновления Android. Смартфон Pixel 6 доступен для предзаказа в черном, зеленом и розовом цветах корпуса с сегодняшнего дня по цене от 599 долларов. В продаже — с 28 октября.

Также была представлена Pro-версия. Модель получила более качественный экран, аккумулятор большей емкости и дополнительную телефотокамеру с оптическим приближением.

Google Pixel Pro оснащен 6,7-дюймовым AMOLED (LTPO)-дисплеем с разрешением 3120 х 1440 пикселей и адаптивной частотой обновления от 10 до 120 Hz. В отличие от базовой модели, экран немного изогнут по бокам, благодаря чему рамки заметно меньше. Сканер отпечатков пальцев также встроен в экран.

Модель также построена на базе фирменного процессора Google Tensor. Объем оперативной памяти LPDDR5 составляет 12 Gb, емкость флэш-памяти UFS 3.1 – 128 или 256 Gb.

Основная и ультраширокоугольная камеры такие же, как в Pixel 6. Третья камера – телефото 48 Мп, Sony IMX586, перископ-оптика, оптический зум 4х, цифровой зум 20х. Фронтальная камера разрешением 16 Мп. Обе модели могут снимать видео в 4K при 60 fps с фирменными алгоритмами HDR и стабилизацией в режиме реального времени.

За автономность отвечает аккумулятор емкостью 5003 мАч с поддержкой быстрой 30-ваттной проводной и 23-ватнной беспроводной зарядки. Габариты составляют 163,9 x 75,9 x 8,9 мм, вес -210 гр.

Стоимость Pixel 6 Pro начинается с отметки 899 долларов, в продаже смартфон поступит 28 октября.