Google Stadia использует Style Transfer ML для переноса стиля игры в реальном времени

Google анонсировала запуск облачного игрового сервиса Stadia на Game Developers Conference 2019. Виртуальная игровая площадка позволит запускать игры для компьютеров и консолей на устройствах с Google Chrome: смартфонах, планшетах, телевизорах и т.д. независимо от аппаратных возможностейGoogle не раскрыла много подробностей о Stadia, но интересной особенностью сервиса стала функция Style Transfer ML.

Перенос стиля

Style Transfer ML использует сверточные нейронные сети для передачи стиля с картинки прямо в игру. Это не новая технология, однако создание покадровой анимации внутри игры в реальном времени не простая задача. В Stadia разработчики смогут переносить текстуры, цветовые палитры и объекты из фотографий или видео непосредственно в игровую среду.

Идея Google состоит в том, чтобы облегчить процесс изменения стиля игры и расширить поле для экспериментовПереход от 2D иллюстрации к реализованной игровой средеэто долгий процесс рисования текстур, моделирования, настройки освещения и т.д. Перенос художественного стиля в реальном времени позволит разработчикам сразу перейти от рассмотрения концепции к тестированию в живой игровой средеС помощью ML Style Transfer можно будет изменить стиль всей игры за короткий промежуток времени. 

В Google полагают, что применение Style Transfer также открывает новые формы взаимодействия с пользователями видеоигр, в том числе изменение визуальных стилей во время игры, персонализация для каждого игрока, использование стилей, созданных с помощью пользовательского контента.

Пока не понятно, как новая функция будет принята создателями игр, и сможет ли она обеспечить более быструю и простую разработку. Подробная информация о сервисе Stadia будет доступна летом 2019 года.

Nvidia представила набор инструментов для радиологов Clara AI

Nvidia продолжает фокусироваться на разработке аппаратного и программного обеспечения с ИИ для врачей. На GTC 2019 компания представила платформу Clara AI, которая содержит набор инструментов для разработки медицинского ПО и предобученные модели для радиологов. Clara AI для радиологов Глубокое обучение сегодня имеет наибольший потенциал…

Нейросеть GauGAN превращает наброски в реалистичные фотографии

Нейронная сеть GauGAN, разработанная Nvidia, позволяет преобразовывать схематичные рисунки в реалистичные изображения природных сцен. Компания представила разработку на конференции GPU Technology Conference 2019, посвященную машинному обучению и новым решениям для разработчиков ИИ. GauGAN может стать мощным инструментом для создания виртуальных миров для множества специалистов:…

Nvidia запустила редактор фотографий AI Playground

На конференции GPC 2019 Nvidia анонсировала запуск AI Playground — веб-платформы для редактирования фотографий с помощью нейронных сетей. В компании отмечают, что нацелены сделать свои продукты более доступными для широкой аудитории. Интерфейс платформы AI Playground очень прост и экспериментировать с обработкой фото могут все…
gan for music generation

GANSynth: создание музыки с помощью GAN

На конференции ICLR 2019 разработчики Google Magenta представили новый подход к синтезу аудио с помощью генеративно-состязательной нейронной сети. GANSynth позволяет генерировать музыку в 50 000 раз быстрее методов, основанных на авторегрессии, таких как WaveNet от DeepMind. В работе исследователи адаптировали модель WaveGAN и предложили…

Intel выпустила open source инструмент для разметки фото и видео

Computer Vision Annotation Tool — бесплатный интерактивный инструмент для разметки цифровых фото и видео от компании Intel. Исходный код доступен на GitHub. Исследователи data science нуждаются в большом количестве аннотированных данных для обучения глубоких нейронных сетей. Разметка данных занимает очень много времени. В блоге…

DeepMind научила нейросеть следовать навигационным инструкциям

Разработчики DeepMind научили нейронную сеть следовать навигационным инструкциям. В будущем подобные разработки будут полезны для автономных автомобилей — машины смогут доехать до определенного места следуя голосовым командам с нужными действиями. Пока технология требует серьезной доработки — точность работы в знакомой среде составила 72%, а…

OpenAI запускает Neural MMO — игровую среду для обучения агентов с подкреплением

OpenAI представила Neural MMO — игровую среду с открытым исходным кодом для обучения множества агентов с подкреплением одновременно. В RPG ИИ-боты будут выполнять задания и сражаться между собой за ресурсы. Цель — создавать агентов, которых затем можно масштабировать для выполнения сложных задач в реальном…

Конкурс «Животные против ИИ» проверит когнитивные способности алгоритмов

В июне 2019 года состоится конкурс Animal-AI Olympics, на котором исследователи сравнят когнитивные способности современных алгоритмов с интеллектом животных. Основная задача — понять, как далеко ИИ продвинулся в работе с обобщениями на основе предыдущего опыта. Проект разработан Кембриджским университетом и исследовательской организацией Good AI,…

Машинное обучение помогло классифицировать 7 типов детского артрита

Канадские ученые использовали метод факторизации неотрицательных матриц чтобы классифицировать 7 типов детского артрита и лучше прогнозировать исход заболевания. Теперь врачи смогут адаптировать лечение так, чтобы дети, у которых больше шансов на развитие легкой формы болезни, могли избежать лечения медикаментами с серьезными побочными эффектами. Артрит…

Mozilla опубликовала крупнейший набор данных голосов на 18 языках

Mozilla опубликовала открытый датасет Common Voice, который содержит 1400 часов записей человеческой речи на 18 языках, включая английский, французский, немецкий и редкие языки — валлийский, кабильский и другие. Это самый большой доступный мультиязычный набор голосовых данных. Русский язык пока не представлен, но в дальнейшем…

В TensorFlow появилась функция преобразования датасетов в формат tf.data

Разработчики Google представили функцию TensorFlow Datasets для преобразования любых общедоступных наборов данных в формат tf.data. Открытые наборы данных для обучения моделей распространяются и хранятся в разных форматах. Написание скриптов для загрузки и обработки каждого набора данных требует времени. Tensorflow Datasets преобразует наборы данных из интернета в…

Нейросеть DeepMind прогнозирует мощность ветра на 36 часов вперед

Разработчики DeepMind рассказали, как используют машинное обучение для предсказания мощности ветра на ветряных электростанциях. Прогнозы помогли компании улучшить производительность станций на 20%. Возобновляемая энергия, которую получают с помощью ветряных электростанций, способствует сохранению чистоты воды и воздуха. Ветрогенератор мощностью 1 МВт за 20 лет эксплуатации…

Онлайн курс «Практический Machine Learning» — обучение с нуля до Data scientist

Практический Machine Learning — это онлайн курс от школы digital-профессий SkillFactory. Он предназначен для аналитиков, разработчиков, product-менеджеров и начинающих специалистов по data science. Курс подходит для обучения с нуля — не обязательно обладать обширными знаниями в программировании и математике. Преподаватель — Александр Петров, Data…

Армия США оснастит танки автономным прицеливанием

Управление по контрактам армии США призвало представить идеи для создания «усовершенствованной системы автономного прицеливания и уничтожения» — Advanced Targeting and Lethality Automated System (ATLAS). Производить выстрел все же будет человек.  На сайте министерства обороны сообщается, что искусственный интеллект и машинное обучение дают возможность автономного прицеливания…

«Общение как с другом»: BMW iNEXT будет понимать жесты, голос и взгляд водителя

На конференции MWC 2019 компания BMW рассказала о Natural Interaction — технологии, которая использует алгоритмы распознавания голоса, жестов и взгляда, чтобы сделать взаимодействие водителя и автомобиля как можно более естественным. Новая разработка будет выпущена вместе с электрическим внедорожником BMW iNEXT в 2021 году. Natural…

Классификатор текста диагностирует детские болезни по описанию симптомов

Ученые из Китая создали классификатор на основе модели обработки естественного языка, который диагностирует детские болезни, анализируя симптомы и результаты анализов. Точность диагностики составила 75-93% для различных классов болезней, что сопоставимо с результатами педиатров. Модели диагностики уже показывают хорошие результаты в постановке диагнозов по сканам МРТ, но…

Полиция США обучает алгоритмы предсказания на фальсифицированных данных

В США обучают алгоритмы прогнозирования преступлений на предвзятых и фальсифицированных данных. Об этом говорится в недавно опубликованном отчете исследователей AI Now Institute и Нью-Йоркской юридической школы. Алгоритмы прогнозирования преступлений становятся повседневной практикой в городах США. Программное обеспечение должно помогать полицейским департаментам принимать эффективные решения,…

OpenAI разработала NLP модель, решающую сразу несколько задач

Компания OpenAI разработала языковую модель, которая способна решать несколько задач NLP. Изначально исследователи лишь пытались обучить GPT-2 генерировать реалистичное продолжение текста. Результаты настолько впечатляющие, что разработчики решили не выкладывать модель в открытый доступ, дабы избежать появления большого количества фейковых новостей. Особенности модели GPT-2 — это…

Нейросети в новой версии Adobe Lightroom улучшают качество фото на 30%

Adobe выпустила новую функцию Enhance Details для своих приложений Lightroom Classic, Lightroom CC и Camera RAW. Enhance Details использует сверточную нейронную сеть, чтобы повысить качество RAW-фотографий на 30%. Это один из первых случаев применения нейронных сетей в продуктах столь массового пользования для редактирования фотографий.…

Baidu создала приют для котов в Пекине с технологией распознавания на входе

Китайская корпорация Baidu открыла в Пекине приют для кошек с технологиями распознавания. Над входом в приют расположены камеры, которые сканируют морды и пропускают котов. Само помещение представляет собой небольшое деревянное сооружение, в котором одновременно может поместиться несколько животных. Там они находят воду, еду и…