Создание искусства из комментариев: 5 шагов (с изображениями)

2024 Автор: John Day | [email protected]. Последнее изменение: 2024-01-30 11:48

Это амбициозный проект, в котором мы хотим использовать некоторые из самых сомнительных частей Интернета, разделы комментариев и чаты для создания произведений искусства.

Мы также хотим сделать проект легкодоступным, чтобы каждый мог попробовать свои силы в создании прекрасного искусственного интеллекта. Если вам не терпится попробовать это самостоятельно, вот ссылка на проект.

Запасы

• Raspberry Pi
• DeepAI
• Remo.tv

Шаг 1: проект видео

Шаг 2: Remo.tv

Первый шаг - это сбор сообщений и комментариев в чате. С нашей идеей сделать его легкодоступным, Remo.tv - естественный выбор. Это платформа для потоковой передачи роботов, которая позволяет подключать к Интернету все виды оборудования и позволять любому управлять им. Он также имеет функцию чата и возможность отображать изображения, что именно то, что мы ищем!

В данном случае мы будем использовать оборудование Raspberry Pi.

На Remo.tv есть отличная страница на Github с инструкциями по установке.

После настройки наш Raspberry Pi может начать получать сообщения чата, отправленные через Remo.tv.

Шаг 3: DeepAI

С настройкой Remo.tv мы можем перейти к художественной части. Каждый полученный нами комментарий необходимо превратить в искусство, и для этого мы будем использовать магию искусственного интеллекта.

К счастью, DeepAI - это еще одна платформа, облегчающая нашу жизнь. У них есть все виды функций, связанных с ИИ, но нас интересуют их API.

Первый API, который мы используем, - это Text To Image, все, что нам нужно сделать, это отправить текст и дождаться волшебства. На картинке выше вы можете увидеть результат отправки собаки в забавной шляпе.

Наша сгенерированная картинка еще не является искусством, поэтому мы используем их Fast Style Transfer. Этот API ожидает исходное изображение, в нашем случае сгенерированное изображение, и применяемый стиль. Вы можете увидеть результат сочетания нашей собаки с забавной шапкой и классической картиной Ван Гога.

Шаг 4: поток данных и код

Завершив все отдельные части, мы можем их соединить. На чертеже мы даем обзор потока данных:

• Сообщение чата приходит с Remo.tv на наш Raspberry Pi
• Наш Pi отправляет это сообщение в API преобразования текста в изображение и получает обратно сгенерированное изображение.
• Это изображение вместе со случайно выбранным художественным стилем затем отправляется в Fast Style Transfer API.
• После получения комбинации художественного стиля и сгенерированного изображения Raspberry Pi передает результат на Remo.tv.

Чтобы иметь возможность передавать сгенерированное изображение на Remo.tv, нам нужно было написать некоторый собственный код. К счастью, прекрасное сообщество Remo.tv помогло нам в этом, спасибо, ребята!:)

Для всех любопытных, полный код включен в этот проект, так что вы можете сразу приступить к работе.

Шаг 5: Результат

После всей этой тяжелой работы пришло время насладиться прекрасным искусством!

• Старый банан
• Наггетсы
• Симпатичные кошки едят арбуз
• Плавающий в облаке
• Одиночество
• Мое счастливое место
• Нигде

Вот ссылка на комментарий к арту на Remo.tv, если вы хотите попробовать сами!