Apple выпускает модель искусственного интеллекта, которая может редактировать изображения на основе текстовых команд

Apple сегодня не является одним из ведущих игроков в сфере ИИ, но новая модель ИИ компании с открытым исходным кодом для редактирования изображений показывает, какой вклад она способна внести в эту сферу. Модель под названием MLLM-Guided Image Editing (MGIE), которая использует мультимодальные модели большого языка (MLLM) для интерпретации текстовых команд при манипулировании изображениями. Другими словами, этот инструмент имеет возможность редактировать фотографии на основе текста, который вводит пользователь. Хотя это не первый инструмент, который может это делать, «человеческие инструкции иногда слишком кратки для того, чтобы существующие методы могли их захватить и следовать», — говорит он. документ проекта (PDF) читается.

  Мы в Telegram

Компания разработала MGIE совместно с исследователями из Калифорнийского университета в Санта-Барбаре. MLLM способны преобразовывать простые или двусмысленные текстовые подсказки в более подробные и четкие инструкции, которым может следовать сам фоторедактор. Например, если пользователь хочет отредактировать фотографию пиццы пепперони, чтобы «сделать ее более полезной», MLLM может интерпретировать это как «добавить овощную начинку» и отредактировать фотографию как таковую.

Фотографии пиццы, гепарда, компьютера и человека.

Яблоко

Помимо внесения серьезных изменений в изображения, MGIE также может обрезать, изменять размер и вращать фотографии, а также улучшать их яркость, контрастность и цветовой баланс с помощью текстовых подсказок. Он также может редактировать определенные области фотографии и может, например, изменять волосы, глаза и одежду человека на ней или удалять элементы на заднем плане.

Как ВенчурБит отмечает, Apple выпустила модель через GitHubно желающие также могут попробовать демо в настоящее время он размещен на Hugging Face Spaces. Apple еще не сообщила, планирует ли она использовать то, чему она научилась в результате этого проекта, в инструменте или функции, которую можно будет включить в любой из своих продуктов.


Нажмите здесь, чтобы узнать больше новостей


Leave a Comment

Your email address will not be published. Required fields are marked *