Dream bigger: Get started with Generative Fill, powered by Adobe Firefly Generative AI now in Photoshop
We are thrilled to announce that the Photoshop (beta) app has released Generative Fill, the world’s first co-pilot in creative and design workflows, giving users a magical new way to work. Generative Fill is powered by Adobe Firefly, Adobe’s family of creative generative AI models. Starting today, Photoshop subscribers can create extraordinary imagery from a simple text prompt.
This brings two imaging powerhouses together — Photoshop and generative AI, enabling you to generate content from inside Photoshop with a text prompt and edit it with Photoshop’s comprehensive range of tools to create extraordinary results.
For more than a decade, Adobe has delivered dozens of AI-driven features used by millions of people in Photoshop, such as Photoshop’s selection tools and Content-Aware Fill, to accelerate workflows and give you the best professional tools to create anything you can imagine.
Features in Photoshop’s May 2023 release, like the Remove Tool, build on this innovation, and now that we are entering a new era of AI, the advent of generative models presents a new opportunity to take our imaging capabilities to another level. Over the last few months, we have integrated this exciting new technology into Photoshop in a major step toward a more natural, intuitive, and fun way to work.
Image via Adobe employee: Russell Preston Brown.
Generative Fill is a magical new experience that enables you to add, extend, or remove content from your images non-destructively, using simple text prompts to achieve realistic results that will surprise, delight, and astound you — in seconds. Generative Fill automatically matches the perspective, lighting, and style of your image to make previously time-consuming tasks swift and delivers results that are truly mind-blowing and delightful.
Generative Fill is integrated into every selection tool in Photoshop and produces an entirely new “Generative Layer” so you can work non-destructively, while you explore the unlimited possibilities this new technology delivers. We believe generative AI is an incredibly powerful tool for Photoshop’s creative customers, and we are thrilled to start to infuse this transformative capability throughout the product beginning today. The first step is a complete reimagination of selections and layers. We can’t wait to see how you use it.
In addition, we have added a new Contextual Task Bar to Photoshop that makes generating new content incredibly easy. The Contextual Task Bar with the Generative Fill button pops onto your screen every time you make a selection so you can choose to continue forward with your normal selections workflow, or try generating something new like the extended crop in the image above that I generated with one click of the Generative Fill button and no text prompt at all.
Generative Fill in action
Image via Adobe employee: Russell Preston Brown.
Generative AI in Photoshop reshapes the way you create and combine images, dramatically accelerating your workflows and adding a lot more fun to the creative process. Simply make a selection, hit generate, and create as many options as you want. You can generate with or without adding text to the prompt.
And because it’s inside Photoshop, you can use all the app’s powerful tools you’re already familiar with to adjust your image to produce the results you want. With just a few short steps you can completely transform your images and use the AI-generated content to…
- add to an existing image
- remove or replace parts of an image
- extend an image
Don’t have a subscription to Photoshop? No problem. You can sign up for a trial of Photoshop and download the Photoshop (beta) app from Creative Cloud or sign up for Adobe Firefly to try Generative Fill online.
Reduce time from imagination to creation
Image via Adobe employee Cory Shubert.
Let’s take a look at how Photoshop’s new Generative Fill feature will improve your day-to-day work:
Magically leap from idea to image — with a simple text prompt
Push the bounds of your imagination and easily ideate or create extraordinary content. Start with an existing image and create new content simply by making a selection, entering a text prompt, or leaving the text prompt area empty. Photoshop analyzes the surrounding areas of the images and automatically generates new content with the appropriate shadows, reflections, lighting, and perspective. It is easy, fast, and fun to create realistic results in seconds.
Create at a transformative rate
Generative Fill empowers you to create as quickly as you can type. Experiment with off-the-wall ideas, ideate around different concepts, and produce dozens of variations in a snap. Easily generate multiple image suggestions; each prompt produces three options and you can continue generating until you get exactly what you want. Or take the best generated option and use all the traditional tools of Photoshop to achieve that final look.
Generative Fill also enables you to fast-forward the creative learning process, radically reduce the learning curve (even if you are a pro), and achieve high-quality creative results — which previously took hours to create — in a matter of seconds, enabling you to spend more time honing your creativity.
Powerful Selections Tools: Learn to make a Spaghetti Western Selection in this tutorial.
Unlimited creativity, coupled with the distinct control of Photoshop
Generative Fill is natively integrated into the Photoshop (beta) app, so you can explore freely while still maintaining complete control over your creative process and outputs, all inside Photoshop. Generative Fill is integrated into every selection tool. The newly generated content is created in a new generative layer, enabling you to explore a myriad of creative possibilities and to reverse the effects when you want, without impacting your original image.
What makes Generative Fill in Photoshop different?
- High-quality assets: It’s powered by Adobe Firefly, a new family of creative generative AI models that enable you to use simple text inputs to generate extraordinary results instantly.
- Community-involvement: It’s in the Photoshop (beta) app because we are welcoming our community to shape the tools Adobe is building with this transformational new technology.
- Designed to be safe for commercial use: Firefly is trained on Adobe Stock’s hundreds of millions professional-grade licensed, high-resolution images, which helps ensure Firefly won’t generate content based on other people’s work, brands, or intellectual property. So while Generative Fill is not for commercial use while in the Photoshop (beta), you can still create confidently.
- Setting the standard for responsibility: Through efforts like the Content Authenticity Initiative and the Coalition for Content Provenance and Authenticity, Adobe is standing up for accountability, responsibility, and transparency in generative AI and Firefly.
Powerful Layers Capabilities: Learn Spaghetti Western Layers and explore magical generative variations with Russell Brown in this tutorial.
My reflections on reflections (and shadows and lighting!)
Like the rest of the world, I am just now learning what generative AI can do. I have been playing with it in Photoshop for a few weeks and it is incredible for many workflows, particularly reflections, shadows and lighting, which I personally find very challenging.
Here are a few examples I thought were interesting to highlight the unique benefits of generative AI inside Photoshop with its powerful tools. My images are not perfect and generative AI is not right for every scenario, but I am providing these examples to get your juices flowing to explore with your own images to determine when Generative Fill is the best tool for your output needs.
I started with this unremarkable smartphone vacation image above on the left, that I would usually throw away. I first generated a new sky, a snowy mountain, a castle in the style of Alhambra, a boat, and adjusted the colors and lighting a little using the traditional Photoshop adjustment tools. I then generated a reflection of the sky in the lake, which I found surprisingly good. I then extended the blank canvas to the left and to the right with no text prompt and was astonished at the addition of matching buildings, forest, lake, more lily pads, sky and clouds, shadows and reflections, lighting … on and on.
Finally, I generated a swan and two babies and, once again, it produced good reflections in the water (and adorable swans).
In this one, I started with the image on the left and generated almost everything — a new sky, lighthouse, the smooth water to replace the original ripples, the flamingos, and all the reflections. I extended the image at the bottom, and without any text in my prompt it generated more water and more reflections. I cleaned up a few areas using the healing brush and muted the generated color of the flamingos to make them more pleasing to me. I have zoomed in on the flamingo reflections so you can think about when this type of output fits in your workflow or when you might need to take it further than I did using Photoshop’s traditional editing tools.
Of course I always like to have a little fun so this time I started with the Adobe Stock image on the left. Everything new is generated — the puppies, kittens, crowns and party hat, wings, extra forest to the right. Note how the kittens on the outer edges are in the sunlight and the puppies below the dog are in its shadow and how sometimes the grass is appropriately in front of the kittens. The crowns and hat have the correct perspective and fit their little heads. All of that was automatically generated with no adjustments from me. I was also pleased with how the light filters through those amazing generated wings, which I personally don’t have the skills to create by hand so this image would not be possible for me without generative AI.
Produce Magical Results with The Powerful Tools of Photoshop + Generative AI + Russell Brown: Ready to give it a whirl, but you want more instruction? Russell Brown has a comprehensive and fun tutorial for you here.
More inspiring examples from Adobe employees
The following are a small example of how Adobe employees have played with the technology during the testing period.
В Adobe Photoshop появилась ИИ-генерация
В блоге Adobe появилась запись о том, что Generative AI и Adobe Firefly интегрированы в новую версию Photoshop.
Функции генеративного искусственного интеллекта включены для самых популярных рабочих процессов Photoshop: для обработки изображений, удаления и замены содержимого и для увеличения скорости навигации по интерфейсу.
Firefly — это семейство креативных генеративных моделей искусственного интеллекта, которое внедрено для Photoshop для ПК. Сейчас ИИ находится в бета-версии.
Firefly был запущен шесть недель назад и быстро стал одним из самых успешных бета-запусков в истории Adobe: на сегодняшний день пользователи бета-версии создали более 100 миллионов ресурсов.
Первая модель Firefly обучается на наборе данных из Adobe Stock, то есть на контенте с открытой лицензией. Также обучение ведётся на контенте без авторского права.
Вот, что предлагает Firefly.
Предустановленные пресеты
Это фильтры для обработки изображений. На основе ИИ обработку можно будет провести всего за несколько шагов.
На панели «Коррекция» появились 32 новых пресета, на которые нужно навести указатель мыши, чтобы увидеть, как будет выглядеть изображение после обработки. После выбора пресета его можно подкорректировать, отредактировав автоматически созданные корректирующие слои на панели слоев.
Инструмент «Remove»
Инструмент «Удалить» — это ИИ-функция, которая заменяет ненужный объект на фото. Сделать это можно, проводя кистью по объекту. При этом сохраняется целостность соседних объектов и обеспечивается непрерывный переход на сложном и разнообразном фоне.
Инструмент особенно эффективен при удалении крупных объектов. Например, он может удалить целое здание или автомобиль с изображения альпийского пейзажа, сохраняя плавность перехода от луга к горам.
Контекстная панель задач
Это экранное меню, которое предлагает следующие шаги при обработке изображений, которые могут понадобиться пользователю.
Инструмент сокращает количество щелчков мышью во время работы и делает самые распространенные действия более доступными.
Например, когда объект выделен, контекстная панель задач появляется под выделением и предлагает действия для уточнения выделения. Среди них могут быть «Выделение и маска», «Растушевка», «Инвертировать», «Создать корректирующий слой», «Заполнить выделение» или «Создать».
Обновление градиентов
Функция «Градиенты» была значительно улучшена, а рабочий процесс — ускорен.
Функция позволяет создавать градиенты всего за несколько шагов и включает в себя новые элементы управления.
Предварительный просмотр в реальном времени, созданный автоматически, сразу показывает, как внесенные изменения повлияют на изображение.
Новые функции Photoshop предназначены для ускорения повседневных рабочих процессов, упрощения сложных задач и сокращения числа кликов.
Теперь Photoshop ещё лучше самостоятельно дорисует изображение: в популярном редакторе появилось «генеративное расширение» на основе ИИ
Adobe научила Photoshop расширять и дорисовывать изображения с помощью ИИ Adobe запускает функцию искусственного интеллекта Generative Expand для бета-тестеров Photoshop.
Еще в мае Adobe представила систему генеративного искусственного интеллекта для бета-версии Photoshop. Теперь набор функций расширяется за счет универсального «генеративного расширения» (Generative Expand), доступного для тестировщиков.
Бета-версия Adobe Firefly AI изначально фокусировалась на создании изображений и текстовых эффектах, а затем была расширена, чтобы предлагать перекрашивание векторов и генеративную заливку. Затем появилась интеграция с Firefly: в мае бета-версия Photoshop получила Generative Fill.
Теперь бета-версия Photoshop получила еще одну фукнцию на основе ИИ, Generative Expand. Вот как Adobe описывает эту функцию: «Новый рабочий процесс, позволяющий пользователям увеличивать изображения с волшебными результатами одним щелчком мыши в бета-версии Photoshop».
Вы можете расширять ваше изображение, добавляя какой-то уточняющий вопрос или обходясь без этого. Можно менять соотношение сторон, чтобы Photoshop дорисовал отсутствующие части изображения.
Adobe добавила в бета-версию Photoshop функции своего ИИ-сервиса Firefly Статьи редакции
Можно добавлять и удалять объекты, создавать фоны и так далее.
- Инструмент Generative Fill, который работает на семействе генеративных моделей Adobe Firefly, пока доступен в бета-версии Photoshop подписчикам Creative Cloud или пользователям пробной версии.
- С помощью инструмента и текстовых подсказок пользователи могут добавлять новые объекты, более точно удалять существующие, создавать фон с учётом доступного изображения. Generative Fill учитывает перспективу, освещение и стиль.
- Adobe добавила в Photoshop новую панель задач с кнопкой Generative Fill, которая поможет быстро менять изображение даже без текстовых подсказок.
- Firefly обучен на «сотнях миллионов» лицензированных изображений высокого разрешения Adobe Stock, поэтому созданный контент не нарушает права на интеллектуальную собственность, отметили в компании.
- Но Generative Fill недоступен для коммерческого использования, пользователям младше 18 лет и из Китая, добавили в Adobe. Подсказки работают только на английском языке.
кнопка «Сделать п**дато» всё ближе
Озвучу главный вопрос — будет ли это великолепие работать в параллельно-импортированном Photoshop?
Если аккаунт не дай бог заподозрят в том, что он русский, то чую могут отключить возможность. Adobe Firefly в веб-версии нельзя пользоваться из России, ДНР, ЛНР, Крыма, Китая, Ирана, Северной Кореи и еще чего-то там, причем отрубают доступ на уровне аккаунта. Сам попал под рестрикции, поработав без VPN включенного.
Поэтому возможно нужен будет "не наш" аккаунт, VPN и не светить вообще, что РФ.
Это что за дискредитация отечественного ПО? РосГИМП с ГигаЧадом ждите.
Сейчас специально для него «Микрон» достраивает третий этаж специализированного «Эльбруса» со сниженным энергопотреблением (в соседнем корпусе будет ТЭЦ для обогрева Зеленограда выделяемым теплом).
Будем надеяться что благородные пираты смогут импортировать сие чудо.
Если вы про трекер, то нет. ИИ фишки работают только на облачной версии.
надеемся, что да)
Думаю что со временем 100% импортируют его туда
Inpaint Fill добавили в веб-морду беты Firefly тоже.
2d морфинг существует более 30 лет в виде программного обеспечения
Ок, Адобе, сделай из этой фотки, будто я чилю в бунгало, где-то в Тайланде с двумя знойными азиатками. )))
ЗЫ: успешный успех у инфоцыган обещает выйти на новый уровень ))))
Добавили Inpaint Fill в онлайн версию, поэтому вот
И выдаст типа такого. Таиланд есть, зной есть, балконе бунгало есть, а про азиаток ИИ недопонял 🙂
Почему это так смешно звучит?
Есть плагин для фш который позволяет интегрировать sd. Отчасти это может компенсировать часть функций firefly
Будет, мои золотые.
Пацан сказал — пацан сделал
Adobe уже на 10 лет отстал и все просрал.
Когда эдоби все просрал, когда фигму купил?
И даже не смотря на это адекватной замены адобовской экосистеме и близко не существует
и кому же он все просрал поделитесь?
А в народной версии это будет работать?
Но будет работать в связке с Stable Diffusion
интересно почему нельзя будет использовать пользователям которым меньше 18
Первым делом будут сделаны сиськи.
Даже объяснять не надо )))
тоже не совсем понятен этот момент
Комментарий удален модератором
Комментарий удален модератором
ну не томи уже, Адобе, просто выпусти программу чтобы всех этих "фотошоперов" можно было заменить на ИИ и не парится. Сколько рабочих рук освободится)
Это потрясающе! Я ещё два года назад работал в ФШ и офигевал на радостях от того, что можно небо менять))
А нахрен он тогда нужен, себе в стол рисовать?
понятно что для рекламы и нужен
В онлайн версии Firefly Inpaint тоже добавили, вот поместил мужика чилить в Тай 🙂
В кои то веки зажравшиеся коты зачухались.
Вообще, как же хочется, чтобы адоб на свалку истории отправился, преподав урок всем остальным жирным котам, но, наверное, таки баблом зальют и удержатся.
Смотрел ради интереса туториалы на ютубе, как сейчас решаются в фотошопе стандартные задачи вроде ретуши, замены фона, цветокоррекции.
Плюс-минус, все тоже самое, что 20 лет назад было. Те же подходы, те же инструменты, тот же пайплайн работы. Да, где-то что-то на полшишечки удобнее стало. Сейчас стали тупо сбоку какие-то свистоперделки с AI навешивать, которые, принципиально, подход не меняют.
Ну, серьёзно, при тех объемах бабла, которое зарабатывалось десятилетиями, выглядит, как плевок эффективных менеджеров, мол, "ой, что-то, кажется, из каждого утюга про ИИ разговоры идут, давайте 0.1% нашего годового бюджета каким-то аутсорсерам отдатим, пусть прикрутят че-то хайповое, а то вообще стыдно как-то".
Осторожно, мнение старого деда. Мне иногда кажется, что человечество, под инициативой сильных мира сего, всегда сворачивает куда-то не туда. Использовать нейросети для рисования картинок, это как использовать микроскоп для забивания гвоздей или систему связи, тот же скайп, как файлохранилище)
Даешь систему, познающую мир и создающую нейрофилософию, потенциал человечества в покорение космоса, как это делал Илон лет 8 назад.
Тут часто пишут, мы знаем как сделать то и это, сделав 1000 шагов и главное не ошибиться ни в одном.
Как используя чатжпт писать коды, разрабатывать и внедрять фичи, лечить баги, собирать факапы и фидбэки.
А особо одаренные и успешные как релоцировать в страны, где раньше не мылись годами, а помои выливали в окно. Ну и где же ваши успехи в ИТ? Зато вы отлично разбираетесь в вопросах что изобрел СССР, как у нас обстоят дела с экономикой, ВВП. Давайте, расскажите как вы, находясь там, сделали что-то аналогичное для нас. И мы гордо бы заявили — смотрите, наш , российский айтишник, сделал то-то, да так, что для пользования этим нужен только российский аккаунт.
смотрите, наш , российский айтишник вдруг разорвал руками себе грудь и вырвал из нее свое сердце и высоко поднял его над головой.
и последовательность расписали, круто
классно, генерация стольких изображений ,и выглядит достаточно красиво и удобно для использования и создания контента
Функция получилась отличной будем ждать полную версию!
Статья о новой фиче в Photoshop? Сто лет как известно, что Firefly — это не только сериал.
Ну как и предполагалось, обучили на базе стоковых картинок, о чем авторов последних забыли спросить. А еще забыли придумать, платить ли авторам, на которых обучились.