Nowa sieć neuronowa DALL-E 2 tworzy realistyczne obrazy zgodnie z opisem i generuje podobne obrazy

OpenAI po raz pierwszy wprowadził DALL-E 2, zaktualizowaną wersję sieci neuronowej zademonstrowane w styczniu 2021 r. Teraz generuje jeszcze lepsze i bardziej realistyczne obrazy zgodnie z opisem w języku angielskim.

Przykład generowania dla zapytania „Astronauta jedzie na koniu w fotorealistycznym stylu”:

1 / 0

2 / 0

3 / 0

4 / 0

5 / 0

6 / 0

7 / 0

8 / 0

Oprócz generowania od podstaw, DALL-E 2 może wprowadzać zmiany w istniejących obrazach na podstawie poprawek tekstu. Potrafi dodawać i usuwać elementy z uwzględnieniem cieni, odbić i tekstur.

1 / 0

2 / 0

3 / 0

4 / 0

5 / 0

Kolejną niesamowitą zdolnością nowej sieci neuronowej jest tworzenie analogów pobranych obrazów (przykłady powyżej). Sieć neuronowa może dosłownie przerysować obraz w innym stylu, zachowując wszystkie obiekty, lub po prostu zmienić położenie obiektów, ich kolory i proporcje.

Dzięki temu rozdzielczość generowanych obrazów wzrosła czterokrotnie w porównaniu do DALL-E.

W OpenAI Uwaga, że choć projekt jest dostępny tylko do testów zamkniętych, to w przyszłości sieć neuronowa zostanie otwarta dla zewnętrznych programistów, którzy będą mogli korzystać ze wszystkich jego funkcji.