DALL-E 2 Produces Fantastical Images Of Most Anything You Can Imagine

741

In January, 2021, the OpenAI consortium unveiled its most ambitious project to date, the DALL-E machine learning system. This ingenious multimodal AI was capable of generating images based on the attributes described by a user — think “a cat made of sushi” or “an x-ray of a Capybara sitting in a forest.” On Wednesday, the consortium unveiled DALL-E’s next iteration which boasts higher resolution and lower latency than the original, reports engadget.

About DALL-E

The first DALL-E (a portmanteau of “Dali,” as in the artist, and “WALL-E,” as in the animated Disney character) could generate images as well as combine multiple images into a collage, provide varying angles of perspective, and even infer elements of an image — such as shadowing effects — from the written description.

“Unlike a 3D rendering engine, whose inputs must be specified unambiguously and in complete detail, DALL·E is often able to ‘fill in the blanks’ when the caption implies that the image must contain a certain detail that is not explicitly stated,” the OpenAI team wrote in 2021.

Commercial product

DALL-E was never intended to be a commercial product and was therefore somewhat limited in its abilities given the OpenAI team’s focus on it as a research tool, it’s also been intentionally capped to avoid a Tay-esque situation or the system being leveraged to generate misinformation.

Its sequel has been similarly sheltered with potentially objectionable images preemptively removed from its training data and a watermark indicating that its an AI-generated image automatically applied. Additionally, the system actively prevents users from creating pictures based on specific names. Sorry, folks wondering what “Christopher Walken eating a churro in the Sistine Chapel” would look like.

CLIP image recognition system

DALL-E 2, which utilizes OpenAI’s CLIP image recognition system, builds on those image generation capabilities. Users can now select and edit specific areas of existing images, add or remove elements along with their shadows, mash-up two images into a single collage, and generate variations of an existing image.

What’s more, the output images are 1024px squares, up from the 256px avatars the original version generated. OpenAI’s CLIP was designed to look at a given image and summarize its contents in a way humans can understand. The consortium reversed that process, building an image from its summary, in its work with the new system.

“DALL-E 1 just took our GPT-3 approach from language and applied it to produce an image: we compressed images into a series of words and we just learned to predict what comes next,” OpenAI research scientist Prafulla Dhariwal told Verge.

Unlike the first, which anybody could play with on the OpenAI website, this new version is currently only available for testing by vetted partners who themselves are limited in what they can upload or generate with it.

Only family-friendly sources can be utilized and anything involving nudity, obscenity, extremist ideology or “major conspiracies or events related to major ongoing geopolitical events” are right out. Again, sorry to the folks hoping to generate “Donald Trump riding a naked, COVID-stricken Nancy Pelosi like a horse through the US Senate on January 6th while doing a Nazi salute.”

Did you subscribe to our daily Newsletter?

It’s Free! Click here to Subscribe

Source: Engadget

2 COMMENTS

  1. Дорогие Клиенты!
    Предлагаем вам инновационное элемент в мире декора домашней обстановки – шторы плиссе. Если вы стремитесь к великолепию в любой нюансе вашего жилища, то эти перила окажутся замечательным решением для вас.
    Что делает шторы плиссе столькими единственными? Они совмещают в себе в себе выгоду, работоспособность и полезность. Благодаря особенной структуре, новаторским материалам, шторы плиссе идеально подходятся для какова бы то ни комнатки, будь то хата, гнездо, плитки или должностное пространство.
    Закажите [url=https://tulpan-pmr.ru]шторы плиссе[/url] – отразите уют и красоту в вашем доме!
    Чем подкупают шторы плиссе для вас? Во-первых, их поразительный стиль, который присоединяет привлекательность и изысканность вашему декору. Вы можете подобрать из разнообразных текстур, оттенков и подходов, чтобы подчеркнуть индивидуальность вашего жилища.
    Кроме того, шторы плиссе предлагают обширный арсенал практических возможностей. Они могут контролировать уровень света в месте, оберегать от солнечного света, поддерживать интимность и создавать уютную среду в вашем жилище.
    Наш ресурс: [url=https://tulpan-pmr.ru]http://www.tulpan-pmr.ru[/url]
    Мы сами поддержим вам выбрать шторы плиссе, которые прекрасно подходят к для вашего интерьера!

  2. Наша бригада опытных специалистов приготовлена предложить вам прогрессивные системы утепления, которые не только гарантируют устойчивую протекцию от холодных воздействий, но и дарят вашему дому стильный вид.
    Мы функционируем с последними строительными материалами, сертифицируя постоянный срок работы и замечательные результаты. Изолирование наружных стен – это не только экономия на подогреве, но и забота о природной среде. Энергоспасающие технологические решения, какие мы осуществляем, способствуют не только личному, но и сохранению природных ресурсов.
    Самое ключевое: [url=https://ppu-prof.ru/]Расценки утепления стен фасада[/url] у нас стартует всего от 1250 рублей за квадратный метр! Это доступное решение, которое превратит ваш помещение в фактический душевный угол с минимальными издержками.
    Наши проекты – это не лишь утепление, это формирование пространства, в котором все элемент отражает ваш собственный образ. Мы возьмем во внимание все ваши требования, чтобы преобразить ваш дом еще еще более гостеприимным и привлекательным.
    Подробнее на [url=https://ppu-prof.ru/]веб-сайте компании[/url]
    Не откладывайте заботу о своем доме на потом! Обращайтесь к профессионалам, и мы сделаем ваш корпус не только комфортнее, но и модернизированным. Заинтересовались? Подробнее о наших работах вы можете узнать на интернет-портале. Добро пожаловать в пределы уюта и уровня.

Comments are closed.