Огромният набор от генеративни AI инструменти на OpenAI продължава да расте.
Компаниите за изследване и внедряване на изкуствен интелект (AI), като OpenAI, непрекъснато пускат функции в полза на човечеството. В допълнение към ChatGPT, DALL-E, Point-E и други успешни инструменти, OpenAI пусна Shap-E, нов иновативен модел.
И така, какво представлява Shap-E на OpenAI и какво може да направи за вас?
Какво представлява Shap-E на OpenAI?
През май 2023 г. Alex Nichol и Heewon Jun, изследователи и сътрудници на OpenAI, пуснаха хартия, обявяваща Shap-E, последната иновация на компанията. Shap-E е нов инструмент, обучен върху масивен набор от данни от сдвоени 3D изображения и текст, който може да генерира 3D модели от текст или изображения. То е подобно на DALL-E, който може да създава 2D изображения от текст, но Shap-E произвежда 3D активи.
Shap-E се обучава на модел на условна дифузия и 3D картографиране на активи. Картографирането на 3D активи означава, че Shap-E се научава да свързва текст или изображения със съответните 3D модели от голям набор от данни на съществуващи 3D обекти. Моделът на условна дифузия е генеративен модел, който започва от шумна версия на целевия изход и постепенно го усъвършенства чрез премахване на шума и добавяне на детайли.
Чрез комбиниране на тези два компонента, Shap-E може да генерира реалистични и разнообразни 3D модели, които съответстват на дадения текст или въведено изображение и могат да се разглеждат от различни ъгли и условия на осветление.
Как можете да използвате Shap-E на OpenAI
Shap-E не е направен публично достояние като другите инструменти на OpenAI, но неговото тегло на модела, код за извод и образци са достъпни за изтегляне на Shap-E GitHub страница.
Можете да изтеглите кода на Shap-E безплатно и инсталирайте го с помощта на командата pip на Python на вашия компютър. Нуждаете се също от NVIDIA GPU и високопроизводителен CPU, тъй като Shap-E изисква много ресурси.
След инсталирането отворете 3D изображенията, които генерирате в Microsoft Paint 3D. По същия начин можете конвертирайте изображенията в STL файлове ако искате да ги отпечатате с помощта на 3D принтери.
Можете също така да съобщавате за проблеми и да намирате решения на проблеми, вече повдигнати от други на страницата на Shap-E GitHub.
Какво можете да направите с Shap-E на OpenAI
Shap-E ви позволява да описвате сложни идеи, като използвате визуално представяне на идеи. Потенциалните приложения на тази технология са неограничени, особено като се има предвид, че визуалните ефекти обикновено имат много по-обхватни ефекти от текстовете.
Като архитект можете да използвате Shap-E за създаване на 3D модели на сгради и структури въз основа на писмени описания. Можете да посочите размерите, материалите, цветовете и стиловете на структурите, като използвате прости изречения. Например, можете да го подканите с: „Направете небостъргач с 60 етажа и стъклени балюстради“ и да експортирате резултата(ите) в друг софтуер за по-нататъшно редактиране, ако харесвате резултатите, които получавате.
Геймърите и аниматорите могат да подобрят виртуалната среда и визуалното изживяване чрез създаване на детайлни 3D обекти и герои. В инженерството можете да опишете компоненти, спецификации и функции на машини и оборудване и да получите резултатите в 3D модели, преди да създадете физически прототипи.
Освен това, дори в области като образованието, Shap-E може да помогне на преподавателите да предадат сложни и абстрактни идеи на своите ученици по предмети като биология, геометрия и физика.
Въпреки че все още се работи, Shap-E е една крачка пред OpenAI ТОЧКА-Е, който създава 3D облаци от точки въз основа на текстови подкани. Облаците от точки са ограничени в своята изразителност и разделителна способност, като често създават размазани или непълни форми.
Генерирайте 3D модели с помощта на Shap-E на OpenAI
Shap-E е впечатляваща демонстрация на силата на AI за създаване на 3D съдържание от естествен език или изображения. С него можете да създавате 3D обекти за компютърни игри, интерактивни VR преживявания, прототипи и други цели. Въпреки че няма гаранции относно качеството на изхода, AI моделът ви предоставя бърз и ефективен начин да създадете 3D модел на всичко.
Освен това, този AI модел е важен принос в пространството за дълбоко обучение и вероятно ще доведе до бъдещи напреднали иновации и творения.