Mikä on OpenAI: n Shap-E ja mitä se voi tehdä?

Tekoälyn (AI) tutkimus- ja käyttöönottoyritykset, kuten OpenAI, julkaisevat jatkuvasti ominaisuuksia ihmiskunnan hyödyksi. ChatGPT: n, DALL-E: n, Point-E: n ja muiden menestyneiden työkalujen lisäksi OpenAI on julkaissut Shap-E: n, uuden innovatiivisen mallin.

Joten mikä on OpenAI: n Shap-E, ja mitä se voi auttaa sinua?

Mikä on OpenAI: n Shap-E?

Toukokuussa 2023 Alex Nichol ja Heewon Jun, OpenAI: n tutkijat ja avustajat, julkaisivat paperi, jossa kerrotaan Shap-E, yhtiön uusin innovaatio. Shap-E on uusi työkalu, joka on koulutettu massiiviseen parillisten 3D-kuvien ja tekstin tietojoukkoon, joka voi luoda 3D-malleja tekstistä tai kuvista. Se on samanlainen kuin DALL-E, joka voi luoda 2D-kuvia tekstistä, mutta Shap-E tuottaa 3D-resursseja.

Shap-E on koulutettu ehdolliseen diffuusiomalliin ja 3D-omaisuuden kartoitukseen. 3D-resurssien kartoitus tarkoittaa, että Shap-E oppii yhdistämään tekstiä tai kuvia vastaaviin 3D-malleihin suuresta olemassa olevien 3D-objektien tietojoukosta. Ehdollinen diffuusiomalli on generatiivinen malli, joka alkaa kohdelähdön kohinaisesta versiosta ja jalostaa sitä vähitellen poistamalla kohinaa ja lisäämällä yksityiskohtia.

Yhdistämällä nämä kaksi komponenttia Shap-E voi luoda realistisia ja erilaisia ​​3D-malleja, jotka vastaavat annettua teksti- tai kuvasyöttöä ja joita voidaan tarkastella eri kulmista ja valaistusolosuhteista.

Kuinka voit käyttää OpenAI: n Shap-E: tä

Shap-E: tä ei ole julkaistu muiden OpenAI-työkalujen tapaan, mutta sen mallipaino, päätelmäkoodi ja näytteet ovat ladattavissa Shap-E GitHub sivu.

Voit ladata Shap-E-koodin ilmaiseksi ja asenna se Python pip -komennolla tietokoneellasi. Tarvitset myös NVIDIA GPU: n ja korkean suorituskyvyn suorittimen, koska Shap-E on erittäin resurssiintensiivinen.

Avaa asennuksen jälkeen luomasi 3D-kuvat Microsoft Paint 3D: llä. Samoin voit muuntaa kuvat STL-tiedostoiksi jos haluat tulostaa ne 3D-tulostimilla.

Voit myös ilmoittaa ongelmista ja löytää ratkaisuja muiden jo esiin nostamiin ongelmiin Shap-E GitHub -sivulla.

Mitä voit tehdä OpenAI: n Shap-E: llä

Shap-E: n avulla voit kuvata monimutkaisia ​​ideoita käyttämällä ideoiden visuaalista esitystä. Tämän tekniikan potentiaaliset sovellukset ovat rajattomat, varsinkin kun visuaalisilla kuvilla on yleensä paljon ulottuvampia tehosteita kuin teksteillä.

Arkkitehtina voit luoda Shap-E: n avulla 3D-malleja rakennuksista ja rakenteista kirjallisten kuvausten perusteella. Voit määrittää rakenteiden mitat, materiaalit, värit ja tyylit yksinkertaisilla lauseilla. Voit esimerkiksi pyytää sitä seuraavasti: "Tee pilvenpiirtäjä, jossa on 60 kerrosta ja lasikaiteet" ja viedä tulokset muihin ohjelmistoihin jatkomuokkausta varten, jos pidät tuloksista.

Pelaajat ja animaatiotaiteilijat voivat parantaa virtuaaliympäristöjä ja visuaalisia kokemuksia luomalla yksityiskohtaisia ​​3D-objekteja ja -hahmoja. Suunnittelussa osaat kuvata koneiden ja laitteiden komponentteja, spesifikaatioita ja toimintoja ja saada tulokset 3D-malleina ennen fyysisten prototyyppien luomista.

Lisäksi Shap-E voi auttaa opettajia viestimään monimutkaisia ​​ja abstrakteja ideoita opiskelijoilleen esimerkiksi koulutuksen kaltaisilla aloilla biologian, geometrian ja fysiikan kaltaisista aiheista.

Vaikka Shap-E on vielä keskeneräinen, se on askeleen OpenAI: ta edellä PISTE-E, joka tuottaa 3D-pistepilviä tekstikehotteiden perusteella. Pistepilvien ilmaisukyky ja resoluutio ovat rajalliset, ja ne tuottavat usein epäselviä tai epätäydellisiä muotoja.

Luo 3D-malleja OpenAI: n Shap-E: n avulla

Shap-E on vaikuttava osoitus tekoälyn voimasta luoda 3D-sisältöä luonnollisesta kielestä tai kuvista. Sen avulla voit luoda 3D-objekteja tietokonepeleihin, interaktiivisiin VR-kokemuksiin, prototyyppeihin ja muihin tarkoituksiin. Vaikka tulosteen laadusta ei ole takeita, tekoälymalli tarjoaa sinulle nopean ja tehokkaan tavan luoda 3D-malli mistä tahansa.

Lisäksi tämä tekoälymalli on tärkeä panos syvään oppimistilaan ja johtaa todennäköisesti tuleviin edistyneisiin innovaatioihin ja luomuksiin.