3D ModelingAIDecision MakerExecutive interviewOttimizzazione topologicaSoftware AM

L’era della generazione 3D secondo Sienna Hwang, CMO di Tripo

Dalla SF Tech Week di San Francisco e dal Tripothon, la cofondatrice di Tripo AI ha illustrato le principali novità di P2.0, l’ultimo foundation model nativo 3D dell’azienda, e il ruolo dei workflow agentici come Astra di OpenAI

Stay up to date with everything that is happening in the wonderful world of AM via our LinkedIn community.

Sienna Huang aveva 23 anni quando Simon Song, fondatore e CEO di Tripo AI, le chiese di avviare insieme a lui un’azienda che rendesse la creazione 3D accessibile a tutti. Song aveva cofondato l’azienda cinese di intelligenza artificiale MiniMax dopo aver lavorato in SenseTime. Huang invece era stata producer in Tencent Games, dove il suo team creava contenuti per VTuber in 3D e gestiva la virtual production in Unreal Engine, prima di cofondare Mindverse, un’azienda specializzata in modelli linguistici di grandi dimensioni. “Mi chiese se volessi fondare una nuova azienda per democratizzare la creazione 3D”, ha raccontato Huang. Lei ha accettato senza esitare.

Sienna Hwang, cofondatrice e CMO di VAST.

L’azienda divenne VAST, fondata nel 2023 e oggi sviluppatrice di Tripo AI, una delle piattaforme di generazione 3D con l’AI più utilizzate al mondo. Huang, tra i membri fondatori e oggi Chief Marketing Officer di Tripo, ha parlato con VoxelMatters durante la SF Tech Week di San Francisco, pochi giorni prima che Tripo portasse all’evento la tappa californiana di Tripothon S1, il suo hackathon dedicato al world building. Al centro della conversazione: il nuovo modello Tripo P2.0, l’arrivo nel 3D di modelli generalisti come GPT-6 Astra di OpenAI e il passaggio dei contenuti 3D generati con l’AI dagli schermi ai prodotti fisici.

Da Tencent alla generazione 3D

Nei primi tempi di Tripo, Huang si occupava di prodotto, operations, business e marketing. “Il mio compito principale era capire come portare sul mercato una tecnologia nuovissima e tradurre tutti i termini tecnici, in modo che le persone capissero cos’è la generazione 3D”, ha spiegato. Con la crescita dell’azienda, la sua attenzione si è spostata sull’introduzione della tecnologia in settori specifici, attraverso la localizzazione e soluzioni dedicate per stampa 3D, gaming, design industriale, architettura e molto altro. Oggi il suo team si occupa di marketing, branding e comunicazione, e lei è responsabile anche dei ricavi e della crescita degli utenti.

Passa ancora gran parte del suo tempo con clienti, creator e influencer. “Mi definisco la chief customer service officer”, ha detto, spiegando che sono gli utenti stessi a mostrarle i loro workflow reali, così che lei possa riportare quei casi ai team di prodotto e di ingegneria di Tripo.

La velocità dei progressi ha sorpreso persino i fondatori. Già nel 2020 e nel 2021, in Tencent, il team di Huang aveva testato workflow basati sull’AI per sintesi vocale, audio e generazione di immagini, ma niente per il 3D. “Quando abbiamo fondato Tripo AI, pensavamo che una tecnologia di questo livello sarebbe arrivata intorno al 2030”, ha detto. “È arrivata molto prima del previsto.”

Prima di tutto, la topologia

Tripo P2.0 è l’ultima versione del modello Smart Mesh dell’azienda e la prima a generare nativamente una topologia a quad. Mantiene l’output a triangoli, portando il budget dai 500-20.000 facce di P1.0 a 500-50.000 facce, e aggiunge mesh a quad da 500 a 25.000 facce. Durante la generazione, il modello separa inoltre corpo, abbigliamento e accessori in parti indipendenti, accetta fino a quattro viste di riferimento (frontale, sinistra, destra e posteriore) e può produrre in un solo passaggio fino a quattro varianti con numeri di facce diversi, allo stesso costo in crediti. La generazione richiede in genere dai 10 ai 40 secondi, a seconda del polycount.

Huang ha spiegato perché la topologia è stata finora il principale ostacolo tra il 3D generato con l’AI e l’uso in produzione. “La topologia è il modo in cui è organizzata la superficie di un modello 3D, cioè come si collegano vertici, spigoli e facce”, ha detto. “Questa struttura conta quando si vuole modificare una forma, animarla o farla passare attraverso una pipeline di produzione. Se si vuole modificare qualcosa in Blender, Maya o 3ds Max, la topologia è fondamentale. Un modello può sembrare convincente in anteprima, ma richiedere comunque molto tempo per essere modificato o adattato.” P2.0 sposta questa struttura direttamente nella fase di generazione. “Per questo definiamo P2.0 ‘production-ready’: i creator non devono intervenire molto dopo aver generato i loro contenuti 3D con questo modello”, ha aggiunto.

P2.0 introduce anche Mesh Edit, che permette di selezionare un’area del modello e rigenerare solo quella, lasciando intatto il resto. Huang ha ricordato che la versione ufficiale di P2.0 è stata rilasciata a settembre.

Per chi punta a ottenere un oggetto stampato, però, la topologia è solo una parte del quadro. “Per la stampa, la topologia è uno dei tasselli. Servono anche lo spessore delle pareti, una superficie chiusa e le dimensioni corrette, che vanno ancora verificate da una persona”, ha spiegato Huang. Tripo risponde a queste esigenze con una linea di modelli distinta. “P2.0 è pensato soprattutto per l’editabilità nella produzione virtuale. La serie H ha una densità geometrica e una fedeltà più elevate, quindi è la più adatta alla stampa 3D”, ha detto. “Offriamo funzioni diverse nelle diverse serie di modelli, così le aziende del settore della stampa 3D possono integrarle tutte nelle proprie pipeline.”

Per questo pubblico la velocità conta quanto la struttura. Molti sviluppatori del settore della stampa 3D realizzano le proprie app basandosi sull’API di Tripo, ed è proprio la rapidità di generazione a rendere questi workflow utilizzabili per i loro clienti finali.

Al fianco dei leader mondiali della stampa 3D

Huang ha descritto tre livelli di clienti nel settore della stampa 3D e della produzione. Il primo, tra i più importanti per Tripo, è quello dei produttori di stampanti come Bambu Lab, Creality e Snapmaker, che sviluppano le proprie macchine e le proprie community di creator. “Integrano l’API di Tripo nelle loro community, così i creator possono generare modelli 3D e poi stamparli”, ha spiegato. In questo modello B2B2C le richieste sono molto specifiche. Bambu Lab, per esempio, ha chiesto a Tripo modelli più adatti alla stampa 3D e template pronti all’uso (lampade e personaggi) pensati per i contenuti generati dagli utenti. “Velocità, editabilità e fedeltà sono tutte molto importanti per il settore”, ha detto Huang.

Il secondo livello comprende aziende che possiedono stampanti o vendono materiali, ma non dispongono di risorse di design. Alcune hanno team di progettazione di meno di cinque persone e devono comunque creare prodotti da vendere in tutto il mondo: per questo usano Tripo Studio, spesso nella versione per team, per iterare visivamente sul design dei prodotti invece di lavorare tramite l’API.

Il terzo livello riguarda appassionati, creator indipendenti e studenti. Tripo collabora con università prestigiose, con progetti in corso con la New York University, la Duke University e la University of Southern California, dove i foundation model 3D e l’API di Tripo vengono impiegati nella produzione cinematografica, nello sviluppo di progetti AR/VR e in applicazioni web. “La maggior parte di loro cerca il modo di integrare Tripo nel proprio workflow”, ha detto Huang. “I requisiti di validazione sono molto importanti, e lo è anche la velocità.”

I workflow agentici arrivano al 3D

GPT-6 Astra di OpenAI è entrato nel 3D scrivendo codice CAD e utilizzando software come Blender: ha ottenuto il 95,9% nel benchmark BenchCAD e ha dimostrato di poter creare, a partire da un prompt, scene complesse come una casa costruita in Blender o un gioco di corse con i kart. Huang descrive la sovrapposizione con Tripo come limitata e le opportunità come in gran parte complementari, a partire da come Tripo vede sé stessa. “Tripo è un’azienda di foundation model”, ha detto. “Il foundation model nativo 3D è una delle nostre capacità, ma non l’unica.”

Tripo organizza la propria ricerca in quella che Huang chiama una matrice di modelli, articolata in quattro categorie. La prima, generare e simulare, comprende i foundation model 3D delle serie P e H. La seconda, comprendere e prevedere, includerà un modello di comprensione del 3D. La terza, pianificare ed eseguire, riguarda un modello agentico 3D. La quarta, costruire ed evolvere, comprende il lavoro sui world model annunciato da Tripo a maggio, Project Eden, un’anteprima di ricerca su ambienti persistenti e modificabili. Questa roadmap segue l’obiettivo di lungo periodo descritto dal Chief Scientist di Tripo, il dottor Yanpei Cao: modelli in grado di comprendere e generare ambienti 3D e di interagire con essi.

Secondo Huang, i due approcci rispondono a esigenze diverse. “Astra può generare codice CAD, utile quando servono dimensioni e vincoli espliciti”, ha spiegato. “La generazione di mesh è utile invece per esplorare forme complesse, personaggi e idee visive.” Per una lampada personalizzata, per esempio, un designer potrebbe esplorare la forma scultorea in Tripo e poi definire incastri e dimensioni in CAD. “Agli utenti interessa poter combinare i workflow e ottenere risultati utili con meno attriti”, ha detto.

Tripo ha sperimentato per la prima volta la generazione procedurale guidata da agenti con un’integrazione Blender MCP nel 2024. Oggi offre un’API e un’integrazione con Claude, oltre ai collegamenti con Blender, Unreal Engine e gli slicer. “Un agente potrebbe interpretare una richiesta, chiamare Tripo per creare un asset e poi aiutare a posizionarlo in un altro strumento”, ha spiegato Huang. “Ma può trattarsi anche di un compito molto più piccolo, come generare un singolo oggetto mancante in una scena esistente. Ogni integrazione ha le sue capacità, quindi l’affidabilità nei passaggi da uno strumento all’altro è importante.”

Tripo ha pubblicato un proprio confronto tra P2.0 e Astra su compiti image-to-3D equivalenti, con Astra al lavoro tramite un workflow Blender MCP. In tre test registrati, P2.0 ha generato ogni asset con texture in 26 secondi a circa 1,20 dollari, mentre Astra ha impiegato da 24 minuti e 17 secondi a 47 minuti e 46 secondi, con un costo stimato, in termini di API, da 7,81 a 8,81 dollari. Gli asset di Tripo sono risultati più fedeli alle immagini di riferimento, con una distribuzione della mesh e layout UV più puliti, mentre Astra ha dato un valore aggiunto maggiore nel posizionamento degli oggetti, nella gestione dell’illuminazione e nella costruzione della logica di gioco attorno agli asset esistenti. Il workflow consigliato da Tripo combina i due strumenti: Tripo per creare e perfezionare gli asset, Astra per assemblare la scena e aggiungere l’interazione.

Alla domanda su cosa renda Tripo più adatta dei concorrenti ai workflow agentici, Huang ha indicato tre fattori. Il primo è la velocità. “Chi usa Codex o GPT non dovrebbe aspettare a lungo un modello”, ha detto. Il secondo è la comprensione: un modello 3D in grado di riconoscere e separare le parti di un oggetto permette a un agente di pianificare, eseguire e modificare ogni elemento. “È una capacità di un foundation model nativo 3D, non di Astra”, ha precisato Huang. Il terzo è lo sviluppo diretto di agenti. “Oltre ad Astra che chiama l’API di Tripo, costruiremo un nostro agente”, ha detto. “Vogliamo raccogliere il feedback di chi usa Astra con Tripo per svilupparlo.”

Tripothon: la corsa al 3D è partita

Tripo ha lanciato Tripothon S1 ad agosto con una call internazionale, presentandolo come il primo hackathon di world building per sviluppatori, artisti, studenti e creator indipendenti. La competizione si svolge sia online sia in presenza, con cinque eventi regionali tra Asia, Americhe ed Europa. La partecipazione è gratuita e i concorrenti si contendono un montepremi globale di 80.000 dollari. Oltre 2.000 team da 78 paesi hanno presentato i propri progetti in cinque categorie: giochi, cinema ed effetti visivi, VR/XR/AR, app e design fisico.

Il tema chiede ai partecipanti di costruire un mondo e regalarlo a “una persona, una città o un futuro che ancora non esiste”. All’evento di San Francisco, oltre 60 team composti da una a tre persone hanno presentato le proprie interpretazioni alla giuria e a un pubblico di più di 800 partecipanti. I progetti spaziavano da un biglietto d’auguri digitale che si espande in un mondo interattivo popolato da capibara a cuccioli virtuali che vivono dentro un gioiello indossabile.

 

La creazione fisica aveva una categoria tutta sua, ed era quella che Huang, prima dell’evento, diceva di seguire con più attenzione. “Quello che mi interessa in questa categoria è vedere se qualcuno ha realizzato la versione fisica, l’ha testata e ha validato il design con Tripo”, ha detto. “Vogliamo esempi che usino Tripo per progettare, iterare e poi produrre un prototipo stampato.” Al momento dell’intervista, contava tra i dieci e i venti team di San Francisco al lavoro sul design fisico.

I progetti di stampa 3D presentati spaziavano dalla moda all’arte fino ai dispositivi medici. Le nail art stampate in 3D della “Soft Chaos Collection” di Ziyuan Zhou hanno vinto il premio Best Use of HeyGears, legato all’omonimo produttore cinese di stampanti 3D a resina. Due gruppi della Stanford University, il DeSimone Lab e il Santiago Lab, hanno condiviso un tavolo per mostrare dispositivi stampati in 3D ad alta risoluzione. Il DeSimone Lab ha presentato Segmented Projection Image traNslation (SPIN), una strategia di stampa basata sulla Continuous Liquid Interface Production (CLIP) che amplia l’area di proiezione effettiva senza perdere risoluzione: un modello stampato dello skyline di Manhattan mostrava la stessa stampante passare da circa 10 a oltre 50 edifici. Il Santiago Lab ha invece mostrato un inserto microfluidico stampato in 3D, che si inserisce in una comune provetta per PCR per separare, concentrare e rilevare il DNA in un unico dispositivo compatto.

A fine serata sono stati assegnati sette premi, con quasi 14.000 dollari distribuiti tra i vincitori. “Oggi ci sono tantissimi progetti incredibili, e il livello di creatività e di realizzazione è altissimo”, ha commentato il dottor Cao. Nella settimana successiva sono seguite altre tappe regionali del Tripothon a San Paolo e Seul.

Tripothon SF: vincitori e progetti da ricordare

Il primo premio a San Francisco è andato a Halls of History di Annette Lapham (categoria Game, 5.000 dollari), un gioco in cui ogni stanza è stata costruita con Gaussian splat tramite Marble di World Labs e in cui l’API di Tripo diventa una meccanica di gioco: genera manufatti unici che i giocatori devono cercare in base alle conversazioni con personaggi doppiati tramite ElevenLabs e LiveKit.

Dear Little Me di Dulce Baerga (VR/XR/AR, 3.500 dollari) si è classificato secondo e Space Archaeology di Yichi Zhang (VR/XR/AR, 2.200 dollari) terzo. Realm Rivals Duel di Lucca C. ha vinto il premio Best Use of Tripo (800 dollari), mentre Slop Blindbox Collectible di Jennifer Jing si è aggiudicato il premio Best Use of World Labs, combinando la generazione multivista, il rigging e l’animazione di Tripo con i mondi di World Labs, Codex con GPT-6 Astra e Figma. Tra gli altri progetti presentati c’era anche Yokai Moving Co. di Ali Razfar, un gioco in cui bisogna convincere gli oggetti di casa a salire su un camion dei traslochi prima che scada il tempo.

Sul fronte fisico, la collezione di nail art stampata in 3D di Ziyuan (Zoey) Zhou ha vinto il premio Best Use of HeyGears (800 dollari). Due laboratori della Stanford University hanno mostrato fin dove può arrivare la stampa 3D ad alta risoluzione in medicina: il DeSimone Lab ha esposto microaghi stampati con tecnologia CLIP, dotati di canali microfluidici integrati e pensati come alternativa indolore alle tradizionali iniezioni di vaccini, insieme alla sua strategia di stampa SPIN, mentre l’inserto per provette PCR stampato in 3D del Santiago Lab ha estratto e rilevato in 60 minuti frammenti genici di SARS-CoV-2 aggiunti a siero umano. L’Anima Ring di Linzhi Wang unisce moda ed elettronica: un anello stampato in 3D che ospita un microcontrollore ESP32-C3, un micro schermo LCD, sensori e feedback aptico, e al cui interno vive un cucciolo digitale controllato con i gesti, trasformando un accessorio di moda in un dispositivo interattivo. Poiché il guscio dell’anello può essere sostituito mantenendo la stessa elettronica, il team ha usato Tripo per trasformare in pochi minuti le idee di forma in modelli 3D e confrontarle, prima di perfezionare in CAD le migliori.

Oltre lo schermo

Il programma di Tripo a San Francisco comprendeva anche un panel sull’AI creativa dal titolo “The New Creator Stack: Where 3D, Video & Creative AI Meet”, con Ahmed Ahres di Reactor, Siqi He di Pika AI, Tony Pu di Kling AI e Aiko Dai, US global marketing manager di Tripo. I relatori si sono trovati d’accordo sul fatto che gli strumenti di AI debbano comprendere meglio il modo in cui collaborano i direttori creativi e i loro team, e che il racconto delle storie resti una competenza umana. Huang vede la generazione 3D e quella video come strettamente collegate. I modelli video possono produrre contenuti promozionali e animati che la generazione 3D non è in grado di realizzare, per esempio il video di un prodotto che viene poi stampato in 3D. Nella direzione opposta, aziende di generazione video come Kling e Seedance stanno aggiungendo modalità guidate dal 3D per migliorare la coerenza, e secondo Huang diverse di loro hanno integrato l’API di Tripo proprio a questo scopo. “La generazione 3D offre controllabilità e coerenza alla generazione video”, ha detto.

EdenLive

I keynote del pomeriggio si sono concentrati sui world model, in vista del lancio di EdenLive da parte di Tripo. Yihua di World Labs ha presentato Atlas, il world model di nuova generazione dell’azienda, e Jimei Yang di Runway ha illustrato Solaris, un world model per interfacce che genera interfacce interattive fotogramma per fotogramma, senza codice tradizionale. Nel suo keynote, il dottor Cao ha sostenuto che gli agenti possono sembrare in grado di “risolvere il 3D”, ma hanno ancora bisogno dei creator umani per riconoscere e descrivere un’idea prima che si possa scrivere il codice. “Tutto è nato da un’idea, ma prima realizzarla poteva richiedere troppo tempo o troppa fatica. Oggi, se riusciamo a descriverla, abbiamo strumenti capaci di trasformare un’idea passeggera in qualcosa di reale”, ha detto.

Nello sviluppo di videogiochi, la ricerca di Tripo sui world model punta a generare non solo asset, ma anche gameplay, logica ed esperienze interattive. Nel cinema e nella virtual production, Huang vede i modelli 3D aggiungere editabilità e controllo se combinati con la generazione video.

Guardando al futuro, Tripo intende continuare a migliorare geometria, velocità, controllabilità ed editabilità delle serie P e H, e rilasciare il suo modello di comprensione del 3D, il suo modello agentico e il suo world model. Sul fronte commerciale, l’azienda lavora costantemente a soluzioni di settore sempre migliori per gaming, virtual production e stampa 3D, insieme a una localizzazione più approfondita per Stati Uniti, Giappone, Corea ed Europa. “Abbiamo risolto molti problemi”, ha detto Huang, “ma ce ne sono ancora tanti da risolvere.”

Articoli Correlati

Lascia un commento

Il tuo indirizzo email non sarà pubblicato. I campi obbligatori sono contrassegnati *

Pulsante per tornare all'inizio