在虛擬現(xiàn)實(shí)、元宇宙技術(shù)快速發(fā)展的背景下，三維虛擬內(nèi)容創(chuàng)作的高成本與低效率問(wèn)題一直是行業(yè)痛點(diǎn)。近日，浙江大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院博士研究生、魔芯科技陳天潤(rùn)帶領(lǐng)團(tuán)隊(duì)，依托浙江大學(xué)鯤鵬昇騰科教創(chuàng)新卓越中心提供的算力支持，實(shí)現(xiàn)了基于昇騰平臺(tái) NPU 的首個(gè)三維模型生成算法模型 Img2CAD 的開發(fā)。cVS28資訊網(wǎng)——每日最新資訊28at.com

該研究成果的核心突破之一在于破解了用生成模型得到腳本語(yǔ)言對(duì)三維結(jié)構(gòu)的精準(zhǔn)表達(dá)，讓稀疏抽象的草圖、圖片等多模態(tài)輸入能被通過(guò) Transformer 結(jié)構(gòu)高效“翻譯”為三維幾何信息，不需要可微渲染器，能夠完整在 NPU 上實(shí)現(xiàn)訓(xùn)練和高效推理，無(wú)需大量 Vector 算力 —— 并最終得到能被 3D 打印、CNC 制造加工、數(shù)字世界展覽展示的高精度 3D 模型，可直接導(dǎo)入現(xiàn)有 CAD 軟件中進(jìn)行編輯。其中昇騰加速套件 MindSpeed 提供了關(guān)鍵支撐，該工具支持多類型數(shù)據(jù)加載構(gòu)建，可靈活適配多模態(tài)數(shù)據(jù)的異構(gòu)特征，保障了視覺大模型與腳本語(yǔ)言表示模塊的高效協(xié)同。cVS28資訊網(wǎng)——每日最新資訊28at.com

與此同時(shí)，通過(guò)算法模型結(jié)構(gòu)的優(yōu)化，團(tuán)隊(duì)實(shí)現(xiàn)了三維生成的即時(shí)交互建模。CANN 算子庫(kù)能充分發(fā)揮 NPU 的并行計(jì)算能力和高效內(nèi)存訪問(wèn)機(jī)制，能大幅減少計(jì)算延遲和通信開銷，進(jìn)一步提升模型推理速度，使系統(tǒng)能夠快速響應(yīng)用戶輸入的草圖或圖片，為實(shí)際落地場(chǎng)景中構(gòu)建流暢的實(shí)時(shí) 3D 交互建模體驗(yàn)提供了堅(jiān)實(shí)的技術(shù)保障。cVS28資訊網(wǎng)——每日最新資訊28at.com

該項(xiàng)目開發(fā)的三維生成方法能夠用于 3D 數(shù)據(jù)資產(chǎn)的構(gòu)建，并服務(wù)于 KOKONI 3D 打印機(jī)等應(yīng)用場(chǎng)景，為數(shù)字制造、AR / VR 相關(guān)產(chǎn)業(yè)提供了高效的內(nèi)容創(chuàng)作解決方案。目前，項(xiàng)目已完成 3 篇成果論文，包括 1 篇中科院 1 區(qū)期刊論文和 2 篇 CCF-A 類會(huì)議論文，相關(guān)成果已在部分場(chǎng)景實(shí)現(xiàn)商業(yè)化落地，并將持續(xù)帶動(dòng)昇騰的澎湃算力在三維數(shù)字化產(chǎn)業(yè)應(yīng)用。cVS28資訊網(wǎng)——每日最新資訊28at.com

此次跨模態(tài)可控三維生成技術(shù)的突破，不僅是浙江大學(xué)鯤鵬昇騰科教創(chuàng)新卓越中心在產(chǎn)學(xué)研融合上的一次成功實(shí)踐，更標(biāo)志著智能三維內(nèi)容創(chuàng)作邁入“低門檻、高效率、高質(zhì)量”的新階段。未來(lái)，隨著技術(shù)的持續(xù)迭代，Img2CAD 相關(guān)模型將為工業(yè)設(shè)計(jì)、數(shù)字文創(chuàng)、AR / VR 等千行百業(yè)注入創(chuàng)意動(dòng)能，推動(dòng)虛擬與現(xiàn)實(shí)世界的融合邊界不斷拓展。cVS28資訊網(wǎng)——每日最新資訊28at.com

cVS28資訊網(wǎng)——每日最新資訊28at.com

本文鏈接：http://m.www897cc.com/showinfo-26-175540-0.html昇騰賦能三維生成新突破！浙大團(tuán)隊(duì)實(shí)現(xiàn)跨模態(tài)可控 3D CAD 建模

聲明：本網(wǎng)頁(yè)內(nèi)容旨在傳播知識(shí)，若有侵權(quán)等問(wèn)題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系，我們將在第一時(shí)間刪除處理。郵件：2376512515@qq.com

上一篇： 倍思推出“倍安心”安全用電保障計(jì)劃：充電寶 730 天內(nèi)因質(zhì)量問(wèn)題發(fā)生燃爆，可給予賠付

下一篇： 京東養(yǎng)車回應(yīng)“震虎價(jià)”構(gòu)成不正當(dāng)競(jìng)爭(zhēng)：推 50 億補(bǔ)貼并重獎(jiǎng)?wù)骷旅?/a>