OpenAI 的 Shap-E 是什麼,它能做什麼?

OpenAI 等人工智慧 (AI) 研究和出版公司不斷推出新功能,以改善生活的方方面面並簡化日常任務。除了 ChatGPT、DALL-E、Point-E 和其他成功工具外,OpenAI 還發布了一個新的創新模型。

那麼 OpenAI 的 Shap-E 是什麼,它能為您做什麼?

OpenAI 的 Shap-E 是什麼?

2023 年 5 月,OpenAI 的研究人員和貢獻者 Alex Nichol 和 Heewon Jun 發布了 我們在一篇論文中宣布 關於 Shap-E,這是該公司最新的創新成果。 Shap-E 是一種基於海量 3D 圖像和文字配對資料集訓練而成的新模型,能夠根據文字或圖像創建 3D 模型。它與 DALL-E 類似,後者可以根據文字提示創建 2D 圖像,但 Shap-E 生成的是 3D 模型。

Shap-E 基於條件擴散模型和 3D 資產映射進行訓練。 3D 資產映射是指 Shap-E 學習從大量現有 3D 物件資料集中將文字或圖像映射到對應的 3D 模型。條件擴散模型是一種生成模型,它從目標輸出的混沌版本開始,透過消除雜訊和添加細節來逐步完善它。

透過結合這兩個組件,Shap-E 可以創建逼真且多樣化的 3D 模型,這些模型可以與文字或圖像輸入相匹配,並且可以從不同角度和多種光照條件下進行查看。查看 如何使用 OpenAI 的 Whisper for Windows 將語音轉換為文字.

如何使用 OpenAI 的 Shap-E

Shap-E 尚未像其他 OpenAI 工具那樣進行宣傳,但模型、推理程式碼和範例可在頁面上下載。 Shap-E GitHub.

您可以免費下載 Shap-E 原始碼,並使用 Python pip 命令將其安裝到您的電腦上。由於 Shap-E 佔用大量資源,您還需要 NVIDIA 圖形處理器和高效能 CPU。

安裝後,在 Microsoft Paint 3D 中開啟您建立的 3D 映像。同樣,如果您想使用 3D 列印機列印圖像,可以將圖像轉換為 STL 檔案。

您也可以在 Shap-E GitHub 頁面上報告問題並找到其他人已提出問題的解決方案。查看 選擇 3D 列印機時需要考慮的重要因素.

OpenAI 的 Shap-E 能做什麼

Shap-E 能夠讓你用思考的視覺表徵來描述複雜的想法。這項技術的潛在用途無窮無盡,尤其是考慮到視覺效果通常比文字提示更具影響力。

作為建築師,您可以使用 Shap-E 根據書面描述創建建築物和結構的 3D 模型。您可以使用簡單的句子指定尺寸、材質、顏色和樣式。例如,您可以提出請求:“創建一座帶有玻璃欄桿的 60 層摩天大樓”,並將結果匯出到其他應用程式進行進一步修改(如果您想利用獲得的結果)。

動畫師可以透過創建精細的 3D 物件和角色來增強虛擬環境和視覺體驗。在工程領域,您可以描述機器和設備的組件、規格和功能,並在創建實際原型之前在 3D 模型中將結果視覺化。

此外,即使在教育等領域,Shap-E 也可以幫助教師向生物、工程和物理等學科的學生傳達複雜而抽象的想法。

儘管這項工作仍在進行中,但 Shap-E 已經領先一步。 POINT-E OpenAI 的演算法可根據文字提示產生 3D 點雲。點雲的表現力和準確性有限,通常會產生模糊或不完整的形狀。查看 什麼是 DALL-E?如何根據文字描述生成圖像?

使用 OpenAI 的 Shap-E 建立 3D 模型

Shap-E 令人印象深刻地展示了人工智慧利用自然語言或標準圖像生成 3D 內容的能力。借助它,您可以為電腦遊戲、互動式虛擬實境體驗、原型製作和其他用途創建 3D 物件。雖然無法保證輸出質量,但這款人工智慧模型提供了一種快速且有效率的方式來創建幾乎任何物體的 3D 模型。

此外,此AI模型對深度學習領域做出了重要貢獻,未來有望引領更先進的創新和創造力。現在,您可以查看一下。 什麼是機器學習?智能演算法詳解。.

轉到頂部按鈕