生成式人工智能正在重塑價億美元的產業,而英偉達公司作為智能機器人領域的領跑者,正在抓住這一機遇。 英偉達?(NVIDIA?)機器人與邊緣計算副總裁Deepu Talla在今天的CES展前特別演講中詳細介紹了英偉達?(NVIDIA?)及其合作伙伴如何將人工智能與機器人技術相結合。
英偉達?(NVIDIA?)機器人與邊緣計算事業部副總裁 Deepu Talla 詳細介紹了英偉達?(NVIDIA?)及其合作伙伴如何將生成式人工智能與機器人技術結合在一起。
Talla說:"人工智能驅動的自主機器人正被越來越多地用于提高效率、降低成本和解決勞動力短缺問題。"
參與創造
英偉達從一開始就一直是生成式人工智能革命的核心。十年前,英偉達創始人兼首席執行官黃仁勛親手將第一臺英偉達 DGX AI 超級計算機交付給 OpenAI?,F在,得益于 OpenAI 的 ChatGPT,生成式人工智能已成為當代發展最快的技術之一。
而這一切才剛剛開始
Talla 預測,生成式人工智能的影響將超越文本和圖像生成,進入家庭和辦公室、農場和工廠、醫院和實驗室。關鍵在于LLM 類似于大腦的語言中心,將讓機器人更自然地理解和響應人類的指令。這些機器將能夠不斷地向人類學習、相互學習以及向周圍的世界學習。
Talla說:"鑒于這些特性,生成式人工智能非常適合機器人技術。"
機器人如何使用生成式人工智能
Agility Robotics、NTT 和其他公司正在將生成式人工智能融入機器人,幫助它們理解文本或語音命令。Dreame Technology 公司的機器人吸塵器正在生成式人工智能模型創建的模擬生活空間中接受訓練。而 Electric Sheep 公司正在開發一種用于自動割草的世界模型。
英偉達?(NVIDIA?)的技術,如英偉達?(NVIDIA?)Isaac和Jetson平臺,為開發和部署人工智能機器人提供了便利,目前已有120多萬開發人員和1萬多家客戶與合作伙伴依賴這些技術。
其中許多公司都參加了本周的 CES,包括 Analog Devices、Aurora Labs、Canonical、Dreame Innovation Technology、DriveU、e-con Systems、Ecotron、Enchanted Tools、GluxKind、Hesai Technology、Leopard Imaging、Segway-Ninebot、Nodar、Orbbec、Qt Group、Robosense、Spartan Radar、TDK Corporation、Telit、Unitree Robotics、Voyant Photonics 和 ZVISION Technologies Co.
兩個大腦勝過一個大腦
在 CES 的演講中,Talla 展示了在機器人技術中部署人工智能所必需的雙計算機模型(如下圖),展示了英偉達在人工智能開發和應用方面的綜合方法。
第一臺計算機被稱為 "人工智能工廠",是創建和不斷改進人工智能模型的核心。AI 工廠利用英偉達數據中心計算基礎設施以及 AI 和 NVIDIA Omniverse 平臺來模擬和訓練 AI 模型。
第二臺計算機代表機器人的運行環境
運行環境因應用而異:它可以位于云端或數據中心;也可以位于內部服務器中,用于半導體制造中的缺陷檢測等任務;還可以位于配備多個傳感器和攝像頭的自主機器中。
生成優質資產和場景
Talla 還強調了 LLM 在打破技術壁壘方面的作用,它將普通用戶轉變為技術藝術家,能夠創建復雜的機器人工作單元或整個倉庫模擬。
利用英偉達畢加索(NVIDIA Picasso)等生成式人工智能工具,用戶可以根據簡單的文本提示生成逼真的三維資產,并將其添加到數字場景中,從而創建動態、全面的機器人訓練環境。同樣的功能還可以擴展到在 Omniverse 中創建各種物理上精確的場景,從而增強機器人的測試和培訓,確保其在現實世界中的適用性。
這與生成式人工智能在重新配置機器人部署方面的變革潛力不謀而合。傳統上,機器人是為特定任務而專門制造的,而為不同任務修改機器人則是一個耗時的過程。 但 LLM 和視覺語言模型的進步正在消除這一瓶頸,通過自然語言與機器人進行更直觀的互動。 這種適應能力強、能感知周圍環境的機器很快就會遍布全球。
VIDIA(Nvidia Corporation,/?n?v?di?/;中國臺灣與香港繁中名為輝達,中國大陸簡中名為英偉達),創立于1993年1月,是一家以設計和銷售圖形處理器為主的無廠半導體公司。NVIDIA亦會設計游戲機核心,例如Xbox和PlayStation。NVIDIA最出名的產品線是為個人與游戲玩家所設計的GeForce系列,為專業CGI工作站而設計的Quadro系列,以及為服務器和高效運算而設計的Tesla系列,雖然起家于PC電腦的顯卡業務,英偉達也曾涉及移動芯片Tegra的設計,但智能機市場對此響應不大,不過近年卻利用這些研發經驗,目前朝向人工智能和機器視覺的市場發展,也是圖形處理器上重要的開發工具CUDA的發明者。不過NVIDIA的發展過程也是非議不斷,批評多集中于濫用排他性商業合作、不正當營銷方式、對業界開放標準和自由軟件運動的拒斥等。
NVIDIA的總部設在美國加利福尼亞州的圣克拉拉位于硅谷的中心位置。
歷史
NVIDIA創辦人兼首席執行官兼總裁黃仁勛
黃仁勛、克里斯·馬拉科夫斯基和卡蒂斯·普里姆于1993年4月美國加州創辦了NVIDIA(隨后成為特拉華州企業)。NVIDIA保持低調到1997-1998年,當時它發布了RIVA個人電腦繪圖處理器產品線。并于1999年1月在納斯達克掛牌上市;同年5月,售出第一千萬個繪圖處理器。于2000年收購了一代王者3dfx的知識產權。3dfx是1990年代中期其中一間最大的圖形處理器廠商。NVIDIA與許多OEM廠商,和一些組織創建起密切關系,最知名的包括臺積電。2002年2月,NVIDIA售出第一億個繪圖處理器。
目前NVIDIA和AMD供應了市場上大部分獨立顯卡。NVIDIA最著名的GeForce繪圖處理器產品線于1999年首次亮相?,F在GeForce產品線已經擴展至桌面型和筆記本電腦。移動設備方面,NVIDIA擁有Tegra產品線。它能提供高性能,同時保持低電源消耗。此類產品通常用于無線通信設備。
2020年4月 27日,NVIDIA宣布已完成對Mellanox Technologies, Ltd.(邁絡思科技有限公司)的收購,成交價70億美元。
2020 年 7 月,有報導稱英偉達正在與軟銀談判以 320 億美元收購英國芯片設計公司安謀。 2020 年 9 月 13 日,英偉達宣布將以 400 億美元的價格從軟銀集團手中收購 Arm Holdings,但須接受通常的審查,后者保留英偉達 10% 的股份。
2021年6月11日,英偉達宣布收購自動駕駛汽車高清地圖開發商 DeepMap, Inc.。
產品制造
作為一家無晶圓IC半導體設計公司,NVIDIA于自己的實驗室研發芯片,但將芯片制造工序分包給晶圓代工廠。以往,NVIDIA從其他廠商,例如IBM、意法半導體、臺積電(NVIDIA目前最重要的代工合作伙伴)和聯華電子獲得硅芯片生產能力。芯片的供應鏈需涉及數間第三廠:制造完畢的晶圓由集成電路封裝廠進行初步測試與封裝作業,之後交由測試廠的測試部門進行深度測試并根據性能分類。依據存貨清單,NVIDIA必須提早數月訂購芯片,并將之存儲起來等待使用。
在最終產品上(指顯卡、主板等),NVIDIA會推出所謂原廠“公版”(Reference)產品(稱為參考樣卡或參考模板)供展示及測試之用,早期產品是由臺灣的微星和斯博科、美國的威竣(VisionTek)和新美亞(Sanmina-SCI)、德國的埃爾莎代工,目前由新加坡的偉創力與臺灣的鴻海(富士康)、華碩和捷波代工或設計。在零售市場上,NVIDIA會把頂級型號的“原廠”公版產品給各個第三方廠商貼牌,如GeForce 7950 GX2、Quadro FX 5600、nForce 680i SLI等等,這些廠商的產品設計用料完全相同,均由一家廠商代工。在OEM市場上,亦有部分“原廠”公版產品存在。2008年后NVIDIA允許了旗艦級產品的“非公版”(Non-Reference)設計,但只有極少數有實力的廠商(如華碩、技嘉、微星、影馳等)會推出自己設計的產品。2010年10月初,NVIDIA曾透過BestBuy少量銷售由富士康代工的NVIDIA品牌“原廠”產品。
主要產品
NVIDIA的產品組合包括繪圖處理器、個人電腦平臺(主板邏輯核心)芯片組和數字媒體播放器的軟件。在Mac/PC用戶社區中,NVIDIA的"GeForce"產品線最為人熟悉。除了獨立型顯卡外,還有微軟的Xbox游戲核心和nForce主板(已停產)的核心技術,NVIDIA最近進入的領域是用于手機和平板電腦的ARM芯片,品牌為Tegra至今已推出5代。
在2004年12月,NVIDIA宣布會協助索尼設計PS3的繪圖處理器(RSX)。NVIDIA只會負責設計,Sony會負責制造該繪圖處理器。根據合約,NVIDIA會使用索尼的芯片廠(索尼和東芝)來制造RSX,并將制程提升至65納米。這與微軟的協議是互相違背的,因為NVIDIA會透過第三者制造Xbox的繪圖處理器。(其間微軟選擇了AMD去提供Xbox 360的繪圖硬件的IP設計。任天堂的GameCube和Wii亦采用ATI的繪圖處理器。)
2008年2月11日,NVIDIA發布了用于手機平臺的APX 2500應用處理器。該處理器集成了一個ARM處理器和一個顯示核心。這款處理器是由NVIDIA和微軟聯合研制,方面應用于使用Windows Mobile的電話中,提高Windows Mobile平臺的多媒體處理能力。芯片的制程是65nm,核心頻率750 MHz,并集成256KB的L2緩存。芯片亦內置GeForce核心,支持OpenGL ES 2.0和Direct3D Mobile標準。APX 2500屬于ARM架構,其低耗電設計,使手提電話可以長時間播放音樂或720p高清晰視頻。
NVIDIA于2008年12月發布了一支持Intel Atom處理器的NVIDIA ION移動平臺,主打輕薄桌面型市場,可以支持DirectX 10的內置顯示芯片性能是原本英特爾官方945GSE芯片組的5倍,讓迷你電腦也有部分游戲能力;它解決了Atom沒有GPU、無法支持高清、無法支持數字顯示、屏幕需小于10英寸、不能支持更高版本的Windows Vista的種種問題。
在2011年1月5日的CES上,NVIDIA宣布將自行設計與研發基于ARM架構的臺式機CPU,產品代號Project Denver(丹佛項目)。其處理器能夠支持微軟下一代桌面系統Windows 8以及行動平臺上的Android、蘋果iOS等。相比之前的Tegra產品,NVIDIA總裁表示這將是一顆高度定制的“ARM兼容CPU”,即獲得ARM指令集授權,但處理器微架構則完全由NVIDIA自行開發,以更高性能面向桌面、服務器甚至高性能計算市場。屆時NVIDIA基于ARM架構的處理器將在市場上與英特爾和AMD等基于X86架構的處理器直接競爭。
在GTC 2020主題演講中,NVIDIA宣布推出Ampere架構,是NVIDIA 8代GPU歷史上最大的一次性能飛躍,包含超過540億個晶體管,是有史以來最大的7納米芯片,性能相較于前代提升了高達20倍,
NVIDIA A100是首款基于NVIDIA Ampere架構的GPU,全新多實例GPU技術可將單個A100分割成最多七個獨立的GPU來處理各種計算任務;第三代NVIDIA NVLink技術能將多個GPU組合成一個巨型GPU;全新結構化稀疏功能將GPU的性能提高一倍。具有TF32的第三代Tensor Core核心 ,其功能經過擴展后加入了專為AI開發的全新TF32,它能在無需更改任何代碼的情況下,使FP32精度下的AI性能提高多達20倍。此外,Tensor Core核心現在支持FP64精度,相比于前代,其為HPC應用所提供的計算力比之前提高了多達2.5倍。
2020年,NVIDIA發布軟件開發包NVIDIA Maxine。
2025-04-13 09:00
2025-04-09 10:28
2025-04-07 09:58
2025-04-07 09:58
2025-04-07 09:58
2025-04-07 09:34
2025-04-03 08:57
2025-04-03 08:57
2025-04-03 08:57
2025-04-02 14:24