Nvidia公司正在擴大其機器人和人工智能的工具,通過改進開發者和工程師用來訓練和部署工廠、辦公室和城市中的自主機器的平臺,為其提供動力。
在今年的GTC 2023(該公司的虛擬開發者大會)上,Nvidia說Omniverse Cloud將托管在微軟Azure上,這將增加對Isaac Sim的訪問,該公司的虛擬訓練環境用于開發和管理基于AI的機器人。該公司還宣布了基于Jetson Orin的模塊的完整生產線,這些模塊是強大的人工智能機器人平臺--基本上是作為邊緣人工智能計算平臺的機器人 "大腦"。
"世界上最大的行業都在制造實物,但他們希望以數字方式建造它們。"Nvidia創始人兼首席執行官黃仁勛說:"Omniverse是一個工業數字化的平臺,它連接了數字和物理。"
Isaac Sim在Nvidia Omniverse上運行,這是一種強大的元空間模擬技術,可以創建現實世界的數字雙胞胎,因此機器人開發人員可以重新創建機器人將要操作的空間和情況。在現實世界中建造和管理機器人意味著從頭開始攝取和創建巨大的數據集,這可能是極其沉重的負擔。
Azure上的Omniverse云提供了對強大的Nvidia OVX服務器的訪問,該服務器專門為機器人模擬設計,以使機器人工作流程的開發更快、更容易。它還配備了大量的工具,允許團隊在訓練環境方面進行合作,緩解機器人訓練數據、模擬、驗證和部署人工智能。
銜接物理與數字,Nvidia在Jetson Orin模塊陣容中推出了最新的邊緣計算AI平臺,推出了新的Jetson Orin Nano開發者套件。新套件比上一代Jetson Nano強大得多,主要針對希望創建人工智能驅動的機器人、智能無人機、智能視覺系統等的開發者。
Nvidia Jetson Orin系列模塊旨在支持網絡邊緣廣泛的AI機器人、機器和自動化功能。它們建立在Nvidia Ampere芯片上,支持任何應用的各種AI模型。基于Orin的芯片能夠從入門級的Jetson Orin Nano的每秒40萬億次人工智能操作運行到Jetson AGX Orin的每秒275萬億次操作,用于自動駕駛車輛等高級解決方案。
Nvidia表示,Jetson已被6000多家客戶和100多萬名開發者使用,其中包括亞馬遜網絡服務公司、佳能公司、思科系統公司、現代機器人有限公司、約翰迪爾公司、特雷弗公司和美國國家航空航天局。Ltd.、John Deere、Teradyne Inc.和TK Elevator。采用基于Orin的新模塊的公司包括現代 Doosan Infracore Co.Ltd.、Verdant Robotics、以及無人機公司Skydio Inc.和Zipline Inc.
將所有這些放在一起,Nvidia宣布擴大Metropolis生態系統和支持計算機視覺人工智能的技術,包括為開發者提供TAO工具包5.0;更新用于構建計算機視覺應用程序的Deepstream軟件開發工具包;以及早期訪問Metropolis微服務。
TAO工具包是一個低代碼的人工智能框架開發工具包,協助任何開發者在任何服務和任何設備上快速創建人工智能模型。隨著TAO 5.0的推出,Nvidia正在增加一系列功能,包括視覺轉換器的預訓練模型,通過ONNX導出在任何平臺上部署的能力,通過AutoML和AI輔助數據分類或注釋的自動調整。
使用TAO,開發者可以快速潛入數據,幾乎不需要編碼,讓它快速對看到的東西進行分類。它可以使用預訓練的模型來訓練和分類視覺任務,如人員檢測、車輛分類、姿態估計和物體估計。通過數據增強,模型可以通過迭代進行修剪和微調,直到它們以工程師需要的方式工作,然后再準備進行行業整合和部署。
Nvidia DeepStream軟件開發工具包正在通過更新幫助開發者制作下一代視覺AI而將其提升到新的水平。DeepStream允許開發者從基于管道的開源GStreamer框架產生的視頻流中迅速產生計算機視覺AI。然而,最近的更新允許開發者創建自己的基于圖形的低代碼人工智能視覺管道,而不需要流媒體框架。
DeepStream現在還可以帶來更多的視覺效果。它還可以處理來自其他傳感器的信息,如激光雷達和雷達,以及環境和過程與傳感器融合。這將允許在各行業中出現一系列潛在的基于計算機視覺的新人工智能應用,例如將其用于質量控制和需要識別緊張的調度需求或環境中的其他變化的自主機器。
最后,當大范圍內有多個攝像頭時,這可能會給視覺AI帶來問題,但Nvidia對此有一個解決方案。它被稱為Metropolis Microservices,是一個用于視覺AI應用的云原生微服務參考框架。它允許開發者使用多個攝像頭在大范圍內迅速傳播感知,并將它們焊接成一個單一的理解,供人工智能使用,以創建多攝像頭跟蹤應用程序。
這有大量的應用,例如在整個工廠車間,有大量的攝像頭觀察產品在眾多的傳送帶上移動,在體育場,人們在走廊上行走,以控制擁堵,在零售商店,貨架上有攝像頭,以控制庫存,以及智能城市,試圖更好地了解交通。
VIDIA(Nvidia Corporation,/?n?v?di?/;中國臺灣與香港繁中名為輝達,中國大陸簡中名為英偉達),創立于1993年1月,是一家以設計和銷售圖形處理器為主的無廠半導體公司。NVIDIA亦會設計游戲機核心,例如Xbox和PlayStation。NVIDIA最出名的產品線是為個人與游戲玩家所設計的GeForce系列,為專業CGI工作站而設計的Quadro系列,以及為服務器和高效運算而設計的Tesla系列,雖然起家于PC電腦的顯卡業務,英偉達也曾涉及移動芯片Tegra的設計,但智能機市場對此響應不大,不過近年卻利用這些研發經驗,目前朝向人工智能和機器視覺的市場發展,也是圖形處理器上重要的開發工具CUDA的發明者。不過NVIDIA的發展過程也是非議不斷,批評多集中于濫用排他性商業合作、不正當營銷方式、對業界開放標準和自由軟件運動的拒斥等。
NVIDIA的總部設在美國加利福尼亞州的圣克拉拉位于硅谷的中心位置。
歷史
NVIDIA創辦人兼首席執行官兼總裁黃仁勛
黃仁勛、克里斯·馬拉科夫斯基和卡蒂斯·普里姆于1993年4月美國加州創辦了NVIDIA(隨后成為特拉華州企業)。NVIDIA保持低調到1997-1998年,當時它發布了RIVA個人電腦繪圖處理器產品線。并于1999年1月在納斯達克掛牌上市;同年5月,售出第一千萬個繪圖處理器。于2000年收購了一代王者3dfx的知識產權。3dfx是1990年代中期其中一間最大的圖形處理器廠商。NVIDIA與許多OEM廠商,和一些組織創建起密切關系,最知名的包括臺積電。2002年2月,NVIDIA售出第一億個繪圖處理器。
目前NVIDIA和AMD供應了市場上大部分獨立顯卡。NVIDIA最著名的GeForce繪圖處理器產品線于1999年首次亮相。現在GeForce產品線已經擴展至桌面型和筆記本電腦。移動設備方面,NVIDIA擁有Tegra產品線。它能提供高性能,同時保持低電源消耗。此類產品通常用于無線通信設備。
2020年4月 27日,NVIDIA宣布已完成對Mellanox Technologies, Ltd.(邁絡思科技有限公司)的收購,成交價70億美元。
2020 年 7 月,有報導稱英偉達正在與軟銀談判以 320 億美元收購英國芯片設計公司安謀。 2020 年 9 月 13 日,英偉達宣布將以 400 億美元的價格從軟銀集團手中收購 Arm Holdings,但須接受通常的審查,后者保留英偉達 10% 的股份。
2021年6月11日,英偉達宣布收購自動駕駛汽車高清地圖開發商 DeepMap, Inc.。
產品制造
作為一家無晶圓IC半導體設計公司,NVIDIA于自己的實驗室研發芯片,但將芯片制造工序分包給晶圓代工廠。以往,NVIDIA從其他廠商,例如IBM、意法半導體、臺積電(NVIDIA目前最重要的代工合作伙伴)和聯華電子獲得硅芯片生產能力。芯片的供應鏈需涉及數間第三廠:制造完畢的晶圓由集成電路封裝廠進行初步測試與封裝作業,之後交由測試廠的測試部門進行深度測試并根據性能分類。依據存貨清單,NVIDIA必須提早數月訂購芯片,并將之存儲起來等待使用。
在最終產品上(指顯卡、主板等),NVIDIA會推出所謂原廠“公版”(Reference)產品(稱為參考樣卡或參考模板)供展示及測試之用,早期產品是由臺灣的微星和斯博科、美國的威竣(VisionTek)和新美亞(Sanmina-SCI)、德國的埃爾莎代工,目前由新加坡的偉創力與臺灣的鴻海(富士康)、華碩和捷波代工或設計。在零售市場上,NVIDIA會把頂級型號的“原廠”公版產品給各個第三方廠商貼牌,如GeForce 7950 GX2、Quadro FX 5600、nForce 680i SLI等等,這些廠商的產品設計用料完全相同,均由一家廠商代工。在OEM市場上,亦有部分“原廠”公版產品存在。2008年后NVIDIA允許了旗艦級產品的“非公版”(Non-Reference)設計,但只有極少數有實力的廠商(如華碩、技嘉、微星、影馳等)會推出自己設計的產品。2010年10月初,NVIDIA曾透過BestBuy少量銷售由富士康代工的NVIDIA品牌“原廠”產品。
主要產品
NVIDIA的產品組合包括繪圖處理器、個人電腦平臺(主板邏輯核心)芯片組和數字媒體播放器的軟件。在Mac/PC用戶社區中,NVIDIA的"GeForce"產品線最為人熟悉。除了獨立型顯卡外,還有微軟的Xbox游戲核心和nForce主板(已停產)的核心技術,NVIDIA最近進入的領域是用于手機和平板電腦的ARM芯片,品牌為Tegra至今已推出5代。
在2004年12月,NVIDIA宣布會協助索尼設計PS3的繪圖處理器(RSX)。NVIDIA只會負責設計,Sony會負責制造該繪圖處理器。根據合約,NVIDIA會使用索尼的芯片廠(索尼和東芝)來制造RSX,并將制程提升至65納米。這與微軟的協議是互相違背的,因為NVIDIA會透過第三者制造Xbox的繪圖處理器。(其間微軟選擇了AMD去提供Xbox 360的繪圖硬件的IP設計。任天堂的GameCube和Wii亦采用ATI的繪圖處理器。)
2008年2月11日,NVIDIA發布了用于手機平臺的APX 2500應用處理器。該處理器集成了一個ARM處理器和一個顯示核心。這款處理器是由NVIDIA和微軟聯合研制,方面應用于使用Windows Mobile的電話中,提高Windows Mobile平臺的多媒體處理能力。芯片的制程是65nm,核心頻率750 MHz,并集成256KB的L2緩存。芯片亦內置GeForce核心,支持OpenGL ES 2.0和Direct3D Mobile標準。APX 2500屬于ARM架構,其低耗電設計,使手提電話可以長時間播放音樂或720p高清晰視頻。
NVIDIA于2008年12月發布了一支持Intel Atom處理器的NVIDIA ION移動平臺,主打輕薄桌面型市場,可以支持DirectX 10的內置顯示芯片性能是原本英特爾官方945GSE芯片組的5倍,讓迷你電腦也有部分游戲能力;它解決了Atom沒有GPU、無法支持高清、無法支持數字顯示、屏幕需小于10英寸、不能支持更高版本的Windows Vista的種種問題。
在2011年1月5日的CES上,NVIDIA宣布將自行設計與研發基于ARM架構的臺式機CPU,產品代號Project Denver(丹佛項目)。其處理器能夠支持微軟下一代桌面系統Windows 8以及行動平臺上的Android、蘋果iOS等。相比之前的Tegra產品,NVIDIA總裁表示這將是一顆高度定制的“ARM兼容CPU”,即獲得ARM指令集授權,但處理器微架構則完全由NVIDIA自行開發,以更高性能面向桌面、服務器甚至高性能計算市場。屆時NVIDIA基于ARM架構的處理器將在市場上與英特爾和AMD等基于X86架構的處理器直接競爭。
在GTC 2020主題演講中,NVIDIA宣布推出Ampere架構,是NVIDIA 8代GPU歷史上最大的一次性能飛躍,包含超過540億個晶體管,是有史以來最大的7納米芯片,性能相較于前代提升了高達20倍,
NVIDIA A100是首款基于NVIDIA Ampere架構的GPU,全新多實例GPU技術可將單個A100分割成最多七個獨立的GPU來處理各種計算任務;第三代NVIDIA NVLink技術能將多個GPU組合成一個巨型GPU;全新結構化稀疏功能將GPU的性能提高一倍。具有TF32的第三代Tensor Core核心 ,其功能經過擴展后加入了專為AI開發的全新TF32,它能在無需更改任何代碼的情況下,使FP32精度下的AI性能提高多達20倍。此外,Tensor Core核心現在支持FP64精度,相比于前代,其為HPC應用所提供的計算力比之前提高了多達2.5倍。
2020年,NVIDIA發布軟件開發包NVIDIA Maxine。
2025-05-29 23:14
2025-05-29 23:14
2025-05-29 23:13
2025-05-29 23:13
2025-05-29 23:12
2025-05-29 23:12
2025-05-29 23:11
2025-05-29 23:11
2025-05-29 23:10
2025-05-29 23:09