視頻晶元算力
❶ 給人工智慧提供算力的晶元有哪些類型
給人工智慧提供算力的晶元類型有gpu、fpga和ASIC等。
GPU,是一種專門在個人電腦、工作站、游戲機和一些移動設備(如平板電腦、智能手機等)上圖像運算工作的微處理器,與CU類似,只不過GPU是專為執行復雜的數學和幾何計算而設計的,這些計算是圖形渲染所必需的。
FPGA能完成任何數字器件的功能的晶元,甚至是高性能CPU都可以用FPGA來實現。 Intel在2015年以161億美元收購了FPGA龍 Alter頭,其目的之一也是看中FPGA的專用計算能力在未來人工智慧領域的發展。
ASIC是指應特定用戶要求或特定電子系統的需要而設計、製造的集成電路。嚴格意義上來講,ASIC是一種專用晶元,與傳統的通用晶元有一定的差異。是為了某種特定的需求而專門定製的晶元。谷歌最近曝光的專用於人工智慧深度學習計算的TPU其實也是一款ASIC。
(1)視頻晶元算力擴展閱讀:
晶元又叫集成電路,按照功能不同可分為很多種,有負責電源電壓輸出控制的,有負責音頻視頻處理的,還有負責復雜運算處理的。演算法必須藉助晶元才能夠運行,而由於各個晶元在不同場景的計算能力不同,演算法的處理速度、能耗也就不同在人工智慧市場高速發展的今天,人們都在尋找更能讓深度學習演算法更快速、更低能耗執行的晶元。
❷ 雙芯計算攝影+雙OIS防抖,OPPO Find X5帶來頂級影像系統
OPPO非常有遠見,早在2019年,就有消息曝光稱OPPO開始了進軍晶元領域,而這顆OPPO的第一顆自研晶元馬里亞納 MariSilicon X,便在OPPO Find X5 Pro上與我們見面。
目前,人們對手機影像功能的要求越來越高,高在人們對各種影像功能有了新的需求,如運動防抖級抓拍、超清夜景視頻拍攝功能等等。而對於手機廠商來說,這種精細化需求是很難滿足的,因為計算晶元來自於通用平台,所以手機廠商收集到的用戶的需求不一定能有效傳達到晶元廠商那,或者晶元廠商會由於各種原因,無法及時按照市場反饋做出定製化產品。
OPPO早早種的花,終於在OPPO Find X5 Pro上結了果。通過這顆自研晶元馬里亞納 MariSilicon X,OPPO在計算影像領域完成了全鏈路垂直整合,讓演算法、晶元、感測器、通用平台之間可以更好地協同工作,如此一來,往後OPPO在得到市場的反饋後,即可快速在產品上做出更新迭代,推出更有競爭力與更受消費者喜愛的產品。
OPPO Find X5 Pro在後置攝像頭上採用了索尼IMX766雙主攝感測器,其中一顆可作為超廣角鏡頭,還有一顆支持5倍光學變焦+20倍數碼變焦的長焦鏡頭,前置鏡頭上,OPPO與索尼聯合定製了一顆RGBW感測器IMX709。無論是前置還是後置,都採用了高規格的硬體。
OPPO Find X5 Pro搭載了全新一代驍龍8移動平台,驍龍8提供了更好的信號處理器、三重ISP,可以處理更多的影像數據與信息,讓OPPO Find X5 Pro支持拍攝更大信息量的高清高幀視頻。
驍龍8在影像系統上功能強大,同時此前針對驍龍的影像演算法也更加強勁,所以全能旗艦的OPPO Find X5 Pro自然會使用驍龍8平台。而OPPO全新自研的馬里亞納 MariSilicon X晶元,基於面向未來 AI 時代的 DSA 新黃金架構理念,通過自主創新的 IP 設計以及 6nm 製程,可以帶來實時 AI 計算能效,以及 Ultra HDR 能力,無損的實時 RAW 計算,以及最大化感測器能力的 RGBW Pro。
回歸到搭載了驍龍8與馬里亞納X的OPPO Find X5 Pro上,OPPO在Find X5 Pro帶來了行業內第一次出現的4K超清夜景視頻功能。通過馬里亞納MariSilicon X強大的算力與高達11.6TOPS/w的能效比,超清夜景視頻的解析度提升了4倍,實現每幀畫面進行像素級AI降噪處理,解除夜景視頻僅能拍攝1080P畫質的限制,獲得夜間動態范圍更廣的清晰畫質視頻。
不少用戶會抱怨在用手機拍攝視頻時,取景畫面與最終輸出的視頻畫面匹配度低,輸出視頻畫面不純凈,馬里亞納 MariSilicon X強大的算力在這方面同樣派上了用場。過去,由於晶元算力不足,計算影像通常是在YUV域進行有損處理的,而OPPO Find X5 Pro上的馬里亞納 MariSilicon X將復雜的計算前置在了RAW域,使得最終輸出的視頻的圖像信息更加准確原始,獲得相對比傳統YUV域處理器更高的清晰度與更廣的動態范圍,取景畫面與成像畫面匹配度更高,視頻畫質更純凈。
Find X5 Pro還帶來了另一項重大突破,採用了行業內首個硬體級別的雙OIS防抖方案,通過這套雙OIS五軸防抖方案,手機可以在同一鏡頭模組下實現感測器與鏡頭雙重光學防抖,懸x軸、y軸、pitch軸、yaw軸與roll軸全方位的防抖補償,讓安全快門可降低至0.5秒,夜景下進光量大幅提升,可以更輕松地獲得清晰明亮的夜景樣張。
懸浮防抖最高支持±3°的防抖與±0.7°的旋轉防抖角度,讓視頻拍攝也擁有更好的防抖性能,即便是在4K超高畫質下也能拍出穩定的運動畫面。下圖是在雙持OPPO Find X5 Pro與iPhone 13 Pro經過減速帶時的視頻畫面對比。
除了讓你在相對靜態的角度下進行視頻畫面防抖外,相對專業的手機視頻玩家在運鏡時也能獲得令人滿意的表現。
總的來說,OPPO Find X5 Pro採用了比較高規格的感測器,在雙芯與雙OIS防抖的加持下,無論是拍照還是拍攝視頻都擁有強大的表現,強大的自研馬里亞納X讓OPPO Find X5 Pro實現了眾多的重大突破,也讓手機獲得了一套頂級的影像系統。
❸ 21tops算力相當於什麼顯卡
英偉達的一個Jetson Xavier NX就是21tops算力。
11月7日,英偉達宣布推出全球尺寸最小的邊緣AI超級計算機Jetson Xavier NX,主要面向機器人和邊緣嵌入式計算設備。這款新品擁有比信用卡還小的外形,節能型Jetson Xavier NX模塊在運行AI工作負載時,可提供最高21 TOPS的伺服器級性能,售價399美元,即將在2020年3月開始出貨。英偉達推出更具競爭力的邊緣AI晶元產品,讓AI初創公司們面臨更大的競爭壓力。
英偉達邊緣AI晶元已經有四個系列
今天發布的Jetson Xavier NX最大的亮點在於,與Jetson Nano尺寸相同(70X45mm)的情況下,能夠在功耗10W的模式下提供最高14TOPS,在功耗15W模式下最高21 TOPS的性能。另外,Jetson Xavier NX能夠並行運行多個神經網路,也能同時處理來自多個高解析度感測器的數據。
Jetson Xavier NX模塊具體的規格如下:
GPU:配備384個 NVIDIA CUDA core和48 個Tensor core的 NVIDIA Volta,外加2個NVDLA
CPU:6-core Carmel Arm 64位CPU, 6MB L2 + 4MB L3
視頻:2x 4K30 編碼和2x 4K60解碼
攝像頭:最多6個 CSI攝像頭(通過虛擬通道最多36個),12路(3x4或6x2) MIPI CSI-2
內存:8GB 128位LPDDR4x;51.2GB/秒
連接:千兆乙太網
OS支持:基於Ubuntu的 Linux
模塊尺寸:70x45mm
Jetson Xavier NX面向的是對性能需求高,但受到尺寸、重量、功耗以及預算限制的嵌入式邊緣計算設備,比如小型商用機器人、無人機、智能高解析度感測器(用於工廠物流和生產線)、光學檢測、網路錄像機,攜帶型醫療設備以及其他工業物聯網(IoT)系統。
為了滿足這些場景,除了硬體外,軟體支持也非常重要。英偉達表示,對於已經開始打造嵌入式計算機的公司,Jetson Xavier NX與所有Jetson系列產品一樣都可以在相同的CUDA-X AI軟體架構上運行。同時,作為NVIDIA軟體架構方法的一部分,Jetson Xavier NX由NVIDIA JetPack SDK提供支持。
NVIDIA JetPack SDK是一個完整的AI軟體堆棧,可以運行復雜的AI網路,並用於深度學習的加速庫以及計算機視覺、計算機圖形、多媒體等。
Jetson Xavier NX的上一款產品是在今年3月的GTC發布,英偉達創始人兼 CEO 黃仁勛宣布推出售價僅99美元的Jetson Nano。根據官方的說法,藉助CUDA-X,Jetson Nano可以提供472 GFLOPS的AI性能,功率低至5W。這款售價不高,能夠運行所有AI模型的邊緣計算平台發布後獲得了極大的關注。
Jetson Nano的上一款產品在去年發布。去年九月的日本GTC,黃仁勛公布了AGX陣容,包括Drive Xavier和新推出的Drive Pegasus,還有Jetson AGX Xavier。Jetson AGX Xavier的大規模計算性能可以處理機器人至關重要的測距、定位、測繪、視覺和感知以及路徑規劃。
Jetson家族更早的產品Jetson TX2在2017年推出,提供兩種運行模態:一種是MAX Q,這種模態下能效比能達到最高,是TX1的2倍,功耗在7.5W以下;另一種是MAX P,性能可以做到最高,能效比同樣可以做到前一代的2倍,功耗則在15W以下。
雖然推出的時間不同,但他們都具有一個區別於其他邊緣SoC的特點,並行運行多個神經網路。
邊緣端實力增強,初創公司面臨更大生存壓力
英偉達在雲端AI晶元市場獲益頗豐,其中非常重要的原因就是擅長並行計算的GPU能夠在在數據中心的各種模型中訓練時體現出性能優勢。雖然憑借雲端AI晶元成為了眾多AI晶元初創公司想要超越的目標,但英偉達也有自己的困擾。首先,為AI優化和設計的高性能GPU價格昂貴,讓不少開發者望而卻步。
其次,隨著AI演算法的逐步成熟,雲端AI訓練晶元市場的增速將會放緩,英偉達想要保持業績的增長以及在AI市場的領導力,就需要向邊緣AI市場拓展,同時,用雲端加邊緣一體化的解決方案吸引更多客戶。
從面向終端和邊緣設備的Jetson系列晶元的布局來看,英偉達早已明白自己該怎麼做。如今,Jetson系列晶元算力從0.5TFlops到32TOPS,應用覆蓋小型嵌入式設備、智能汽車、工業設備等多種應用。今天高性能小尺寸Jetson Xavier NX發布,讓Jetson家族能夠提供性能和功耗更加多樣的邊緣晶元,這背後就是為了滿足AIoT市場多樣化的市場需求。
不過,更應該看到的是,英偉達如今不僅能夠提供雲端和終端AI晶元硬體,其成功背後還有強大的軟體生態的支撐。據雷鋒網了解,Jetson系列已經吸引了40萬的開發者,擁有了3000用戶。
這對於AI晶元的初創公司而言顯然不是一個好消息,由於雲端AI晶元更加依賴生態,晶元的設計難度也更大,所以大部分AI晶元的初創公司都選擇在邊緣端市場,並且大都主要提供AI加速器。AI晶元初創公司們希望憑借獨特的架構設計以及領先的性能指標的晶元獲得市場的認可。
然而,開發者在進行AI演算法遷移的時候往往需要使用AI晶元公司提供的編譯器等工具,這不僅會增加軟體開發者的使用門檻,還可能達不到預期的效果。因此,初創公司的AI晶元大部分都沒有得到非常有價值的應用。
這就意味著,AI晶元初創公司們在產品設完成並流片之後,如何找到合適的市場以及模式進行商業化變得非常關鍵,特別是在資本寒冬以及AI晶元進入落地戰的當下。
顯然,AI晶元初創公司們面臨著更加嚴峻的生存挑戰,一方面,無論是英偉達還是英特爾,他們在雲端和邊緣端都已經有競爭力很強的產品,在邊緣端,憑借軟體生態以及渠道的優勢,巨頭們的晶元更容易獲得客戶,甚至連擅長軟體的Google都推出了面向邊緣市場的Google Edge TPU。另一方面,AI晶元初創公司想要推出有競爭力的產品就必須不斷迭代和投入,這就需要資金的持續支持,但融資環境以及更加激烈的市場競爭又增加了融資的難度。
正如雷鋒網在今年3月份的文章中指出的,AI晶元的戰火已經蔓延至邊緣端,Jetson Xavier NX的推出不僅是英偉達邊緣端AI晶元布局的完善和實力的進一步增強,更是邊緣端晶元市場競爭更加激烈的標志。
AI晶元市場更加激烈的競爭有助於推動AI的向前發展,但對於實力較弱的AI晶元初創公司而言,隨著晶元巨頭們更有競爭力產品的推出,以及像英偉達這樣的公司更願意稱自己為系統公司,而非單純的晶元公司,這讓AI晶元初創公司面臨著更加嚴峻的生存挑戰。
❹ 自研影像晶元馬里亞納X首發 OPPO Find X5 Pro詳細評測
兩個月前,OPPO發布旗下首款折疊屏手機,瞬間帶火了折疊機的話題和銷量。其實,同時登場還有OPPO自研的影像專用NPU晶元——馬里亞納 MariSilicon X。現在,這塊晶元和Find X5系列一起如期而至。而作為全球第四大,月活用戶超5億的手機品牌,OPPO早在19年就提出要在視頻拍攝體驗上實現超車。但是受限於通用平台的技術條件,也就是影像算力的不足,這一塊並沒有一蹴而就。不過,相信大家對視頻超級防抖、夜景視頻、10bit全鏈路色彩管理這些概念,並不會感到陌生。因為針對性的技術,OPPO這些年一直在做。所以通過馬里亞納 MariSilicon X晶元,Find X5系列將技術累積一下子加以整合調優,打造一個高完成度的影像手機。除了新晶元確實有高性能外,技術框架的打造也是水到渠成的大前提。對了,這次還有OPPO | 哈蘇影像系統加持,這個天花板一下子就提的更高了。更「挺拔」的陶瓷環形山
Find X5系列延續了環形山的家族式設計,不同的是鏡組部分的線條變得更立體和自然。因為相比X3的AG玻璃工藝,Find X5 Pro的一體化納米微晶陶瓷機身擁有更高的硬度,可以進行更精細的塑形和打磨。握感方面,陶瓷要比AG玻璃來得更加柔潤。另外鏡頭和閃光燈以0.13mm的超小落差,內藏到了機身裡面。在看視頻或者游戲的時候,在觸感上會變得更加無感和順滑。厚度方面,電池容量升級到5000mAh的Find X5 Pro沒有明顯變化。不過陶瓷材質的採用,相比X3重了25克達到了218克,但比iPhone 13 Pro Max的238克要輕不少。拍照:畫質與成像速度兼具
影像體驗是Find X5系列的核心升級點,除了全系標配馬里亞納 MariSilicon X之外,鏡頭加入了懸浮防抖,支持鏡感測器雙防抖。前者對照片、視頻的畫質把關,後者則是保證了拍攝的穩定體驗。馬里亞納 MariSilicon X是OPPO首款自研晶元,採用台積電6nm先進製程製造,能以較低功耗實現高效的算力。這塊晶元的神經網路核心採用了DSA「專芯專用」架構,硬體設計專門為視頻AINR的演算法與效果服務,可提供等效高達18TOPS的AI算力。同時,在晶元內也有一個效能領先的ISP(圖像信號處理)核心,專門服務視頻HDR計算,可以帶來高達20bit的超高動態范圍處理能力。
通過馬里亞納 X 自研晶元,Find X5 Pro實現七大影像突破:動態抓拍、超清夜景照片、HDR逆光照片、晶元級4K夜景視頻、晶元級HDR視頻、晶元級4K極夜視頻、晶元級App相機增強。↑馬里亞納 MariSilicon X
為什麼我們需要這么高的算力呢?一般來說通用晶元平台,都是對JPEG照片進行處理,因為壓縮過的圖像信息更少,可以減少運算壓力。反過來更好的照片質量,如RAW格式的圖像,裡面存儲了更多光信號的原始數據,但是直接在上面進行圖像處理運算壓力就會非常大。↑同一幅照片,RAW格式記錄更多數據,容量為jpg照片的8-10倍
而算力足夠的馬里亞納 MariSilicon X,讓Find X5 Pro可以直接處理RAW圖像,最高支持到20bit。這個效果也是顯然易見的,通過RAW輸出的圖像,往往擁有更好的細節。同樣是IMX766主攝,新機照片的整體也會顯得更加銳利和立體,最重要的是拍攝時噪點更少。↑相同的IMX766主攝,Find X5 Pro照片更明亮,而且背光補償的部分也有更好的細節
這方面在弱光和夜拍的場景可以明顯感覺到,過去我們經常用到夜景模式,手持拍攝要好幾秒。Find X5 Pro正常模式就可以獲得這個效果,而且拍攝的等待時間很短。↑OPPO Find X5 Pro夜景實拍樣張↑OPPO Find X5 Pro夜景實拍樣張
懸浮防抖:讓大家都是麒麟臂
比起照片拍攝,馬里亞納 MariSilicon X的高算力在視頻上有更充分的呈現,當然鏡頭的硬體也走在了前面。Find X5 Pro在IMX766主攝上採用1G+6P的結構,改善成像的色散。但最關鍵的是鏡頭和感測器都支持光學防抖,OPPO稱之為懸浮防抖的設計。懸浮防抖可提供五軸運動補償,最高支持±3度防抖以及±0.7度的旋轉防抖角度。區別於之前的通過大幅裁切畫面的超級防抖,Find X5 Pro的懸浮防抖下在標准模式下,即可實現4K/60幀的防抖拍攝。而且畫面的裁切大幅度減少,切換到主攝依然可以獲得等效約35mm的廣角畫面。↑標准視頻模式清晰度更高,取景畫面截取更少
那實際的防抖效果怎樣,我們這里對比了一下防抖天花板iPhone 13 Pro。↑豎屏跟拍
視頻是由連續的圖像組成的,4K/60幀就是一秒60幅畫面。所以穩定的拍攝,是每一幀拍的清晰的前提。跟拍照一個道理,源頭的素材拍好了,後期輸出的視頻影像才有更好的畫質。↑旋轉推進
這么細致的防抖補償,是通過演算法將抖動數據拆分,在分配到鏡頭和感測器兩個活動組件上。如果只是靠通用平台的AI算力,先別說系統負載的高低,就耗電發熱就肯定不低。所以這部分完全交給算力更高的馬里亞納 MariSilicon X,一方面可以高效完成防抖的工作,另外一方面也兼顧了成片的畫質和能效。↑連續抖動
好了,這主要是日常拍攝,下面試試視頻夜拍。之前OPPO就在Reno4上搭載了超級夜景視頻模式,解決了極暗場景能不能拍的問題。不過受限於硬體算力,當時夜拍視頻解析度只有1080P。而在Find X5 Pro基於馬里亞納 MariSilicon X,可以直接對4K解析度的視頻進行AI降噪運預算,並實現20bit 120db超高動態范圍。簡單來說,就是夜拍視頻畫面更明亮,同時畫面噪點更少更純凈。至於為什麼說Find X5 Pro的視頻拍攝點滿了技能樹,因為在4K/60幀夜景拍攝的同時,防抖這一塊也能同時工作。而此前特定的拍攝功能,只能兼顧到單獨的需求。現在是清晰度、畫面穩定、流暢度同時兼具。↑4K/60幀手持拍攝,很穩↑4K/60幀為夜拍視頻帶來了更好的畫質和流暢度
OPPO|哈蘇 影像系統初體驗
作為搭載OPPO|哈蘇 影像系統的首款新品,Find X5 Pro首次採用哈蘇自然色彩解決方案,調教效果通過哈蘇自然色彩認證(HNCS認證)。而為了用戶更好感受到哈蘇色彩的魅力, OPPO聯合來自不同國家的哈蘇大使為 Find X5 Pro調制了三款大師濾鏡。另外,Find X5 Pro還加入了哈蘇XPAN模式,這個模式下用戶可以拍出65:24寬畫幅的照片。在等效45mm鏡頭焦距下,拍出黑白與彩色兩種膠片風格。
對於動手能力強的愛好者,Find X5 Pro提供了哈蘇專業模式。前後置相機可設置哈蘇標識水印,相機取景框UI復刻哈蘇取景框,連快門都源於哈蘇經典快門聲,全方位打造沉浸式哈蘇相機體驗。
這里給大家看看實拍樣張,以哈蘇人像為例。↑哈蘇大師人像實拍↑哈蘇大師人像實拍↑哈蘇大師人像實拍↑哈蘇大師人像實拍
依然是好屏
屏幕方面,Find X5 Pro採用了了一塊6.7英寸LTPO2.0 2K屏,像素密度高達525PPI。
實測下來,屏幕表現一如既往優秀,手動最大亮度486nits。除了100%覆蓋P3色域,高色準的表現更為亮眼。至於新升級的LTPO2.0,則是實現了不同使用場景1Hz-120Hz之間的無感智能變頻,相比行業內700ms的變頻延遲,Find X5 Pro僅需75ms,幾乎做到了0延遲,流暢且省電。升級的還有震感方面,Find X5全系標配大體積X軸線性馬達,並在設置中提供清脆、柔和兩種觸感風格,日常使用存在感很強。特別是玩吃雞的時候,武器、腳步、載具等振感反饋都很強勁,振感也可以根據自己的需求調節,大大提升了游戲體驗。性能續航
性能方面,Find X5 Pro搭載驍龍 8 Gen 1和石墨烯膜散熱系統,相比上一代,性能更好,散熱更強,無論是日常使用還是重度游戲,都能輕松應對。這里大家看看實測數據。↑安兔兔跑分↑Find X5 Pro已經可以流暢運行120幀王者
Find X5 Pro內置電池容量升級到了5000mAh,充電功率也增加到了80W(50W無線),實測12分鍾充50%,35分鍾充100%。續航這一塊比上一代產品,可以說有相當的進步。
點評
作為首發搭載馬里亞納 MariSilicon X晶元影像晶元的旗艦,OPPO Find X5 Pro充分展示了影像旗艦應該具備的水準。從硬體到實際拍攝,這種體驗都是立體的,能讓用戶感受到拍攝帶來的樂趣。
對於此前廠商一直很煩惱的第三方APP適配問題,馬里亞納 MariSilicon X晶元也很好的解決了問題。第三方軟體拍照時通常會截取視頻預覽流其中一幀畫面,得益於RAW域計算,FindX5Pro帶來更加清晰的原生畫質(無需打通第三方資源)。在微信、抖音等App內打開相機直接拍攝,也和獲得系統相機一樣的高品質畫面。
所以我們能看到馬里亞納 X帶來的可能性,相比通用晶元平台,自研影像晶元讓OPPO在影像演算法上有了更多的發揮空間。一方面是不需要擔心平台變更帶來的頻繁改動,有利於技術累積。其次是專芯專用,帶來更高效的算力和更好的畫質。
馬里亞納 MariSilicon X晶元在OPPO Find X5 Pro上首發商用,馬上就為OPPO在影像上帶來質的飛躍,不過現在也只是剛剛開始。隨著OPPO 3A影像演算法的不斷學習和優化,馬里亞納 MariSilicon X晶元在影像上帶來的天花板將會越來越高。
❺ 自研晶元首次亮相,會帶來哪些不一樣的驚喜
晶元工藝——開啟芯算攝影時代
OPPO Find X5系列搭載OPPO首顆自研影像專用NPU晶元
馬里亞納_MariSilicon X
6nm先進製程工藝、18 TOPS最高AI算力、20 bit無損數據處理
晶元性能——晶元級視頻能力
4K超清夜景視頻,自研影像NPU晶元負責清除噪點,每一幀都是純凈夜景照片
4K極夜視頻,驅逐黑暗,只要一盞燭光,極暗環境拍攝也能細節清晰,色彩真實
4K HDR視頻,最高20bit超強HDR能力,逆光拍攝照樣亮出不過曝,暗處有細節
影像能力——把形色日常拍出意味深長
自然色彩感測器改善白平衡,高透玻璃鏡片降低色散,色彩自然舒適,細節豐富,情緒飽滿
哈蘇聯名,傳奇呈現
OPPO|哈蘇手機影像系統,每一次快門,都有源於哈蘇的自然色彩優化
前置超感光貓眼攝像頭
自研影像NPU晶元加持IMX709,輕松駕馭逆光弱光,前置自拍也能像後置一樣層次清晰,色彩分明
懸浮防抖
把專業相機的5軸防抖塞進手機
鏡頭防抖+感測器防抖,3倍圖像穩定,怎麼拍都很穩
手機工藝——一體化納米微晶陶瓷
陶瓷獨具光影質感,握著有更細膩手感,支持IP68級防塵防水
全新一代驍龍_8移動平台
採用4nm製程工藝,新一代高能效Adreno GPU,性能持久穩定,游戲一把好手
Armv9全新架構、20%CPU性能、30%圖形渲染速度
全新散熱工藝
3D高性能石墨烯膜+VC也冷散熱,導出熱量給「龍」消暑
冰敷散熱保護殼配合降溫,溫度最高再降2.3℃
超級閃充
80W超級閃充+50W無線閃充,更有電池健康引擎,延長電池壽命
120HZ高刷屏
智能動態刷新率,根據畫面內容匹配刷新率,動態順暢,靜態省電
ColorOS 12.1——又有新功能
隱藏攝像頭檢測
無需專業設備,揪出酒店裡的「偷拍狂」
超級錄音
區分講話人,語音轉文本,誰說什麼一目瞭然
自由翻譯
同屏多語種,一鍵全翻譯
從一部,到全部
OPPO Pad|OPPO Enco X2|OPPO Watch2|OPPO Air Glass同步發布
❻ 最高280 TOPS算力,黑芝麻科技發布華山二號,PK特斯拉FSD
晶元作為智能汽車的核心「大腦」,成為諸多車企、Tier 1、自動駕駛企業重點布局的領域。
圍繞著自動駕駛最為關鍵的計算單元,國內誕生了諸多自動駕駛晶元創新公司,在該領域的絕大部分市場份額依然被國外廠商控制的當下,他們正在爭取成為「國產自動駕駛晶元之光」。
成立於 2016 年的黑芝麻智能科技便是這一名號的有力爭奪者。
繼 2019 年 8 月底發布旗下首款車規級自動駕駛晶元華山一號(HS-1)A500 後,黑芝麻又在這個 6 月推出了相較於前代在性能上實現躍遷的全新系列產品——華山二號(HS-2),兩個系列產品的推出相隔僅 300 余天,整體研發效率可見一斑。
1、國產算力最高自動駕駛晶元的自我修養
華山二號系列自動駕駛晶元目前有兩個型號的產品,包括:
應用於?L3/L4?級自動駕駛的華山二號 A1000?;針對?ADAS/L2.5?自動駕駛的華山二號 A1000L。
簡單理解就是,A1000 是高性能版本,而 A1000L 則在性能上進行了裁剪。
這樣的產品型號設置也讓華山二號系列晶元能在不同的自動駕駛應用場景中進行集成。
相較於 A500 晶元,A1000?在算力上提升了近?8 倍,達到了?40 - 70TOPS,相應的功耗為?8W,能效比超過?6TOPS/W,這個數據指標目前在全球處於領先地位。
華山二號 A1000 之所以能有如此出色的能效表現,很大程度是因為這塊晶元是基於黑芝麻自研的多層異構性的?TOA 架構打造的。
這個架構將黑芝麻核心的圖像感測技術、圖像視頻壓縮編碼技術、計算機視覺處理技術以及深度學習技術有機地結合在了一起。
此外,這款晶元中內置的黑芝麻自研的高性能圖像處理核心?NeuralIQ ISP?以及神經網路加速引擎?DynamAI DL?也為其能效躍升提供了諸多助力。
需要注意的是,這里的算力數值之所以是浮動的,是因為計算方式的不同。
如果只計算 A1000 的卷積陣列算力,A1000 大致是 40TOPS,如果加上晶元上的 CPU 和 GPU 的算力,其總算力將達到?70TOPS。
在其他參數和特性方面,A1000 內置了 8 顆 CPU 核心,包含 DSP 數字信號處理和硬體加速器,支持市面上主流的自動駕駛感測器接入,包括激光雷達、毫米波雷達、4K 攝像頭、GPS 等等。
另外,為了滿足車路協同、車雲協同的要求,這款晶元不僅集成了 PCIE 高速介面,還有車規級千兆乙太網介面。
A1000 從設計開始就朝著車規級的目標邁進,它符合晶元 AEC-Q100 可靠性和耐久性 Grade 2 標准,晶元整體達到了 ISO 26262 功能安全 ASIL-B 級別,晶元內部還有滿足 ASIL-D 級別的安全島,整個晶元系統的功能安全等級為?ASIL-D。
從這些特性來看,A1000 是一款非常標準的車規級晶元,完全可以滿足在車載終端各種環境的使用要求。
A1000 晶元已於今年 4 月完成流片,採用的是台積電的 16nm FinFET 製程工藝。
今年 6 月,黑芝麻的研發團隊已經對這款晶元的所有模塊進行了性能測試,完全調試通過,接下來就是與客戶進行聯合測試,為最後的大規模量產做准備。
據悉,搭載這款晶元的首款車型將在?2021 年底量產。
隨著 A1000 和 A1000L 的推出,黑芝麻的自動駕駛晶元產品路線圖也更加清晰。
在華山二號之後,這家公司計劃在 2021 年的某個時點推出華山三號,主要面向的是 L4/L5 級自動駕駛平台,晶元算力將超越 200TOPS,同時會採用更先進的 7nm 製程工藝。
華山三號的?200TOPS?算力,將追平英偉達 Orin 晶元的算力。
去年 8 月和華山一號 A500 晶元一同發布的,還有黑芝麻自研的 FAD(Full Autonomous Driving)自動駕駛計算平台。
這個平台演化至今,在 A1000 和 A1000L 晶元的基礎上,有了更強的可擴展性,也有了更廣泛的應用場景。
針對低級別的 ADAS 場景,客戶可以基於 HS-2 A1000L 晶元搭建一個算力為 16TOPS、功耗為 5W 的計算平台。
而針對高級別的 L4 自動駕駛,客戶可以將 4 塊 HS-2 A1000 晶元並聯起來,實現高達 280TOPS 算力的計算平台。
當然,根據不同客戶需求,這些晶元的組合方式是可變換的。
與其他大多數自動駕駛晶元廠商一樣,黑芝麻也在可擴展、靈活變換的計算平台層面投入了更多研發精力,為的是更大程度上去滿足客戶對計算平台的需求。
反過來,這樣的做法也讓黑芝麻這樣的晶元廠商有了接觸更多潛在客戶的機會。
根據黑芝麻智能科技的規劃,今年 7 月將向客戶提供基於 A1000 的核心開發板。
到今年 9 月,他們還將推出應用於 L3 自動駕駛的域控制器(DCU),其中集成了兩顆 A1000 晶元,算力可達 140TOPS。
2、黑芝麻自動駕駛晶元產品「聖經」
借著華山二號系列晶元的發布,黑芝麻智能科技創始人兼 CEO 單記章也闡述了公司 2020 年的「AI 三次方」產品發展戰略,具體包括「看得懂、看得清和看得遠」。
這一戰略是基於目前市面上對自動駕駛域控制器和計算平台的諸多要求提出的,這些要求包括安全性、可靠性、易用性、開放性、可升級以及延續性等。
其中,看得懂直接指向的是?AI 技術能力,要求黑芝麻的晶元產品能夠理解外界所有的信息,可以進行判斷和決策。
而看得懂的基礎是看得清,這指的是黑芝麻晶元產品的圖像處理能力,需要具備准確接收外界信息的能力。
這里尤其以攝像頭感測器為代表,其信息量最大、數據量也最多,當然感測器融合也不可或缺。
看得遠則指的是車輛不僅要感知周邊環境,還要了解更大范圍的環境信息,這就涉及到了車路協同、車雲協同這樣的互聯技術,所以我們看到黑芝麻的晶元產品非常注重對互聯技術的支持。
作為一家自動駕駛晶元研發商,這一戰略將成為黑芝麻後續晶元產品研發的「聖經」。
3、定位 Tier 2,綁定 Tier 1,服務 OEM
現階段,發展智能汽車已經成為了國家意志,在政策如此支持的情況下,智能汽車的市場爆發期指日可待。
根據艾瑞咨詢的報告數據顯示,到 2025 年全球將會有 6662 萬輛智能汽車的存量,中國市場的智能汽車保守預計在 1600 萬輛左右。
如此規模龐大的智能汽車增量市場,將為那些打造智能汽車「大腦」的晶元供應商培育出無限的產品落地機會。
作為其中一員,黑芝麻智能科技也將融入到這股潮流之中,很有機會成長為潮流的引領者。
作為一家自動駕駛晶元研發商,黑芝麻智能科技將自己定位為?Tier 2,未來將綁定 Tier 1 合作夥伴,進而為車企提供產品和服務。
當然,黑芝麻不僅能提供車載晶元,未來還將為客戶提供自動駕駛感測器和演算法的解決方案,還有工具鏈、操作平台等產品。
憑借著此前發布的華山一號 A500 晶元,黑芝麻智能科技已經與中國一汽和中科創達兩家達成了深入的合作夥伴關系,將在自動駕駛晶元、視覺感知演算法等領域展開了諸多項目合作。
另外,全球頂級供應商博世也與黑芝麻建立起了戰略合作關系。
目前,黑芝麻的華山一號 A500 晶元已經開啟了量產,其與國內頭部車企關於 L2+ 和 L3 級別自動駕駛的項目也正在展開。
如此快速的落地進程,未來可期。
有意思的是,黑芝麻此番發布華山二號系列晶元,包括中國一汽集團的副總經理王國強、上汽集團總工程師祖似傑、蔚來汽車 CEO 李斌以及博世中國區總裁陳玉東在內的多位行業大佬都為其雲站台。
這背後意味著什麼?給我們留下了很大的想像空間。
本文來源於汽車之家車家號作者,不代表汽車之家的觀點立場。
❼ vivo首款自研影像晶元有多厲害
據說vivo這顆影像晶元,是vivo歷時24個月,投入超過300人研發團隊完成的首顆自研專業影像晶元。
在如今的手機影像現狀,算力是限制其發展的新瓶頸。例如在拍攝視頻時,對處理能力的要求呈現指數式增長;隨著廠商提供的影像系統越來越先進,對解析度、畫面的渲染效果提出了越來越高的要求。因此,在巨大的算力鴻溝面前,定製化晶元配合高速處理優化的演算法,是移動影像突破的新趨勢,這也是vivo應對行業現狀做出的一次巨大嘗試。
目前手機使用的ISP(圖像處理器)都是晶元內置的,也就是「公版貨」,可調教的空間十分有限,而對比vivo自研的專業影像晶元V1,可以粗略地理解為類似於電腦中的核心顯卡,進步到了獨立顯卡的過程,手機的影像系統能夠更高效地去處理、運算大量復雜的圖像信息,且帶來更低的功耗,讓用戶的影像體驗得到全面提升。
夜景模式的實力非常能看出一台手機影像系統的功底,這一次的vivoX70Pro+,在得到V1晶元的強力加持之後,便在夜景模式中大展拳腳。首先是V1晶元針對高速數據處理的優化設計,讓極其復雜的多個計算成像演算法,在低功耗下並發實時處理。最直觀的感受就是在夜景拍攝的過程中,拍照預覽界面,就能夠獲得接近成片效果的能力。
在V1晶元的助力下,夜景模式基本可以實現實時預覽成片。在V1晶元超高算力的的幫助下,在夜景模式實現了手動調節曝光功能,讓你在自主選擇深夜的質感。此外,V1晶元還提升了vivoX70Pro+在拍攝夜景時的成像速度。
在暗光環境中,vivoX70Pro+拍攝視頻也不再被光線所限制。在V1晶元的協助下,主晶元可以在低光錄像時,以低功耗運行FHD60幀的MEMC去噪和插幀,這極大的輔助並強化了主晶元在夜景下的影像效果,提升在夜景視頻下的創作空間,配合主晶元ISP原有的降噪功能,實現二次提亮二次降噪。
❽ 能用DSP+ISP+GPU共同來為來為手機拍視頻提供算力嗎
這個東西最大的問題是需要相關的底層軟體的更新,一般來說小米,oppo他們都是買高通,聯發科之類的晶元,所以他們基本沒有能力來做這樣的升級。對於華為來說做這樣的升級也很麻煩,他們也沒有什麼動力來對以前的晶元組來提供升級,讓用戶買個新的不香嗎?
❾ 晶元算力tops是什麼意思
TOPS,處理器運算能力單位。TOPS是Tera Operations Per Second的縮寫,1TOPS代表處理器每秒鍾可進行一萬億次(10^12)操作。