賽靈思(NASDAQ:XLNX)技術大會Xilinx Adapt 2021第一週,針對開發者的活動議程和相關新聞重點如下:
智慧視訊分析應用
- 全新Vitis™ Video Analytics SDK:一款視訊分析軟體開發套件,為賽靈思平台上的智慧影像分析應用提供完整的軟體堆疊,並於邊緣到雲端進行部署。端到端的視訊分析解決方案支援視訊解碼、預處理、AI推論、追蹤和後處理等功能,能夠滿足整體應用加速的需求。它支援被廣泛使用的AI模型,如YOLO、SSD、ResNet、Inception、RefindDet、ReID、FPN和OpenPose等,可實現即時物件偵測、分類和分割等。
Vitis Video Analytics SDK為視訊分析應用提供基礎層,例如瞭解智慧城市中的車輛和行人的交通模式、在醫院中執行健康與安全監測、在零售商店裡支援自助結帳和分析,或在製造工廠內檢測元件缺陷等。
另外,它還為開發者提供完整的框架,使其能夠借助基礎設施外掛程式、軟體加速函式庫,和一個能開發客製加速函式庫以控制客製化硬體加速器的介面進行創新。Vitis Video Analytics SDK建立於Xilinx® Run Time(XRT)和各種Vitis AI工具的複雜介面上並對其進行抽象,使開發者無需掌握有關XRT和Vitis AI工具的複雜技術,就能輕鬆打造視訊分析和轉碼視訊流。
圖、Vitis™ Video Analytics SDK 為賽靈思平台上的智慧視訊分析應用提供完整的軟體堆疊
擴展的視訊與成像IP產品組合
賽靈思技術是眾多影像和視覺應用(如智慧攝影機)、下一代工業視覺、自動駕駛輔助和自動駕駛、智慧零售與安全、廣播、專業音視訊(Pro AV)以及消費產品(如電視與遊戲)的核心。為滿足上述應用不斷演進的需求與應用要求,賽靈思大幅擴展用於 UltraScale+™ 和Versal™ 元件的視訊與成像IP產品組合。
- 賽靈思藉由UltraScale+ 和Versal產品,在業界率先支援 HDMI 2.1 和DisplayPort(DP)1.4,實現更高品質的8K影像捕捉和8K顯示功能。結合HDMI 2.1或DP 1.4及其8K訊號調適器和混合器IP,客戶能夠建立完整的端到端8K視訊流。為提供遊戲玩家沉浸式的遊戲體驗,目前賽靈思視訊和圖像產品組合包括高動態範圍(HDR)、高幀率和可變更新率(Variable Refresh Rate)等格式,並與UltraScale+和Versal系列產品自行調適同步。
- IP產品組合中的其他進階新功能,包括具水平和垂直梯形失真校正的4k60 Warp、鏡頭失真校正、旋轉和任意扭曲視訊牆、高階視訊會議鏡頭、投影機和汽車應用等。
- Vitis Vision函式庫,提供給汽車、工業機器視覺和智慧攝影機應用的開發者使用,其中包括具有HDR的影像訊號處理器(Image Signal Processing,ISP),以及針對具OpenCV API的機器學習(ML)神經網路有預處理與後處理的功能。
- Vivado® 2021.2版本將在賽靈思Zynq® UltraScale+ EV系列中支援4:4:4 YUV色彩空間。4:4:4色彩空間結合賽靈思HDMI、DP、視訊處理和視訊混合器IP, 並將廣播和專業音視訊遷移至標準化方法用於在IP網路上傳輸音視訊,為客戶提供完全保真的串流視訊。Vivado 2021.2版本預計將於2021年底發佈。(880字;圖1)
--------------------------------------------------------------------------------------------------------------------------------------------