愛芯智眸AI-ISP架構打破傳統ISP成像的‘天花板’

2023年7月19-21日，第五屆世界半導體大會暨南京國際半導體博覽會順利舉行。19日下午，“2023年長三角集成電路產業創新發展論壇”在大會同期平行舉辦，愛芯元智高級總監張興出席論壇，并發表了《AI-ISP和端側AI的發展》的主題演講。

本屆大會由江蘇省工業和信息化廳、南京江北新區管理委員會聯合主辦，以“芯紐帶，新未來”為主題，旨在向全球業界呈現一場集行業交流、渠道聯動、資源聚合為一體的產業頂尖盛會。

在長三角集成電路產業創新發展論壇上，張興就愛芯智眸AI-ISP的架構創新展開了介紹：“目前，愛芯智眸AI-ISP是通過AI賦能ISP Pipeline里最關鍵的四個模塊——HDR、3DNR、RLTM和Demosaic，即通過AI訓練的方式不斷提升這四大模塊的性能，打破傳統ISP成像的‘天花板’?！?/p>

在實際應用中，愛芯智眸AI-ISP通過迭代軟件模型即可提升性能，快速實現芯片產品畫質的升級換代。這意味著，愛芯元智用一顆芯片就能實現對不同場景、不同市場的覆蓋，這既能降低AI綜合應用成本，也是對生產力的極大提升。

當前，愛芯元智不僅在繼續優化和迭代HDR、3DNR、RLTM和Demosaic相關的AI算法，也在探索將傳統ISP Pipeline上的其他模塊進行提升以及AI化。此外，愛芯元智另一大核心自研技術：愛芯通元混合精度NPU，則在算力層面表現優異，進一步加快了AI開發的落地效率。

今年以來，大模型的火熱帶領AI發展步入新階段，愛芯元智認為，基于圖像處理的實時性、可靠性的高要求，以及隱私保護、安全的需求，未來AI將從云端逐漸落地到端側邊緣側，這也將對端邊算力提出更高要求。

愛芯元智第三代、第四代芯片所搭載的愛芯通元混合精度NPU都支持Transformer大模型。隨著大模型的發展，愛芯元智也在積極探索通過大模型實現更好的AI-ISP效果，以技術創新解決低照和高動態的行業核心痛點，愛芯智眸AI-ISP打造的黑光全彩相機等新品類，也正在為人們解鎖更多視界，未來或將引領一個全新成像時代的到來。
責任編輯：彭菁