潤和軟件基于華為昇騰AI所打造的IntelliCore AI解決方案一體機

江蘇潤和軟件股份有限公司（以下簡稱“潤和軟件”）基于華為昇騰AI所打造的IntelliCore AI解決方案一體機，提供全方位的AI與數據服務，幫助企業構筑競爭新優勢，包括但不限于數據分析與挖掘、智能決策支持、智能客服與語音識別、智能物流與供應鏈優化等服務，可以快速為客戶在零售、制造、金融等領域提供高性能、高效率的智能解決方案。

解決方案產品包1：數字人

潤和軟件開發了AI數字人Nova。Nova擁有與真人無異的外表和動作，她是一個有用的虛擬助手，能夠理解用戶的需求并以自然的方式做出響應。作為一個栩栩如生的3D數字人，Nova從皮膚紋理到頭發絲的律動光澤，都與真人難辨真假。得益于與各種大語言模型 (LLM) 的強大整合，這位多語言大師可以跨越多種語言進行實時對話。用戶只需上傳一段短視頻，幾個小時后，就將擁有自己專屬的聲音克隆和形象克隆的Nova數字人，而且成本僅為傳統方法的一小部分。Nova的應用領域非常廣泛，從提供7x24小時的多語言客服服務，到擔任國際會議的實時語言翻譯，無所不能。她甚至可以成為個性化的語言學習導師，讓學習過程變得愉快且高效。

解決方案描述

從高層次來看，我們的解決方案包括以下內容：

1. 用戶上傳的3-5分鐘時長的視頻，系統使用Nova數字人創建技術生成外表高度擬人化的3D數字人形象，并允許用戶通過語音或文本與系統交互。

2. 意圖路由，用于確定用戶的目標并幫助引導執行下游流程。

3. 基于用戶的意圖確定要采取的操作或調用適當服務的Orchestrator。

4. 多Agent智能涌現技術驅動的問答系統來回答用戶提出的針對特定領域或非特定領域提出的問題。該架構包含多項服務，用于創建即插即用模型以減少供應商鎖定，下圖提供了解決方案包的架構圖。

AI數字人Nova解決方案架構圖

數字人設計要素

設計Nova數字人時需要考慮包括外觀、聲音、語言、個性、交互性，以及上下文和功能多個元素。

1、外貌：Nova的外觀是用戶首先看到的，而Nova的特征包括年齡、性別、種族、背景、教育、興趣都會反映到她的形象氣質上。在設計時應考慮視覺吸引力、目標受眾、包容性和品牌。用戶可以根據這些元素設計并拍攝3-5分鐘時長的用于訓練的視頻。

2、個性與互動：根據應用場景的不同，一個基礎的盡職盡責的Nova數字人平易近人、好奇、創新、深思熟慮、自信和協作，以鼓勵用戶與之互動。她可以看到、聽到用戶的情緒狀態。不僅可以回應用戶所說的內容，還可以回應他們在對話中表達的情感，從而幫助使交互更加個性化、富有同理心和吸引力。

3、語音和語言：語音、語言和口音會影響用戶的感知和交互方式。語言和口音應根據目標受眾、他們的語言水平、文化背景和偏好進行調整。Nova在第一個版本中會用英語、日語和中文進行交互。Nova可以使用各種用戶定制的或者系統預設的口音與用戶溝通。

4、背景與功能：在產生回答時，用戶可以根據應用場景定制Nova的背景和功能或“工作角色”。

5、意圖路由：意圖路由是指根據用戶輸入的語義將用戶輸入分類為預定義的類別或意圖，意圖分類使系統能夠確定如何最好地響應用戶的請求或將其路由到適當的操作或功能。它有助于引導對話流程，并使系統能夠提供相關且準確的響應。

6、多Agent 智能涌現：通過利用多智能體智能涌現能力，Nova具備了綜合多個視角和知識領域的能力，使她能夠無縫地適應各種用戶需求和偏好。這種多智能體方法確保了Nova的交互不僅信息豐富，而且深度個性化，提升了用戶的滿意度和參與度。

7、檢索增強生成：通過高效地從龐大的企業特有數據集和領域特定數據集中檢索和整合相關信息，Nova能夠提供及時、具有上下文的豐富回復，促進了與用戶更有意義和高效的交互。

方案優勢

1、形象擬人化：Nova和真人的整體形象和細節保持高度一致。Nova數字人創建的形象在皮膚光澤，頭發材質，衣服紋理細節和真實的物體高保真，表情和動作也栩栩如生，如下圖所示。

基于Nova數字人算法生成的外觀形象

基于Nova數字人算法生成的外觀形象

3D 數字人：Nova是 3D 的，可以從各個角度看。

材質紋理的高保真: Nova完美匹配用戶上傳視頻中真實人物的形象，且在皮膚，頭發，衣服的材質紋理，招牌動作等細節保持一致。

自然的表情和動作: 即使存在蓬松的頭發等不確定細節，Nova也能產生自然的表情和動作。

2、全身肢體動作：Nova能夠通過細微的全身身體語言線索，例如姿勢、手勢和體重轉移來傳達情，讓用戶感覺自己正在與真人互動。借助移動能力，Nova可以用于更廣泛的應用領域，例如引領/講解健身課程、展示產品、甚至主演虛擬電影。

人工智能驅動動作：Nova的動作并非預先編程，而是由復雜的 AI 算法生成，這些算法可以解釋對話的上下文并相應地調整她的肢體語言。

自然逼真：Nova的動作流暢逼真，模仿人類肢體語言的細微差別。

高度可定制：Nova的外觀和動作風格可以根據特定需求和偏好進行調整。

3、智能互動：我們能夠利用各種大語言模型 (LLM) 進行實時多語言互動。

實時多語言互動：Nova可以理解和響應多種語言的實時對話。

利用各種 LLM 的優勢：我們不會局限于單一的 LLM，而是根據具體任務和語言需求，靈活調用各種商用和私人部署的 LLM。

4、制作效率：

高效便捷：用戶只需上傳 3-5 分鐘的視頻，我們可在三個小時內完成普通版人形數字人的訓練。

制作成本低：與傳統的、制作成本昂貴的（80人天以上）、基于3D 建模的數字人制作相比，我們的高配版人形數字人制作成本控制在2人天。

應用場景

通過結合這些功能，Nova可以應用于以下場景：

多語言客服中心：可以充當多語言客服代表，為全球客戶提供 24/7 的支持服務。

國際會議：可以擔任實時翻譯的角色，消除語言障礙，促進流暢的交流。

語言學習：可以作為個性化的語言學習伙伴，提供沉浸式互動體驗。

解決方案產品包2：RAG+

RAG+是在RAG基礎上形成的增強形解決方案、集成了企業級應用所需要的AI應用Agent，以及LLMOps?？蓪崿F更便捷、更高效、更智能的企業級數據管理服務。

RAG+主要功能模塊

數據的對接與管理

IntelliCore AI解決方案一體機上的云原生的數據運維體系在AI應用領域中發揮著關鍵的作用，為AI的應用提供了從數據處理到模型部署的全面支持，為構建大規模、高效、可靠的多端應用與AI系統提供了必備基礎設施。

1. 數據接入與預處理：使用大數據工具接入數據，并對數據進行規范化、特征提取、異常值檢測以及去重等操作，提高數據質量，確保AI模型數據輸入的準確性。

2. 數據存儲與管理：提供定制化、高效、可擴展的數據存儲方案以及數據管理工具。

3. 快速訪問與實時分析：可通過內存數據庫、分布式存儲等技術來加速數據檢索和分析任務，為實時AI分析任務提供技術基礎。

4. 數據映射與集成：自動化抽取數據結構，形成數據關系知識庫，具備數據標注能力，為檢索器定位數據提供有效依據。

基于云原生的數據運維體系

多模態數據處理

在當前以AI主導的應用模式中，提取多模態數據中所蘊含的信息成為知識管理中的重要一環，IntelliCore AI解決方案一體機可定制多緯度大數據平臺，保證良好的多模態數據管理機制。

多模態數據處理過程

垂直領域大模型訓練

為適應不同數據條件的各類商業場景，潤和軟件IntelliCore AI解決方案一體機提供垂直領域大模型訓練方案，垂直領域大模型能夠針對特定領域的這些特性和模式進行深度學習和理解，從而提供更精確、更相關的預測和結果，提高數據的使用效率。具有如下特點：

1. 為適應不同數據條件的各類商業場景，提供多種模型訓練方案。

2. 支持大模型微調，包括不限于各類p-tuning、lora、qlora微調算法。

3. 支持所有開源大模型pretrain和全參數sft。

4. 通過多為了保證模型在特定領域微調后，模型能力不被損失和遺忘，指令微調階段會同步引入多種任務的指令數據集，例如：問答、創意寫作、對話、推理、數學、編碼、雙語能力等。

5. 多樣性的采樣算法，平衡各種系統指令上的數據分布，增強的跨任務魯棒性。通過網格搜索方法確認不同任務的數據比例。

多種訓練算法原理圖

RAG(檢索增強生成)

相較與開源的RAG方案，潤和軟件RAG解決方案具有以下技術優勢：

1. 增加了預檢索環節。

2. 優化了文檔分片環節。

3. 通過重排序、結果過濾、與提示詞改寫等措施提升了LLM處理Prompt時的效率。

RAG技術架構圖(黃色為潤和軟件特有部分)

智能數據問答

IntelliCore AI解決方案一體機基于以上數據平臺，提供了數據問答的基礎功能。包含文本，視頻，以及結構化數據的檢索，分為元數據處理與生成、數據召回和答案生成三個部分。

基于IntelliCore AI解決方案一體機的數據問答類應用具有以下優勢：

1. 多模態數據融合：RAG+解決方案包可以將圖像、文本、視頻等多種數據形態融合到一種數據體系中，從而打破多模態數據壁壘。

2. 跨模態特征提取以及交叉檢索：從多模態數據中提取關鍵特征，加深系統對對多模態數據的理解與應用。實現不同模態數據之前的交叉檢索。

3. 泛化性強：基于RAG+數據問答的衍生應用不局限于特定領域，各垂直領域均可應用。任何專業領域RAG+都可提供有效支持。

4. 實時更新擴展：不同與傳統模型式知識問答，RAG+的檢索&生成模式不會受模型訓練數據集的大小限制，可保證數據的新鮮度和準確性。

5. 高質量回復：用戶不再需要面對冰冷的專業數字，而是由模型進行分析后生成用戶更容易理解的語言或以圖形表現。

數據精準檢索

IntelliCore AI解決方案一體機基于RAG能力提供數據精準檢索類應用應用，以下為應用案例chat BI的具體使用優勢：

1. 自然語言交互：基于RAG的Chat BI可通過自然語言交互，使得用戶可以像與人類聊天一樣與系統進行溝通。

2. 智能分析：RAG模塊具有強大的生成以及分析和解釋對力，以自然語言或者圖形化方式幫助用戶理解數據背后的意義。

3. 廣泛的數據理解力：傳統BI只能分析用戶已知的數據，而對于RAG來說，平臺不存在數據死角，用戶可以通過對話和前端Agent工具探索未知數據，發現更多的數據價值。

ChatBI頁面截圖

決策生成

決策生成功能廣泛應用于金融投資決策、風控、金融測試領域，具體應用案例如下：

金融投資決策、風控

該類應用特點：通過分析大量的金融數據、市場趨勢和專家觀點，決策生成能力能夠生成有關投資策略、資產配置和風險評估的建議。對金融交易、客戶、風險事件等實體及其復雜關系進行建模和分析，快速做出投資決策和風控措施。

智能測試

A.測試用例生成：人工輸入測試用例的需求描述，智能測試平臺將自動完成測試代碼生成，測試用例執行，測試報告生成，以及測試報告分析等業務。目前可生成用例較人類設計用例覆蓋度達到80%以上，以往幾小時甚至幾天的工作量可以降低到分鐘級別；

測試用例生成業務流程圖

B.語音控制智能測試：利用AI技術，通過訓練和微調的專有NLP大語言模型，實現了通過語音或對話控制實現自動測試的功能。為用戶提供了更智能、便捷的測試體驗。

a.準確-智能：語音控制功能借助人工智能技術，通過語音識別和自然語言處理實現智能交互。通過對行業大模型進行訓練，使之能夠準確理解行業相關術語，準確理解客戶的語音指令，提供高效、智能的測試體驗。

b.簡單-高效：語音控制使得測試過程更加高效。用戶可以通過簡單的語音指令快速執行測試操作，相比于手動操作，語音控制能夠節省時間和精力，讓用戶能夠更快速地進行測試行為。

此系統可應用于各種需要進行實時決策的應用中，如股票交易等。

基于RAG+的智能撰寫類應用

決策生成功能廣泛應用于智能合同生成領域，具體應用案例如下：

1.智能合同生成

模版庫和模板定制：具有豐富且不斷補充的模版庫，包括各種類似的合同模板，同時用戶還可以根據客戶的需求定制和修改模板。

合規性檢查：包含法律條款大模型(Legal LLM)，可以檢查生成的合同條款是否符合法律法規和行業標準，并提供警告和修改建議，

智能優化：智能合同生成可以根據用戶輸入的需求進行做優化，具有自動補全、錯誤修正、語法糾正等智能優化功能，幫助用戶速生成完整，準確的合同文本。

智能合同生成業務流程圖

解決方案產品包3：智能視覺分析方案

智能視覺分析平臺（以下簡稱“RunMind”）是IntelliCore AI解決方案一體機視覺AI解決方案。致力于從AI硬件適配、AI場景落地、AI算法模型三個方面為客戶解決AI應用“小眾難”問題，助力視覺AI行業發展，具體優勢功能如下：

通過構筑行業化、邊端化、實時化的智能視覺分析核心技術，RunMind提供一種高復用、標準化的一站式視覺分析解決方案，以便快速開發和部署AI視覺應用，實現場景驅動的智能化廣泛應用和規?；涞?。

RunMind在應用側框架

解決方案產品包4：電力變電站智能分析

電力變電站智能分析解決方案是IntelliCore AI解決方案一體機基于國網的標準在電力領域的定制版解決方案，采用國產自主可控軟硬件，符合國網標準接口，即插即用；滿足實際多樣化場景中算法應用：表計讀數、狀態識別、設備外觀缺陷識別、環境檢測、作業安全管控、紅外熱成像分析、一鍵順控視頻雙確認。

主要功能

符合國網遠程巡視系統規范；

支持圖片分析與視頻分析；

支持點位算法調試和結果可視化；

支持算法單點驗證與部署可視化。

產品優勢

支持表計讀數：SF6壓力表，雙指針油溫表，油位計，避雷器泄露電流表，液壓表，計數器；

支持狀態識別：指示燈狀態，刀閘狀態，壓板狀態，開關狀、旋鈕狀態、儲能狀態；

支持外觀缺陷識別：滲漏油、金屬銹蝕、異物、表盤表計、呼吸器、絕緣子、設備本體；

支持人員作業管控：未戴安全帽、未穿工作服、未穿安全繩、人員倒地、越線闖入；

支持環境異常識別：煙火、積水、異物入侵、小動物；

支持紅外熱成像識別：設備溫度；

支持一鍵順控：隔離開關。

變電站遠程智能巡視系統產品整體架構

解決方案產品包5：化工視頻監控智能分析

結合化工領域的業務需求以及自身的業務沉淀，潤和軟件基于IntelliCore AI解決方案一體機邊端產品能力，發布了化工視頻監控智能分析設備。

方案優勢

1. 該產品軟件系統采用云邊協同方式，業務單元根據業務詳細需求設定采集設備和業務邏輯，并將業務流推送到相關的業務人員終端設備上；

2. 集團中心對基礎設備（如網絡等）、視覺分析設備和算法（如AI設備和AI能力系統）進行統一管理和規劃；

3. 系統支持算法能力可擴展，可定制，可提前統一規劃建設，以生產條件下的實際場景來驅動智能化建設，讓業務人員成為AI智能化的發起者和參與者，滿足公司系統和長遠的進行業務智能化規劃需求，助力

安全生產和高效生產。

化工智能分析系統產品框架圖

潤和軟件IntelliCore AI解決方案一體機和金融大模型FinLP與華為昇騰通過相互兼容性測試認證已與華為昇騰通過相互兼容性測試認證，充分滿足相關行業安全性、可靠性、穩定性的應用需求。目前，潤和軟件的AI服務能力涵蓋了模型訓練與優化、推理加速、數據處理與分析、自然語言處理、計算機視覺、個性化推薦、智能決策支持、智能安全監控和智能物聯網等全方位需求。潤和軟件致力于為企業提供高效、可靠的智能計算解決方案，幫助客戶實現業務創新與提升。

潤和軟件IntelliCoreAI解決方案一體機和金融大模型FinLP與華為昇騰通過相互兼容性測試認證

展望未來，潤和軟件將持續優化智能計算服務能力，助力企業提升運營效率、降低成本、優化決策，增強競爭力，取得更大商業成功。

審核編輯：劉清