東擎科技也已經把 AI BOX-A395 驗證為可應付更廣泛的本機推論需求。在同一檔展覽中,東擎與群聯電子(Phison Electronics)共同發表另一項合作:展示一套 120B 參數的大型語言模型,僅用 64 GB 系統記憶體加上 85 GB 的群聯 aiDAPTIV 快取記憶體就在本機端順利執行——記憶體占用大約只有傳統部署方式的一半 。雖然這場展示更偏向一般企業 AI,而非鎖定合規驗證場景,但它說明了隨著模型體積持續長大,這類設備在本機端執行治理工作負載時,還有多少餘裕可以運用。
資策會的 ASTRA 引擎是讓這台設備不只是高效能迷你電腦的關鍵軟體層。它把源自歐盟 AI 法案(EU AI Act)、**OWASP LLM 十大風險(OWASP LLM Top 10)以及美國國家標準暨技術研究院 AI 風險管理框架(NIST AI RMF)**等國際規範中的監管要求,編碼成機器能夠執行的檢驗項目 。比起動輒耗時數週的人工稽核週期,這台設備在 AI 模型載入或更新當下,就能自動執行整套合規掃描。所有檢查都在本機完成,因此敏感的病例資料、金融交易紀錄或企業專屬的製造參數,從頭到尾都不會離開設備本身
。
這套設計對症下藥地處理了三個讓雲端合規窒礙難行的實務限制:
這款設備的亮相時機拿捏得相當精準:歐盟 AI 法案已在 2024 年正式生效,針對高風險 AI 系統的強制執行將從 2027 年起分階段上路。一套能把 NIST 和 OWASP 的控制措施跟歐盟規則一起編碼進去的邊緣原生合規工具,為受監管產業提供了市場上還不多見的「單箱搞定」選項。
不過,目前這些宣示仍建立在早期展示的基礎上。現有資料可以佐證 COMPUTEX 的展出以及底層硬體規格,但獨立的效能標竿測試、真實環境的吞吐量數據,以及 ASTRA 引擎如何持續追蹤不斷演變的法規文本等細節,都還沒有公開 。受監管的企業應密切關注資策會與東擎科技後續有關認證與第三方測試的消息。
對臺灣硬體廠商而言,這套設備代表了一次有意識的價值鏈向上移動——把工業等級的邊緣運算能力,跟本土自主的治理智慧財產權結合在一起。如果這個模式能夠擴大,或許就能成為其他司法管轄區的參考藍圖:既要一套可供查驗、可供稽核的 AI 治理機制,又絕不能犧牲資料落地的底線。
Comments
0 comments