概念設計作為決定產品創新程度的關鍵階段,具有典型的重創意外形、弱尺寸約束等特征,需要用戶自由表達其設計意圖。作為其核心支撐工具,現有的計算機輔助設計軟件(Computer Aided Design,CAD)所采用的“鼠標+鍵盤”式傳統交互模式在使用的自然性和友好性方面存在很大局限性,難以支撐產品概念設計階段設計思維的自然表達以及創新方案的生成。因此,探索一種可自然表達用戶設計意圖的智能交互模式將成為增強CAD產品設計能力的重要途徑之一。
考慮到通過用戶的腦電、眼動、手勢等多模態原始信號讀取用戶的產品設計意圖是一種更為直接、自然的設計意圖表達方式,具有替代傳統操作模式的潛力。因此,本系統結合產品設計對智能人機交互技術的發展需求,以多模態信號的采集與數據融合分析為主線,利用機器學習等人工智能技術實現對用戶設計意圖的精準分析與判別,搭建了腦、眼、手信號融合的多模態智能交互系統,為新一代面向產品概念設計的多模態智能交互技術提供了一種全新的思路和技術手段。
系統演示視頻鏈接:
圖1.CAD指令操控精度不低于95%用時
計算機輔助產品設計、創新設計、人機交互等領域
隨著智能設備的普及和人工智能技術的發展,廣大用戶們對于更加智能、便捷交互方式的需求不斷增加。腦機接口技術、手勢識別、眼動追蹤等技術的不斷進步,為多模態融合智能交互技術的發展提供了堅實的技術基礎。多模態融合智能交互技術能夠更好地理解用戶意圖,提供個性化、智能化的服務,從而顯著提升用戶的交互體驗,具有廣闊的發展前景和極大的市場潛力。
面向產品概念設計的多模態智能交互,可以采集用戶的手勢、眼動等多模態生理數據,為CAD軟件的操作優化提供更加全面、深入的用戶行為分析,提高設計師的工作效率,大幅降低軟件優化成本。
目前本技術已經運用于多模態智能交互原型系統,可實現模型的生成、選擇、縮放、旋轉、平移、刪除、視圖導航等常用CAD設計建模指令。用戶測試實驗的結果表明,原型系統在實際應用中表現出色。
圖2.多模態融合的幾何模型自然操控系統應用場景
圖3.手眼融合的自由形體建模過程
掃碼關注,查看更多科技成果