目前已接入 30 多款設備,實現腦電、近紅外、心電、肌電、脈搏、皮膚電、眼動軌跡、面部表情、語音、姿態等 10 多種數據的同步采集和事件標記。實驗過程中的關鍵事件(如開始/停止播放視頻、刺激呈現、用戶反饋)自動與多模態數據進行時間同步。系統同時提供基于Eprime、Matlab、Pyhton、 Java、C、C#、C++等程序的打點事件交互接口,實現第三方自動打點。數據分析支持各類電生理信號、視音頻數據的預處理和特征提取,構建具有先驗知識的多模態指標體系。同時可以接入第三方績效與環境數據。
基于科研儀器SDK的深度接入,實現多設備同步控制、采集與打點。支持自有設備、任務、事件API的個性化接入
中國科學院心理研究所科研轉化成果,支持 30 多款國外主流科研設備以及國產化腦電、眼動儀等采集設備的接入
由中國科學院心理研究所組織國內相關領域專家,開辦面向電生理信號、眼動軌跡等多模態數據分析的培訓課程與技術指導
實驗管理模塊主要用于實驗前主試對實驗設備、關鍵打點信息進行配置維護。在此模塊主試可新增實驗(自定義實驗名稱)、選擇所需的采集設備并設置采樣率、自定義手動打點事件名稱和數量,管理和編輯實驗。
實驗中主試對設備運行狀態、 數據異常情況、被試狀態進行實時監控。
在此模塊主試可以創建被試,選擇預先創建的實驗并開始。在同步采集界面可以查看設備搜索與連接、采集狀態,支持采集前的數據預覽,采集支持獨立的開啟和結束,方便主試調試,確保設備佩戴到位。采集過程支持數據監控、手動與自動事件標記(刺激呈現系統的任務打點和第三方接口打點)。
數據管理模塊提供原始數據、特征數據、打點數據的導出、導入。數據記錄以列表形式展示,可根據實驗名稱、被試ID、采集時間、是否含有效數據等方式進行快速篩選,找到目標實驗與目標數據。
用戶可選擇同一實驗的多條數據批量導出,并且導出的所有設備數據會與打點事件同步融合。導出時可自定義導出文件名稱。
腦電、眼動等不同模態的數據共用一個時間軸,確保時間同步準確
數據分析示例_情緒
濾波降噪、重參考
獨立成分分析(去除眼電、頭動等偽跡)
事件相關電位分析(ERPs)
功率譜密度/能量分析
功能連接分析、多人腦電聯合分析
融合打點時間
輸出含預設特征指標的數據文件
眼動熱區圖
眼動掃視軌跡圖
數據分析示例_認知負荷
便于其他平臺將業務需要的打點事件同步到本系統中,用于給本系統采集的設備數據做好事件標記
支持類似模擬器等訓練平臺上的訓練績效數據上傳到本系統,實現績效數據的融合采集與分析
以標準API方式實時輸出所有采集的原始數據到第三方平臺
以標準API方式實時輸出所有打點事件數據到第三方平臺