人機互動研究方法

研究方法

• 研究者列出了所有可能的產品和平台組合，並要求受訪者選擇他們熟悉且能進行評估的選項。
• 研究者努力為每個產品分配 2-3 名參與者，符合啟發式評估的建議。
• 參與者包括研究人員、設計師、人機互動或設計實習生以及工程師、產品經理或供應商。
• 參與者來自 4 個不同國家，橫跨 3 個大洲。

參與者

• 49 人參與研究，其中 29 人為女性、18 人為男性、2 人不願透露性別。
• 參與者的年齡介於 18-55 歲。
• 參與者在人機互動/使用者體驗領域工作或學習的經驗從 1-20 年不等。
• 39 名參與者自認非常擅長或非常擅長使用折扣可用性測試方法，而 10 名參與者則自認經驗中等或低（研究者排除了經驗“非常低”的參與者）。

數據分析

• 研究者檢查參與者回答的數據，以確保準確計算每個產品中提出的指南的應用和違規案例。
• 研究者使用應用和違規的總數量作為指標，以了解指南在產品中的應用程度。
• 研究者根據產品的主要用途案例將產品分組，並根據市場份額選擇每個類別的兩款產品進行評估。
• 研究者選擇了 20 款產品進行評估，其中 2 款來自微軟。
• 研究者嘗試在各種平台上評估產品，並使用利克特量表詢問參與者對指南的清晰度和應用程度。
• 研究者還提供了指南的應用和違規範例，並標記為“明確應用”或“應用”。

指南範例

• 指南 1：明確說明系統能做什麼。
  • 範例應用：
    • “這條指南應用於活動摘要視圖，顯示我‘移動’、‘運動’和‘站立’指標的摘要。”
    • “顯示它跟踪的所有指標並解釋如何...”。
  • 範例違規
    • “沒有跡象表明時間估計的準確性或條件如何變化。沒有提供關於 AI 性能的測量指標”。
    • “‘魔術’這個詞對我來說意味著他們不清楚如何解釋正在發生的事情（這意味著它可能會做出我意想不到的瘋狂事情）”。