1 定义
行为记录(behavioral recording)是通过直接观察或自动记录参试者在任务执行过程中的行为表现,将行为操作转化为可分析数据的方法。它关注参试者实际做了什么,可以用于记录任务表现、操作策略和行为过程。
2 收集方法
行为数据主要可以通过系统日志记录、视频录像等方式获得。
系统日志记录(system logging)是指由实验平台或软件自动记录用户操作过程。研究者首先根据实验目的设置需要记录的事件(例如点击按钮、输入、切换页面等任何动作),当用户执行相应操作时,系统会自动记录。每条记录可以包含事件类型、发生时间(时间戳)、操作对象及相关参数等信息,并通过时间戳形成完整的行为序列,反映交互过程。
系统日志可记录的数据十分丰富,可以是与系统的交互(例如点击、按键、系统反馈等),也可以是人与人或人与智能体之间的交互(例如文本对话等)。在虚拟现实等三维沉浸式环境中,还可以通过传感器记录头部和手部在空间中的位置、姿态与运动轨迹。此外,系统日志也可直接作为行为绩效的测量工具。研究者可根据日志数据计算任务完成时间、反应时间、完成率等客观绩效指标。因为所有事件均由系统自动记录,系统日志的时间精度高、记录完整、不会遗漏操作、不受观察者主观判断影响,适用于行为定义明确、容易检测的情况。
视频录像记录(video recording)是指对实验过程进行录像或录屏,获得完整的原始行为资料。根据研究目的不同,可以记录人与系统、人与人之间的交互过程,或者参试者的身体动作、姿势、面部表情和语言交流等。视频录像能记录系统日志范围外的事件,或者无法自动记录的行为,还能保留实验情境与动作的上下文。另外,即使实验本身不把录像作为分析对象,录像本身也能为核对实验过程、补充行为记录和发现异常情况提供依据。
3 特点
与生理测量类似,行为记录不依赖参试者的主观评价,可以连续记录实际发生的行为,但行为通常由多种心理过程和情境因素共同产生,因此仅凭行为数据通常难以直接判断行为背后的认知过程或心理状态。
4 分析方法
- 预处理与准备工作:对于录像等非结构化数据,分析时常通过人工行为编码或计算机视觉自动提取行为特征的方式,将其转化为结构化数据(例如行为序列数据)。对于系统日志等非人工编码记录的数据,在正式分析前需要先根据数据类型,处理噪声、伪迹、数据缺失和异常时段,并记录具体的操作(例如剔除、插值、滤波或校正规则)。
- 统计检验或建立模型:行为或提取后的特征可以作为因变量的测量指标,使用方差分析、混合效应模型等方法进行统计检验。也可以将特征用于机器学习建模,或者对行为序列数据进行滞后序列分析、序列分析、过程挖掘等。
- 解释过程与结果的关系:过程数据分析应与结果变量的分析共同解读。此外,视频录像本身也可以进行定性分析,获得可解释性高的证据或结论。