交流在我们的生活中具有核心功能：肢体语言、手势、注视方向、语调、声音、词语，应有尽有。我们每天都使用单词和句子来相互交流，互相询问事情进展如何，告诉对方我们的想法，并谈论让我们忙碌的事情。言语行为与交流密不可分。


让沟通更轻松
但是，如果说话或造词变得很困难或不可能要怎么办？如果你知道你想说什么但你说不出来。例如，因脑瘫导致的严重口腔运动技能障碍或对呼吸和发音的控制受限的情况。或者由于 Rett 综合征，一种罕见的遗传性神经发育障碍。这种障碍特别影响言语、手势的表达和身体的协调性，使患者难以通过互动交流被理解。

这种交流能力的下降往往导致交流受限，成为阻碍沟通的障碍，阻止沟通的发展，并会限制对社会生活的参与度。有什么方法可以帮助这些人用言语以外的方式进行交流，让沟通对他们来说变得更加容易呢？


使用眼睛注视辅助技术进行交流
我们可以使用注视辅助技术 (EGAT)，这种技术可以为有严重运动和语言障碍的儿童提供其他交流机会，通过他们的眼睛来控制计算机上的通信界面。这项创新技术可以使用安装在平板电脑/电脑上的专用红外摄像机检测眼球运动。

它需要较少的体力和沟通伙伴的帮助，从而使孩子有机会主动表达意见并与他人互动。为了享受共同参与和建立自我效能感，获得更多控制权对这些孩子来说至关重要。

由来自瑞典斯德哥尔摩大学的 Yu-Hsin Hsieh 和来自瑞典乌普萨拉大学的 Maria Borgestig带领的国际团队调查了与非注释辅助技术条件相比，使用注视辅助技术对交际互动的影响。


交流是互动的一部分
交际互动为生命早期的认知和社会发展奠定了基础，并在我们的一生中继续影响我们的行为、社会模式和思想。它包括诸如发起对话、给出响应、回答问题和提出请求等行为。

对于这项国际研究，研究团队制定了两个要研究的问题：
当使用或不使用注释辅助技术时，有复杂需求的儿童/青少年及其沟通伙伴会表现出哪些互动结构？
当使用或不使用注释辅助技术时，有复杂需求的儿童/青少年及其沟通伙伴会使用哪些交际功能？

实验员预测与不使用注释辅助技术时相比，儿童在使用注释辅助技术时会更频繁地主动进行交流互动，并且交流伙伴会减少交流次数并提出更少的请求或要求。数据是从瑞典的辅助治疗中心以及迪拜和美国的特殊需求学校收集的。


编码行为以调查交际互动
在连续三天的时间里，被试（4-19 岁）和他们的交流伙伴每天在自然环境中记录 5-10 分钟。他们的面部表情、注视方向、身体动作和手势，以及带有 EGAT 的计算机屏幕在交流活动中被捕获。

例如，此类活动包括玩耍、执行教育或进餐任务，或与成年人谈论发生的事情。被试参与了注释辅助技术和非注释辅助技术两种互动方式。

使用系统的编码方案来研究交流互动的特征，编码方案包括主体（例如儿童和父母）、行为（例如主动和被动响应等动作）和指定主体行为的修饰符（例如请求或提供信息）。

观察、编码和分析行为
本次实验选择了Noldus的 The Observer XT 14.0用于视频编码分析，这是一种用于行为研究的软件，可以在精确到毫秒的时间线上对行为进行编码和可视化。 图 1 显示了一个参与者在时间轴上对移动和交流功能的行为观察的可视化示例。每个视频编码都被连续分析，这意味着行为在它们出现时被编码并存储在软件中。该软件包含统计分析，用于计算二元组中每个特定交际交互行为的每分钟速率。
The Observer XT 同时也用于分析参与的二元组中每个指定的交流互动行为，以及检查评分者间的可靠性。

图1

结果
研究小组分析得出，使用注释辅助技术时，儿童/青少年会更频繁地发起对话，并倾向于在交流互动中提供更多信息。在非注释辅助技术条件下，他们的沟通伙伴进行更少的交流，发起对话更少，并且提出更少的请求(表格2)。表格1展示了被试的交流活动，包括非结构化的游戏活动和进餐时间以及学校、家庭或医院环境中的结构化学习任务。表格3中列举了具体每个被试的沟通行为情况。

表格1


表格2


表格3

动作、交际功能和交际方式的相互关系分析
如图 2a 所示，在 EGAT 条件下，大多数儿童倾向于在他们主动做出交流行为（平均每分钟速率 = 0.98），而在 NEGAT 条件下，发现较少的主动行为，并且没有明确模式的个体差异。 在儿童的反应中，提供信息是 EGAT 条件下最高的交际功能（平均每分钟速率 = 1.24），而确认/拒绝代表 NEGAT 条件下最高的交际功能（平均每分钟速率 = 1.44）。 与 EGAT 条件相比，通信伙伴在 NEGAT 条件下发起的请求量几乎是其两倍，请求率更高（每分钟平均速率 = 2.84 对 1.50）。
在模式方面，如图 2b 所示，儿童主要在交际回合中通过 EGAT 提供信息（平均比例 = 0.94），并主要通过手势传达确认/否认或自我分享表达（平均比例 = 0.70, 0.91） ). 在 NEGAT 条件图 2c 中，他们主要使用手势来实现各种交流功能（平均比例 = 0.57–1），除了提供他们同样使用手势的信息以及低科技设备和自然模式的组合（平均比例 = 0.40） , 0.41). 在两种情况下，合作伙伴主要通过语音进行交流功能（平均比例 = 0.56、0.57）。





总结
结果表明，与 NEGAT 条件相比，使用注释辅助技术时，儿童/青少年增加了交流互动的主动性，并且交流伙伴降低了交流转向的主导地位，并且在交互结构中主动得更少。此外，在交际功能中，儿童/青少年倾向于使用 EGAT 来提供更多信息，与 NEGAT 条件下的互动相比，沟通伙伴对指导儿童反应行为的要求更少。沟通活动和环境结构（例如，游戏或学校课程）、眼球控制技能和沟通能力可能会影响互动。注释辅助技术提高了沟通清晰度、使具有复杂需求的儿童/青少年获得沟通能力以及促进自然环境中信息共享的潜力。

这项研究让复杂需求的儿童可以从使用注释辅助技术中受益，增强了社交互动中的交流能力。它将扩大他们作为积极参与者的作用。在未来我们需要更多这方面的研究，招募更多类型的参与者并结合不同的研究方法来提高泛化能力，并检查沟通伙伴使用的互动策略来支持儿童的沟通行为，同时使用注释辅助技术来指导未来的干预。



参考文献
Hsieh, Y.-H.; Borgestig, M.; Gopalarao, D.; McGowan, J.; Granlund, M.; Hwang, A.-W. & Hemmingsson, H. (2021). Communicative Interaction with and without Eye-Gaze Technology between Children and Youths with Complex Needs and Their Communication Partners. International Journal of Environmental Research and Public Health, 18, 5134.


关注诺达思公众号，获取更多产品信息及学术文章！