行为角色扮演是直接观察法的一种变式，它比一般的人工设计情境采用了更多的结构化或标准化因素。角色扮演测验一般向儿童呈现一组标准化的场面或情境，要求儿童面对场景做出就像真正碰到同一情境时一样的反应。通过选择不同的场面，可以较短时间内观察到在自然情境中可能要好多天才能观察到的社会技能。角色扮演观察虽然对干预效果比较敏感（Berler等，1982），但还没有研究证据表明儿童在角色扮演中得到改善的技能迁移到了日常生活的交往之中，或改善了同伴和教师的评定。研究者考察了角色扮演行为在儿童的自然交往、诊断分类、同伴接纳及教师评定方面的预测力，结果绝大部分研究都表明，角色扮演行为的这类效标关联效度不够高。
大多数研究都报告直接观察有较好的评分者间信度，重测信度则依行为取样的不同而变化，如果要将几种特定行为联合起来得到一个单独的分数，内部一致性不显得非常重要。在效度方面，尽管直接观察有较好的表面效度，但效度因素仍需要在实际观察中认真考虑。所观察的行为应该与有效的社会效标如同伴接纳、教师评定相关。例如由于儿童的自主性行为与同伴接纳和教师评定没有相关，这种观察作为社会技能指标就是无效的；同样，将交往发生率作为社会技能指标也要极为谨慎地选择，因为研究表明，交往发生率并不能预测儿童的社交地位（Hops，1988）。
为便于观察，在对行为进行操作定义时，研究者要确定行为的结构，因而观察分类的结构效度也是很重要的。如果功能不同的行为被作为同一类编码，则编码的结构效度会下降。另外，如果社会技能训练能增加目标行为，也可为直接观察的效度提供佐证。
（责任编辑：zxwq）