会被认为冷漠自闭，感觉不到别人的愤怒，感觉不到别人的难过，也感觉不到别人的态度。难以社交的背后，可能是与脑部的构造有关的自闭症孩子。他社交困难主要是源于交流非常困难。这种困难不仅仅体现在语言表达方面，还源于思维方式和感觉统合等，更深层的原因。
有研究表明，自闭症人士无法进行有效的社会交流，可能跟脑部构造是有关的。耶鲁大学做了一项研究，发现有自闭症或阿斯伯格症的成人处理人脸信息时，脑部活跃的区域是非自闭症者处理物体信息时所用到的脑部区域。不过有固执行为的自闭症，在处理自己着迷的事物的时候，动用的可能是大部分人用来辨识脸部的区域，这可能解释到自闭症人士难以学会察言观色的原因。而在神经科学领域，科学家们发现人脑中有一群镜像神经元在被测试人做某一动作的时候，他们会产生活动。
而当被测试人在静止状态去观看他人活动时，这群神经元同样会产生相同的活动。研究者认为，这群神经元是我们学习、沟通与理解他人行为目的的生理基础。当自闭症青少年或成人与正常被测试组进行面部表情、手指行为等动作模仿时，镜像神经元系统的皮脂激活程度显著低于正常。并且在任务进行的时候，镜像神经区域的激活水平与自闭症的严重程度也有显著显著的相关。这可能也是导致自闭症人士社交障碍的原因之一。
