关于石像无头的原因，至今仍是个谜。
在民间有许多说法，一种说法是石人成妖，糟蹋到附近农民家里去说这些石人晚上成精，把所有粮食都糟蹋粮食，被百姓打碎了，这种说法显然不能成立。
一种说法称，唐代初年，北方有位突撅族可汗名叫阿史那元庆，文稻武略，智勇双全，深受部落民族爱戴，不知何故，有人雕刻了他的石像立于乾陵。
他的儿子阿史那石明得知后，极为不满，于是便扮作喇嘛来到乾陵，一看果然如此，顿时怒从心中起，举起石块就要砸碎石像，却被护陵人发现，毒打一顿赶出陵园，他因此怀恨在心，便想出借刀杀人之计。
一天，趁夜黑窜人石像附近的农田大肆践踏庄稼，却造谣说是石像作祟，只有砸掉他的头，才能免除祸殃。
老百姓信以为真，纷纷冲上乾陵，砸碎了石像头。
阿史那石明趁机捡回了父亲的石像头，用包袱裹着背回家，从此乾陵上的壬宾像就成了无头石像。
这显然也是无稽之谈，因为乾陵附近的村庄，全都是守墓人，他们会因为一些传言就破坏乾陵？
还有，当时唐皇可是被称为天可汗，是所有少数民族共尊的王，他们的父辈能够出现在乾陵