也正因为珍贵，这里也成了犯罪分子的觊觎之地。“上世纪八九十年代，文化遗产成为境内外犯罪分子觊觎的对象，一时间盗掘古遗址、古墓葬，盗掘田野石刻造像，走私文物的案件屡屡发生。”曾在上世纪九十年代负责文物安全工作的李宝才回想起当年的情况依然记忆犹新，“在1996年那次盗案前，幽居寺塔内的佛像就不断被盗。1990年丢了3尊小佛龛，1992年丢了阿閦佛首。”
1992年春阿閦佛首被盗后，河北省文物局曾鉴于幽居寺地处偏僻，保护难度大，决定将塔内的3尊佛像搬运到河北省博物馆（今河北博物院）暂行保管，但因塔门窄小，未能搬出。只能用水泥封堵塔门，加固围墙，更换安全锁，增加义务文物保护员看管。
但这些措施依然没能挡住窃贼的魔手，另两尊佛像又遭首身分离之痛。“这个案子是当年的一个文物失窃大案，很快就被侦破。犯罪嫌疑人被抓获，砖塔石门楣、石柱等文物被追回，但佛首已流失海外，不知所踪。”李宝才说起当年事，依旧感觉揪心。
幽居寺塔文物被盗后，河北省文物局采取了紧急措施，不得已拆除了塔门，将3尊佛像的佛身，连同塔门石拱券、石门框、《赵郡王高叡修寺之碑》等其他石质文物运到石家庄，保存在河北省博物馆。
当刘建华在博物馆“仰望着这三尊无头的佛像”时，她用“心痛不已，眼在流泪，心在流血”来形容自己的感受。她将手头掌握的佛像资料整理出来，写成《北齐赵郡王高叡造像及相关文物遗存》发表在1999年的《文物》月刊上，让更多的人了解并关注此事。她希望能为找到佛首尽一份力。
