斉衡2年(855)、大地震によって大仏の頭部が落ち、その後修復されたが、源平の争いのあおりから治承4年(1180)に平重衡の軍勢により大仏殿をはじめ伽藍の大半が焼かれた。