《宋书》曰：明帝以故宅起湘宫寺，费极奢侈。以孝武庄严寺刹七层，帝欲起十层，不可立，分为两刹。各五层。新安太守巢市之罢郡，还见帝，曰：“卿至湘宫寺未？我起此寺，是大功德。”虞愿在侧曰：“陛下起此寺，皆是百姓卖儿贴妇钱，佛若有知，当悲哭哀湣。罪高佛图，有何功德？”帝大怒，驰曳下殿。愿徐去，尾容。