梁毗为大理卿，位上开府。时见左仆射杨素贵宠擅权，百僚震慑，恐为国患，因上封事曰：“臣闻臣无有作福，臣之作福，其害于而家，凶于而国。窃见左仆射、越国公素，幸遇愈重，权势日隆，缙绅之徒，属其视听。忤意者严霜夏零，阿旨者膏雨冬沐；荣枯由其唇吻，废兴俟其指麾。所思皆非忠谠，所进皆是亲戚，子弟布列，兼州连县。天下无事，容息异图；四海稍虞，必非福始。夫奸臣擅命，有渐而来，王莽资之于积年，桓玄基之于易世，而卒殄汉祀，终倾晋祚。季孙专鲁，田氏篡齐，皆载典诰，非臣亿说。陛下若以素为阿衡，臣恐其心未必伊尹也。伏愿揆监古今，量为处置，俾洪基永固，率土幸甚。轻犯天颜，伏听斧锧。”高祖大怒，命有司禁止，亲自诘之。毗极言曰：“素既擅权宠，作威作福，将领之处，杀戮无道。又太子及蜀王罪废之日，百僚无不震悚，唯素扬眉奋肘，喜见容色，利国家有事，以为身幸。”毗发言謇謇，有诚亮之节，高祖无以屈也，乃释之。素自此恩宠渐疏。