，下人且谋代上位。臣不便明言，但云臣下有谋。”霍光闻言大惊，也不由刘贺主意，即将夏侯胜释放复任原官。
霍光想废立之事不宜再延。便一面与张安世着手预备，一面遣田延年密报丞相杨敞。杨敞本霍光故吏，霍光料他必然同意。因为他现为丞相，位居百僚之首，所以预先告明，免得会议之时惊慌失措。田延年奉命到杨敞家中备细说知。杨敞一听吓得汗流满背，不知如何答话。田延年起身出外更衣，杨敞独自坐在室中，杨敞之妻为司马迁女，这时急从东厢趋出对杨敞说道：“大将军已有成议，特使九卿来报君侯，君侯若不亟允，祸在目前了！”杨敞迟疑未决，可巧田延年更衣归座，杨敞妻不及回避，索性坦然相见，与田延年当面认定，愿奉大将军教令。田延年还报霍光，霍光又念起苏武现在免官家居，遂邀其共同谋议，一则自己可以取信于国人，二则苏武也可以借此恢复官位。
霍光不动声色，暗中布置十余日，诸事都已完备。于是遍召丞相御史将军列侯等齐集未央宫会议。
百官闻命陆续到来，其中只有少数预谋之人知道此会非同小可，心中各自担惊。此外大都不知所议何事。不消片刻众人到齐，大众眼光注定霍光一人。只听霍光说道：“昌邑王昏庸无道，恐怕要危害社稷，大家说应该怎么办呢?”群臣见霍光不称刘贺为皇帝而称昌邑王，一个个都吓得说不出话来。田延年看这情行不由站起身来，手按剑柄说道：“先帝把天下托付给大将军，是因为大将军忠厚贤明，能够安定刘家的天下。今天大将军作出的决定，容不得半点迟疑，谁要是不响应，我马上砍了他的脑袋!”霍光道：“所有责任由我来负。”群臣听了都趴在地上磕头说：“我们一定遵从大将军的命令!”于是霍光让尚书令把事先写好的奏章拿出来，请大臣们在上面一一签名。
此奏章乃霍光预先作就，群臣署名已毕，又随同霍光前往长乐宫入见皇太后，备述昌邑王淫乱情形，说他不可以嗣大位，请太后下诏废之，太后准奏。霍光即请太后备齐车驾前往未央宫，预备升坐承明殿宣诏，又请太后下诏，遍饬各禁门守卫之人勿使昌邑群臣擅入。
恰值刘贺入朝太后初回。守门宦者早已奉到太后诏书，望见刘贺入内便一拥上前将门闭上，不让昌邑群臣入内。此时刘贺如在梦中，外间举动丝毫不知。见众人无故关门闭户，觉得诧异便问何为？霍光在旁跪下答道：“皇太后有诏，不许昌邑群臣入内。”刘贺道：“既是皇太后有诏，不妨从容办理，何至如此惊人？”言罢入内。