参知政事李石章曾经起草北伐檄文，但对韩重用陈志善苏师成之类表示不满，史弥远找到他，李石章沉稳地说：“倒不是仅仅因为皇后，韩太师是确实不能再干了，他没有能力却还死撑活挨。让他下台各人都有益处。”
不到十天，联络到的官员近二十名。大家一致的想法是，联名上奏，在皇后的配合之下，将韩侂胄赶下台。
这其中，王居安、张慈最为激动，私下曾公开地说：几天之后，朝局当耳目一新。
世上没有不透风的墙。在宰相部堂，韩侂胄单独问李石章：“听说有人要生事，参政知道吗？”
李石章以为事情泄漏，吓得面红耳赤，话都快说不出来。“恐怕，没有这样的事吧。谁能有这么大的胆子？”
韩侂胄说:“有也不怕，管叫他有来无回。”
闻得此言，史弥远大脑阵阵缺氧：这两个家伙怎么回事，到底有没有脑子，这种大喇叭式的招摇是会出人命的。
事不宜迟，他即速召集几位代表商议。讨论的结果是群臣联名上奏，由皇后和杨次山劝说皇上，一旦皇上松口，即下诏罢免韩侂胄。考虑到韩侂胄既是重臣，又是皇亲，最终如何处置，丁乔安说，还是请示皇上，将他发配到岭南。
张慈责问:你将他发配到岭南，过两年再回来报复怎么办？
史弥远一听，有道理，打蛇打七寸，送佛送到西，这种人要是翻身了，大家都没有好果子吃。张郎官的意思是--
张慈斩钉截铁：“杀了就完事了。”
史弥远感叹，“到底是将军的后代，干脆彻底，不留余地。好，就这么干！”原来，这张慈虽是文官，却是大将张俊后裔，乃祖的心狠手辣之风在他身上得以很好的遗传。