听闻涂春燕被焚死，成君更是痛彻心扉，不能自抑。最后茶不思饭不想，寻死觅活。侍女惊惧万分，生怕被牵连，慌忙报到鸳鸯殿。琴棋知道病已还在气头上，只好亲自前往长秋宫。见琴棋前来，成君怒不可遏，上前就要撕扯。侍女香儿急忙拦住，一把推倒了成君。
琴棋摇头苦笑道：皇后罪孽深重，难道不自知吗？成君大怒道：本宫都是你！如果不是你，陛下也不会对我们家痛下杀手，一定是你在一旁蛊惑，贱人！你就是狐媚，专门祸国殃民的骚狐狸！
琴棋轻蔑一笑道：身为皇后，后宫嫔妃的孩子都是你的子女，你怎么忍心对太子下手？他常常喊你母后，你怎么舍得对自己的孩子下手？陛下对你寄予厚望，所以把后宫交给你打理，你却要毒死他最器重的儿子，这就是你对陛下的回报吗？妾为你不耻！
成君羞愧难当，扭过身去。琴棋叹气道：殿下毕竟是皇后，贵为后宫之尊，望殿下不要无理取闹，自取其辱。陛下曾说过，你是你，霍家是霍家。听陛下的旨意，只要殿下能够幡然醒悟，上书请罪，陛下就会宽宥皇后。成君怒目道：本宫凭什么相信你？别猫哭耗子假慈悲，本宫不稀罕！
琴棋笑道：臣妾早说过了，我不是为了皇后，而是为了陛下。皇后如果心里还有陛下，就不要让陛下为难。霍家罪有应得，不是陛下对不起他们，是他们对不起陛下。这些年陛下对皇后的恩宠冠绝后宫，难道皇后不知？如果你还有一丝良心，就不要在这个时候逼陛下。霍家有功被诛，皇后有义被废，传出去毕竟不好听。望殿下三思！
待琴棋走好，成君没有再哭泣，也没有再闹腾，反倒异常安静。病已听闻皇后不再哭闹，暗暗诧异。听闻是琴棋的功劳，露出一丝欣喜。半个月后，一切风平浪静，病已终于鼓起勇气来到长秋宫。
成君面无表情站在一旁，连正眼都不瞅病已。病已待了一会，只觉十分不自在，起身离去。成君突然泪如雨下，跪地道：陛下，臣妾想病已一惊，回头诧异地望着成君，只等她开口。成君一抹眼泪，哽咽道：臣妾想出宫！
出宫？什么意思？你要与朕分道扬镳？
是！臣妾曾想毒死太子，是臣妾对不起陛下。可陛下诛杀我全家，是陛下对不起我。咱们算是扯平了，从此互不相欠。臣妾求陛下放臣妾出宫！
你病已气急道，朕念在夫妻一场，不忍废你，你却如此忤逆！要是寻常人家，朕会毫不犹豫同意。这是在皇家，朕朕不能！不过，朕可以废了你，还你清净！
成君额头扣地，两行热泪滴滴滑落。病已也泪湿眼眸，背过身去，苦笑道：朕本想为你掩盖毒杀太子的事，保住你，告慰大将军在天之灵；但你执意逼朕，朕也只好背上娶恶妻、废皇后的罪名。成君抬头凄笑道：臣妾何尝不是背上了嫁错郎、毒太子的罪名？病已咬牙道：咱们总算互不相欠了！
半个月后，病已亲自拟诏废后。依照朝廷规制，废立皇后都需要到太庙上告列祖列宗。病已于是领着文武百官前往太庙祭拜，当着列祖列宗面，命给事中兼守尚书令梁丘贺宣读废后诏书。
诏书道：皇后霍氏，虽母仪天下，却生性狠毒，无仁心垂怜苍生，无功德泽被万民，与其母宣成侯妻显同谋毒杀太子奭，无皇后之德，无人母之慈，上不能奉宗庙祭祀，下不能为万民楷模，因之废黜霍氏皇后之位，贬为庶人。
成君被迁往上林苑的昭台宫居住，昭台宫在建章宫正南，未央宫西南，阿房宫旧址正北方。昭台宫面积不小，相当于建章宫的五分之一，临近昆明池。附近还有许多离宫别馆，如建章宫、储元宫、鼎湖宫、宜春宫、长门宫、宣曲宫、葡萄宫、犬台宫、扶荔宫等。有的宏伟壮丽，有的小巧玲珑，或艳丽脱俗，或妩媚多姿，都金铺玉户，豪华绚丽。
从长秋宫迁到昭台宫，成君明白，自己虽然出不了宫，却离开了喧闹的后宫，从此开始了幽居生活。回望未央宫，忍不住泪湿眼眸，喃喃自语道：永别了，吾爱！
不久为孝昭帝庙上祭，病已幸驾渭城县。祭祀宗庙，一般都是白天，显得隆重。只有病已喜欢在夜里入庙祭祀，夜深人静，更利于思考，他喜欢在夜晚对着祖宗牌位思考朝廷大事。以前霍光辅政时，他总是觉得很压抑，于是常常在夜晚祭庙，方便向祖先倾诉。后来大将军早过世，这个习惯就一直保留着。
这次也不例外，白天乘车前往，准备晚上祭祀。命中常侍许嘉、羽林令史高、侍中骑都尉张千秋、侍中金安上、给事中梁丘贺、驸马都尉金赏等人伴驾，派张千秋率北军前行，史高率羽林骑护驾。众人浩浩荡荡直奔渭城县，消息早已传遍四方。
车马正行驶间，突然先驱旄头骑长剑坠落，剑首插入了泥中，剑刃指向马车，马儿顿时大惊，险些脱缰。众人心下疑惑，骑兵纷纷下马叩拜。金安上和许嘉左右护驾，史高疾奔而来，一把提起旄头骑怒问：怎么回事？旄头骑惊慌失措，忙请罪。
病已从马车中出来，望着