第二天，高风去了两趟皇宫，皇上都没有召见他，只得在宰相府的偏殿里呆了一天，陪骆宾王下了一整天的象棋。傍晚时分，他快马加鞭连夜向蝴蝶谷赶去。
接下来的几日，一则流言蜚语，开始在宫中一传十、十传百的慢慢传播开来，皇上见都不愿意见他，高风失宠了。
高风之所以落得如此下场，是因为他从福建抗倭回来后，一直不去拜见皇上，还跟着亲近庐陵王的一帮朝臣在宰相府起哄，而后又大肆诋毁武氏宗亲，硬扛皇帝陛下，把皇上气得上气不接下气，差一点咳血晕倒。更要命的是，据值勤的太监说，皇上当晚回到皇宫，还在梦中骂过他。还有，他三番五次地跑到皇宫去面圣，皇上都没有搭理他。这一切的一切都说明一个问题，那就是高风失宠了。
他没有身份，没有背景，谁也不知道他家是哪里的，家里究竟都有什么人？他唯一能够依仗的就是陛下的恩宠，一旦失去了陛下的恩宠，他就像一只流浪狗，温饱问题都很难解决，朝堂上随便的一方势力，都能让他死上一千次，甚至连骨头渣都别想剩下，更别说整天在皇上面前吹枕边风的薛怀义了。
玉宗宗主元艳丽苦口婆心地劝道：“这件事情的后果很严重啊，你仔细想想，你在神都得罪了那么多狠人，辛臣薛怀义、北门学士宋之问、梁王武三思、宰相武承嗣，毒宗谢超、还有一帮子阉人，他们哪一个是善茬？毒宗的谢超、杨洋、欧阳怀这些人可都是神都的黑恶势力，他们灭人宗门、杀人放火、欺行霸市、强奸妇女，无恶不作，一旦你失去皇上的庇护，他们就会马上采取行动，恨不得生吞活剥了你……”
元艳丽话音刚落，蝴蝶谷外，忽然响起了一阵吆喝声，她和高风急忙向谷口跑去，哪知刚到谷口，便看到两名大理寺的捕快拿着铁镣枷锁，正得意洋洋的站在一块大石头上等他，旁边还有列队整齐的一百名金吾卫。
其中一名捕快看向高风，有些幸灾乐祸地说道：“高将军，有件案子牵扯到您，请您配合我们一下，随我们去大理寺走一趟。”
树欲静而风不止，高风不想招惹谁，可是公家的人却是一而再再而三地找他麻烦。先是皇上颁布诏敕，让他跟随薛怀义征战倭寇。再是庐陵王化装前来和他拜把子，要知道，不拜是不行的，不但他性命不保，