由于马谡的出色表现，导致第一次北伐功亏一篑，此后魏国加强了防备，采取以空间换时间的方法，放弃一切不重要的城市，拖到了诸葛亮星落五丈原的那一天。
此后，吴懿也表现的非常低调，朝堂之上，再也难以见到他的身影。
“怎么，哥，你这是想退出了吗？”突然有一天，吴苋问他。
“妹妹啊，你是不懂政治啊，我现在之所以这么消沉，只是因为陛下再丞相死后开始宠信小人，不思进取了，我强行要继丞相之意志，那么很快就会有小人告发我了。”吴懿说。
“大哥，你以为我不了解你啊？你现在想的是陛下和朝中很多人已经忘记了最初的理想，现在他们和曹魏那些人没有什么区别了吧！”
“这都被你看穿了？是的，我确实是这么想的，目前拥有救民兴汉目标的人越来越少了，陛下更是完全只顾享乐不管朝政，我就算攻下雍凉二州，那么不过是延缓了三国结束的时间，反而使得百姓的痛苦加剧。恐怕朝廷上下也就姜维和之前我们入蜀时的那些老将还有天下之心了吧，所以，我想退出了，我的能力已经不足以扭转天命了。事实上，早就没有那个可能了吧。”
“这好说，我可是太后，我这样这样，你再趁机伤疏请求告老还乡，就行了。”吴苋说。
数日之后，吴苋带领刘禅的后宫之一胡氏去了自己家，在家里，吴苋多次挽留胡氏，胡氏不好意思回去，就和吴苋，当然包括吴懿住了几天。
刘禅得知此消息，他虽然对政事不上心，对这种事还是上心的。于是就问吴苋你叫胡氏回家干吗，吴苋说：“胡氏受屈，吴懿心不安。”
刘禅顿时起疑，说：“你哥哥和胡氏有什么关系？”
吴苋笑了：“我哥哥都已经是个老头子了，生理功能早就不行了，能有什么事？”
刘禅想了想，确实，客观事实表明吴懿绝对是清白的，即便如此，刘禅还是不喜吴懿。
吴懿趁机请辞，刘禅想了想就批准了。不过，念在吴懿之前屡立战功，刘禅还是问吴懿：“朕有什么能赏赐你的吗？”
吴懿说：“臣不敢，但得马忠相随，臣便了无遗憾了。”
刘禅根本不知道马忠为何许人，他也懒得调查，就批准了。
第二天，姜维上朝时见到吴懿不在，问左右大臣，左右把事情说了一遍，姜维上奏：“陛下，吴懿乃当世第一名将，将来守卫大汉领土非吴懿不可啊！陛下，难道您就想失去您现在所有的这一切吗？您要是还想坐在这个位置上，还望请回吴懿，如此大汉方有希望啊！”
刘禅猛然醒悟，再派人找吴懿时，吴懿和马忠早已不知去向。
而魏明帝曹睿得知吴懿离开蜀国朝廷时，便问姐姐曹婴：“我听你们说吴懿如何如何，可惜我没有真正见过他，你说说吴懿怎么样？”
曹婴说：“爷爷志向，得吴懿无憾也。能让爷爷都动心的人才，那能差的了吗？”
曹睿听了，忙派王基：“你带人暗中寻访，一定要帮我请到吴懿，就说如果他肯帮助我，我赦免他的叛逃行为并且封多大官要多少钱都可以商量！”
王基说：“臣领命，只是，能否找到吴懿，臣也不抱希望。”