1975年的头几个月，基辛格头上的光环开始黯淡。拉姆斯菲尔德开始挑战他对外交政策的控制。

    在某种程度上，基辛格的失势是在所难免的。1975年初，福特已在白宫站稳了脚，并开始考虑1976年的竞选。福特如果把外交政策完全交给基辛格，有可能会给人们造成他身为总统权威不够的印象，而仅仅是继承已经下台的理查德·尼克松的政策衣钵。政府里其他人对基辛格权力过大多有抱怨，就连局外人都越来越多地对此有了微词。1975年初，小说家约翰·赫什在福特的白宫呆了一个星期，他报道说，总统经常与一大群各式各样的顾问商讨经济、能源和国内政策，但是讨论外交政策的人只有一个，那就是基辛格。“这位总统在就职前很少接触外交事务，我听说，他只听一个声音，一个反复无常的声音，那就是亨利·基辛格的声音，”赫什写道，“是的，这是我整整一周都在思考的最令人不安的想法……外交、安全、国外情报——怎么能每天只听一个声音？”

    如果说基辛格即将失势的话，拉姆斯菲尔德则随时准备落井下石。一次，白宫新闻秘书罗恩·内森跟基辛格的下层助手发生了小摩擦，他发现，拉姆斯菲尔德把此事直接捅给了总统，这是他没有想到的。“我有一种不安的感觉，拉姆斯菲尔德在利用这件事，想把我扯进企图限制基辛格和国安会的幕后斗争中去，”内森写道。那年春天，报上开始出现报道白宫内部有人在打压基辛格的文章。“炮轰基辛格，”《新共和》杂志宣布道。

    1975年4月23日，北越军队正向南推进，发动夺取西贡的最后攻击，福特在华盛顿外旅行。他的演讲撰稿人为他起草了一段讲话，准备向美国人民承认，战争终于结束了。起初，总统有些犹豫，说基辛格可能不会同意的，但他还是发表了讲话。“今天，美国可以恢复越战前的自豪感了，”福特对图莱恩大学的听众说，“但对美国而言，靠重打一场已经结束了的战争，是不可能做到这点的。”演讲颇得好评，但是谁也没有找基辛格审核讲稿，基辛格大发雷霆。他坚持说，这次演讲使美国没有足够的时间从越南撤退难民。

    基辛格后来写道，白宫工作人员不让他接触关于越南的演讲稿，是“策划了一场典型的华盛顿官场的胜利”。这一批评出自基辛格之口有点不可思议，因为他本人曾策划过太多次这类华盛顿官场的花招。然而，随着拉姆斯菲尔德巩固了对福特白宫的控制，基辛格明显大势已去。

    美国最终从越南撤退的时候，在福特的白宫里宣读这场战争的墓志铭的，正是拉姆斯菲尔德。
政府处理越战最后的混乱时刻时，把事情搞得一团糟。白宫向媒体宣布，美国人已经全部空运出西贡，结果却在几分钟之后发现，一百多名海军陆战队队员仍然在美国使馆内等待直升机。几小时后，海军陆战队获得了营救，但是，问题是怎么对媒体讲第一次宣布的时候其实撤退并没有结束。“基辛格想把责任推给五角大楼的军事通讯中心，尽管宣布了错误的消息是因为他本人错误地断定(美国大使的)离开就意味着撤退的结束，”白宫新闻秘书罗恩·内森写道。

    内森希望忘记这一切，就好像政府最初说结束了的时候，撤退就已经结束了。但是，身为白宫办公厅主任的拉姆斯菲尔德拒绝这样做。

    “这场战争已经有了这么多的谎言、这么多的推诿，最后再用谎言来结束战争是错误的，”拉姆斯菲尔德说。他命令新闻秘书要对政府犯的错误“实话实说”。许多年之后，当美国与伊拉克交战时，拉姆斯菲尔德时任国防部长，他并不总是这么实话实说的。