1964年11月，杜聿明应邀参加第四届全国政协会议，并被选为全国政协委员会委员。从昔日的战犯，到今天的政协委员，走进人民大会堂参政议政，这是一个多么大的变化呀。正当杜聿明准备大干一番的时候，“文化大革命”开始了，周围的一切立即陷入了混乱和无序之中。在这场浩劫中，杜聿明也未能幸免。一天，“破四旧”的“红卫兵”来到了杜聿明家中，把他家的《文史资料选辑》、照相机、缝纫机都搬走了，最后又要把杜聿明大儿子的骨灰盒当作“四旧”拿走丢掉，曹秀清急了，她冲上去说：“这是我从美国带回来的，不能丢!”骨灰盒总算没被拿走。
事后周总理知道了这件事指示政协领导，一定要把文史专员作为保护对象，除了照发被扣的工资，还要保证他们本人及家属的安全。一天早晨杜聿明走出家门时，突然发现墙外不知是哪个单位的「红卫兵」贴了一张布告：“此院内已经检查，以后不要再来破四旧。”
此后果然再也没有“红卫兵”来折腾了。几年后杜聿明才知道，这是周总理指示对他及他的家人采取的保护措施。杜聿明一家一直深深感激周总理对他及他的家人的关心与爱护。
70年代初期，随着尼克松访华，中美关系有了很大改善，人员的交往日渐增多。杜聿明的女婿、诺贝尔物理奖获得者杨振宁博士于1971年和1972年两次携夫人杜致礼回祖国探亲讲学。杨振宁博士一踏上国土就受到人民政府的热烈欢迎和热情接待。晚辈的到来使杜聿明夫妇十分高兴，也使他们在感情上得到了很大的快慰。
日理万机的周总理专门抽出时间来接见杨振宁夫妇，每次都邀杜聿明夫妇作陪。周总理与杜家两代人从科学研究谈到社会问题，从国际形势谈到家庭生活。彼此间像老朋友一般谈笑风生，毫无拘束。细心的周总理发现，杨振宁在喊曹秀清时称「妈妈」，而对杜聿明则称“杜先生”，便纠正说：“应该称岳父大人”。闻听此言，大家不禁哈哈大笑起来。
1973年夏天，杨振宁博士携夫人第三次回国，7月17日，毛主席接见了他，杨振宁博士转达了全家向毛主席的问候，毛主席则对杨振宁说：“代问你岳丈好。”并与杨振宁合影留念。此后，杨振宁与毛主席合影的大幅照片一直挂在杜聿明家的客厅里。
党和国家领导人的关怀，使杜聿明一直铭记在心里。在此后的岁月里，杜聿明一直在尽自己的力量，总结过去，展望未来，为祖国的和平统一大业而工作着。1978年，杜聿明当选为五届人大代表和五届政协常委，他也搬进了一套四室一厅的新居室。他拥护党的十一届三中全会以来的路线、方针、政策，拥护全国人大常委会的《告台湾同胞书》，在广泛联络海内外的故旧亲朋，为争取海峡两岸的和平统一方面做了许多有益的工作。
那么杜聿明怎么死的?多年的病魔却没有给他更多的时间。1981年5月7日，杜聿明先生因肾衰竭等宿疾在北京逝世，终年76岁。杜聿明先生临终时留下的最后一句话是：“病危深思，最关怀者惟一言而已：盼在台湾之同学、亲友、同胞以民族大义为重，早日促成和平统一，共同把我文明古国建成现代化强国，为子孙万代造福!”因台湾当局不放行，在他弥留之际终未能见到4个在台湾的儿女的面。