在首届全运会闭幕式上，周恩来总理亲手把荣誉奖章戴在穆祥雄胸前，亲切地说：“你为中国人争了光，希望你再接再厉，继续攀登世界高峰”，时任国家体委主任的贺龙元帅则赞称：“古有杨家将，今有穆家军”。1962年4月，毛泽东主席在中南海接见优秀运动员代表，当国家体委副主任荣高堂介绍穆祥雄时，毛主席伸出大手和他紧握，微笑着说，“哦，你是游泳运动员啊！”那一天，穆祥雄还荣幸地与毛泽东、刘少奇、朱德等党和国家领导人合影留念。

20世纪50年代末，由于政治上的原因，中国奥委会与国际奥委会关系中断。阔别国际体坛20多年后，1979年，中国恢复了在国际奥委会的合法席位。但这时，穆祥雄已经退役，他与奥运的约定就这样被延期。