На пике его карьеры в 1956 году зарубежные аналитики называли Шепилова третьим человеком в иерархии советской власти. В 1957 году объявлен «примкнувшим к антипартийной группе» Молотова, Маленкова и Кагановича, лишен всех должностей и званий.