ChruščoveChruščovove prešľapy v zahraničnej politike, najmä neúspech v Kubánskej kríze a naštrbenie vzťahov s Čínou ale aj pokračujúce hospodárske problémy viedli ostatných popredných straníckych predstaviteľov k jeho odstráneniu. Nezanedbateľné boli obavy mnohých vysokých funkcionárov o svoje miesta pri jeho neustálych experimentoch a zmenách. V októbri 1964 počas dovolenky na [[Krym]]e ho privolali na mimoriadne zasadanie politbyra, kde ho [[14. október|14. októbra]] [[1964]] pozbavili všetkých funkcií a prinútili odísť na dôchodok „zo zdravotných dôvodov“. Za nového prvého tajomníka po krátkom období kolektívneho riadenia zvolili [[Leonid Iľjič Brežnev|Leonida Brežneva]]. Všetky pokusy o zmenu skončili, a to až do polovice 80. rokov.
Po odstránení Chruščova z verejného života „zo zdravotných dôvodov“, bol fakticky v domácom väzení, kde žil na svojej dače a nesmel voľne cestovať. Čoskoro upadol do hlbokých depresií, keďže kvôli tomu, že bol neustále sledovaný ho postupne prestali navštevovať jeho starí priatelia.
