ב-28 באוגוסט 1983 הודיע בגין שבכוונתו להתפטר מראשות הממשלה ולפרוש מהחיים הציבוריים. "איני יכול עוד", סתם ולא פירש. את התפטרותו הגיש ב- 15 בספטמבר אותה שנה. בשנים שלאחר מכן הסתגר בגין בדירתו שברח' צמח בירושלים, ולא יצא ממנה אלא לפקוד את קברה של רעייתו באזכרה השנתית. בני משפחה, קרובים וקומץ ידידים המשיכו לבקרו. בשנה וחצי האחרונות לחייו התגורר בתל-אביב, ביחד עם בתו לאה.