À 42 ans, la vie professionnelle d’Isaac Davis (Woody Allen) un homme névrosé et angoissé, le laisse insatisfait et sa vie privée est chaotique. Sa deuxième épouse (Meryl Streep) est sur le point de publier son autobiographie dans lequel Isaac tient un rôle important. Il fréquente Tracy (Mariel Hemingway), une jeune fille de 17 ans et la situation se complique lorsque son meilleur ami lui présente sa maîtresse, Mary (Diane Keaton) dont Isaac tombe amoureux.
