Noah Solloway (Dominic West) ist Lehrer und glücklich mit der erfolgreichen Geschäftsfrau Helen (Maura Tierney) verheiratet, mit der er vier gemeinsame Kinder hat. Trotz seines scheinbar perfekten Lebens plagen ihn auch immer häufiger starke Selbstzweifel, da seine angestrebte Karriere als Schriftseller nach nur einem veröffentlichten Buch schon wieder im Sande zu verlaufen droht. Während eines Urlaubsaufenthalts auf Long Island lernt er eines Tages die Kellnerin Alison (Ruth Wilson) kennen, die noch immer versucht, den Tod ihres Sohnes zu verarbeiten und obendrein um ihre kriselnde Ehe mit dem Farmer Cole (Joshua Jackson) kämpft. Noah und Alison sind schnell fasziniert voneinander und lassen sich nach mehreren Begegnungen schließlich auf eine verhängnisvolle Affäre ein, die verheerende Folgen hat.