A Szenvedély Andreas Winkelman (Max von Sydow) bemutatásával kezdődik, aki egymagában elzárkózva éli érzelmileg sivár életét a válása után egy kis Balti-tengeri szigeten. A parasztházában visszavonultan élő férfihoz egy napon váratlanul beállít egy idegen nő, Anna (Liv Ullmann) és telefonálni szeretne. Andreas belehallgat a telefonbeszélgetésbe, Anna pedig láthatóan zavart állapotban távozik és ott felejti a táskáját, amiben Andreas egy levelet talál. Ebből kiderül, hogy Anna autóbalesetben elveszítette a férjét. A két ember hamarosan közel kerül egymáshoz és Anna odaköltözik Andreashoz. Andreas és Anna közös barátai egy jómódú, gyerektelen házaspár, Elis Vergerus (Erland Josephson) és Eva (Bibi Andersson), akik szintén érzelmi zavarokkal küszködnek. Az alvászavarban szenvedő Eva úgy érzi, hogy férjének már elege van belőle. Egy éjszaka amikor Eva magányosnak és unottnak érzi magát - férje távollétében - meglátogatja Andreast. Andreas másnap meglátogatja Elist, aki megígérte neki, hogy lefényképezi. Eva tud arról, hogy Anna Andreashoz költözött, és figyelmezteti a férfit, hogy legyen óvatos vele. Andreas és Anna kapcsolata nem szenvedélyes, de viszonylagosan tartalmasan indul... Azonban mindkettőjüknek számos titok lappang a múltjában, s amikor ezek a felszínre kerülnek, óriási feszültség támad közöttük...