Таа и рекла на својата пријателка: „Ова е човекот со кој ќе се омажам“.
Вивиен Ли ја оствари таа желба, но во тоа време не изгледаше остварливо. Имено, таа веќе беше во брак со адвокатот Роберт Холман, со кого ја доби ќерката Сузан. Лоренс беше оженет со актерката Џил Есмонд со која го доби синот Таркин.
Но, следната година тие се најдоа на снимањето на филмот „Оган над Англија“, каде што играа љубовен пар. Тие започнаа да поминуваат многу време заедно и надвор од сетот, па набргу започнаа страсна авантура.
Иако веќе живееја заедно, јавноста не смееше да знае за нивната љубов. Според тогашниот морален кодекс на Холивуд, тоа не беше прифатливо. На крајот на краиштата, ниту сопругата на Оливие ниту сопругот на Вивиен Ли не сакаа да се разведат од нив, па мораа да живеат во тајност.

Од кога станаа љубовници, Вивиен и Лоренс започнаа да се допишуваат, а нивните страствени љубовни писма неодамна станаа јавни.
“Ох, драга моја, мала љубов, страдам толку многу за тебе. Ох, моето срце не може да издржи без тебе”, и напиша тој на едно од првите писма на самиот почеток на нивната врска.
Сè се смени кога и двајцата постигнаа голем успех. Таа ја играше Скарлет О Хара во „Gone with the Wind“ додека Оливие блескаше во „Wuthering Heights“ како Хитклиф.
Тие постојано се допишуваа за време на снимањето на тие два филма, а особено додека Вивијан го снимаше „Gone with the wind“. Двајцата сметаа дека филмот ќе пропадне.
“Мора да се докажете во следните два или три филма. Многу е важно за вашата самодоверба да успеете во филмот, но исто така и за вашата среќа, како и за нашата среќа. Ако не успеете, се плашам дека едноставно ќе станете – добро, досадно”. стои во една буква.
Нивната афера стана јавна и нивните сопружници конечно се согласија на развод. Тоа беше во 1940 година, кога Вивиен стана првата Британка што освои Оскар за најдобра главна актерка.
“Заклучив дека сте многу непослушен. Ние сме популарен скандал или многу јавен скандал. Затоа единственото нешто што можеме да го направиме, и во согласност со добриот вкус, е да бидеме што е можно помалку наметливи”, и напиша тој на својата наскоро сопруга Лоренс.

Обајцата останаа без старателство над своите деца, но се венчаа истата година.
На венчавката имаше само сведоци – актерката Кетрин Хепберн и писателот Гарсон Канин. Истата година тие глумеа заедно во „21 ден заедно“, следната година во „Таа жена Хамилтон“, како и во адаптацијата на Бродвеј за „Ромео и Јулија“.
За време на Втората светска војна, тој им се придружил на британските трупи додека таа ги забавувала и волонтирала, дури и одбивајќи профитабилни договори за помош на војската. Двајцата беа блиски до тогашниот премиер Винстон Черчил.
Првата улога после тоа за Вивиен беше во „Цезар и Клеопатра“ во 1944 година. Среде снимање, открила дека е бремена, но за жал имала спонтан абортус.
После тоа, таа падна во депресија, и иако нема да се открие долго време, Ли исто така страдаше од биполарно растројство и манична депресија.
Актерката имаше периоди на хиперактивност проследена со депресивна фаза, честопати со хистерични и насилни напади на кои подоцна не се сеќаваше.
Кога се опорави, продолжи да го снима филмот, но веќе немаше волја. Никогаш не го гледала тој филм до крај затоа што и беше премногу тежок. Подоцна истата година, таа се разболе од туберкулоза, па не беше во актерската професија сè до 1946 година.
Додека таа беше дома и одмараше, Лоренс работеше неуморно и неговата кариера цветаше. Тоа и пречеше на Вивиен, па започнаа првите расправии. Поради своето биполарно растројство, Лоренс страдаше и почна да бара утеха во театарот. Ретко беше дома, а по заедничката турнеја во Австралија во 1948 година, Вивиен му рече дека повеќе не го сака. Сепак, тие останаа во брак уште 12 години.

И нејзината кариера застана на нозе, па го освои својот втор Оскар за „Трамвај наречен желба“ во 1951 година. Две години подоцна, таа отпатува за Шри Ланка за да го сними „Патот на слоновите“ со Питер Финч. Но, откако започна снимањето, таа доживеа нервен слом и нејзината улога ја презеде Елизабет Тејлор. Кога се вратила во Лондон, таа го известила Лоренс дека е заљубена во Финч и дека тие имаат афера со години. Сепак, тие останаа заедно и глумеа во неколку театарски претстави.
Вивиен повторно забременила во 1956 година, но повторно го изгубила своето дете и паднала во депресија. Наскоро започна врска со актерот Џек Меривале и во 1960 година конечно се разведе од Оливие. Наскоро се ожени со актерката Џоан Плојрајт, а таа му се довери на пријателка: „Повеќе сакам да живеам со Лоренс кратко време отколку долго без него“.
Иако не беа заедно до крајот на животот, тие се допишуваа и по разводот.
“Сакам да ти се заблагодарам што ме разбра. Се однесуваше благородно, храбро и убаво и жал ми е, многу ми е жал што сето тоа беше пекол за тебе”, Лоренс напиша кратко по разводот. Дури и кога се оженил, тие продолжиле да се допишуваат.
“О, Боже, Вивлинг, колку се молам да најдеш среќа и задоволство сега. Постојано се молам да земам дел од твојата несреќа врз себе и морам да кажам дека успеа, бидејќи твојата несреќа е тортура за мене; самата помисла на тоа е постојан кошмар.„ Оливије ѝ напиша.
Вивиен последен пат се појави во филмот во 1965 година во „Брод на будали“, при што честопати имаше напади на паника, па затоа било многу тешко да работи со неа.
Таа почина на 7 јули 1967 година, откако повторно се разболе од туберкулоза.
Години откако Вивиен почина, пријател го пронашол Лоренс како го гледа нејзиниот филм на телевизија.
„Тоа … тоа беше љубов“, рекол тој со солзи во очите.
