Актер Владимир Зельдин родился в семье интеллигентов. Отец был музыкантом, а мама — учительницей. Маленький Вова мечтал танцевать в балете, но отец решил, что он должен пойти по его стопам.
В результате несколько лет Зельдин посвятил игре на трубе в оркестре. Стоит отметить, что ее младшая сестра Джоан Фонтейн также стала знаменитой актрисой.
Она снималась у Альфреда Хичкока и получила «Оскар» за фильм «Подозрение». Джоан всю жизнь кичилась тем, что раньше Оливии вышла замуж и получила престижную кинонаграду.
Соперничество с сестрой отнимало много сил у Оливии. Сестры даже перестали общаться друг с другом. Фонтейн признавалась, что хочет умереть первой, чтобы опередить сестру в их негласном соревновании.