Bergen wurde in Birmingham, Alabama als Tochter von William Albert and Lillian Mabel Westerman (geb. Howell) geboren. Als sie nach New York City kam, wurde sie ein erfolgreiches Fotomodell der Agentur Powers. Sie war das Chesterfield Girl und das Ipana Girl in Magazinen und während dieser Zeit als Frances Westcott bekannt.
Als Schauspielerin hatte Frances Bergen Nebenrollen in einer Vielzahl von Filmen. Sie debütierte in Untergang der Titanic (1953); danach spielte sie in Robert Z. LeonardsIhre zwölf Männer (Her Twelve Men, 1954) und Douglas SirksDer letzte Akkord (Interlude, 1957). In der 1958/59 von CBS gedrehten Westernserie Yancy Derringer spielte sie in 19 der 34 Folgen an der Seite von Hauptdarsteller Jock Mahoney (als Yancy Derringer) und dessen Begleiter X Brands (als Pahoo-Ka-Ta-Wah) die Spielclubbesitzerin Madame Francine.[1]
Frances Westerman traf im Alter von 19 Jahren Edgar Bergen, als sie an einem seiner Hörfunkprogramme mitwirkte. Er war zwei Jahrzehnte älter als sie, trotzdem heirateten die beiden am 28. Juni 1945. Sie blieben bis zu Edgar Bergens Tod im Jahre 1978 verheiratet, aus der Ehe kamen zwei Kinder. Nach dem Tod von dessen langjähriger Ehefrau Alexis Smith war Frances Bergen mit dem Schauspieler Craig Stevens liiert.
Frances Bergen starb im Cedars-Sinai Medical Center in Los Angeles am 2. Oktober 2006 im Alter von 84 Jahren.