Γεννημένη ως Όντρεϊ Καθλήν Ράστον σε ένα δήμο των Βρυξελλών του Βελγίου, ήταν το μοναδικό παιδί του Ιρλανδού τραπεζίτη Τζόζεφ Βίκτορ Άντονι Ράστον από τη δεύτερη σύζυγό του, την πρώην Βαρόνη Έλλα φαν Χέεμστρα, μια Ολλανδέζα αριστοκράτισσα που ήταν κόρη ενός πρώην κυβερνήτη της Ολλανδικής Γουιάνα.