Ann Lowe s-a născut în Clayton, Alabama, în 1898, într-o familie cu talent în croitorie. Bunica ei, născută în sclavie, a conceput rochii pentru stăpâna ei, iar mama avea talent la brodat, aşa că Ann a avut de la cine să înveţe meserie.

Cele trei femei au lansat în Alabama o mică afacere de îmbrăcăminte. Au avut succes până în 1914, când mama ei a murit. Lowe, care avea doar 16 ani, a preluat în timp record munca mamei, iar talentul ei a atras tot mai multe cliente pe măsură ce producea mai multe modele.

Pasiunea şi munca ei asiduă au condus-o la New York, unde s-a înscris la Şcoala de design Taylor în anul 1917. Pentru că era singura elevă de culoare, a fost separată de ceilalţi. A studiat singură într-o cameră, complet izolată. Acest tratament n-a descurajat-o. Rezultatele ei au fost extraordinare, motiv pentru care profesorii au susţinut-o în mod constant şi au oferit-o ca exemplu pentru ceilalţi.

Imediat după absolvire, a devenit şefa unui magazin de îmbrăcăminte din Florida, unde a economisit 20.000 de dolari înainte de a se întoarce în New York în 1927 pentru a deschide prima dintre cele trei magazine din New York. Primul a fost în Harlem şi a atras protipendada din Manhattan. Membrele familiilor Roosevelt, Rockefeller şi du Ponts s-au numărat printre clientele ei. A urmat familia Auchincloss, a cărei fiică mai mică, Jacqueline, urma să se căsătorească. Rochia de mireasă creată pentru ea a făcut istorie.

A refăcut în timp record rochia de mireasă a lui Jackie Kennedy după o inundaţie ce i-a distrus atelierul