Herter lahir di Paris, Prancis, dari orangtua ekspatriat dan artis Amerika, Albert Herter dan Adele McGinnis, dan masuk École Alsacienne (1901–1904) sebelum pindah ke New York City, di mana ia masuk Browning School (1904–1911). Ia lulus dari Harvard University pada 1915 dan lulus dalam bidang arsitektur dan desain interior sebelum masuk kerjasama diplomatik pada tahun berikutnya.