Hough menikahi penulis Charlotte Woodyatt, yang ia temui saat mereka menjadi murid di Frensham Heights School, dan memiliki lima anak yang meliputi penulis Deborah Moggach,[3] penulis buku anak-anak Sarah Garland, dan Alexandra Hough, penulis buku pelajaran Hough’s Cardio Respiratory Care.