Ayahnya, Victor Ruffy (1823-1869) adalah anggota Dewan Federal pada tahun 1868/1869. Hingga tahun 2006, Ruffy muda adalah orang satu-satunya yang menggantikan ayahnya sebagai anggota dewan. Ruffy muda menggantikan ayahnya sebagai anggota dewan sampai pemilihan Eveline Widmer-Schlumpf pada tahun 2007.