L'hôpital et la fondation de l'Asile des aveugles voient le jour en 1843 grâce à trois mécènes : Elisabeth-Jane de Cerjat, William Haldimand et le Docteur Frédéric Recordon. Ils créent une institution unique en son genre, dévolue à l'instruction, au traitement des atteintes de la vision, mais aussi à l'accompagnement des personnes malvoyantes.