L’église St Victor du village a du être construite à trois reprises.

La première fois, sur le site originel du village, c'est-à-dire au lieu – dit « le Château », au pied du Piolit, en 354-374.  Avant sa première construction, il existait un temple dédié à Diane (déesse de la lumière pour les Romains).
La seconde église de Chorges fut dédiée à Saint Victor, martyr de Marseille. Son nom remonte donc au début du VI^e siècle, quand Saint Pelade, archevêque d’Embrun, la consacra. En 1020, la paroisse est confiée aux religieux de St Victor de Marseille.

 L’église actuelle, sera construite dans le nouveau village au XII^e siècle et deviendra une église paroissiale. Les siècles qui suivront furent difficile, car après avoir été pillée par les mercenaires de François 1^er en 1517, elle fut saccagée en 1569 par les protestants de Louis Ayme, occupée par Lesdiguières en 1585, et de nouveau incendiée en 1692 par les troupes du Duc de Savoie. Elle connût finalement sa véritable heure de gloire, quand elle rassembla de nombreuses personnalités pour un événement décisif : l’organisation du département des Hautes – Alpes. Les 226 électeurs siégèrent pour cette première assemblée départementale du 4 au 15 juillet 1790 pour former le département. Ils choisirent Gap comme chef – lieu. Cet événement a été commémoré le 15 juillet 1990, comme on peut l’observer sur la plaque au niveau du porche. Grâce à son histoire chargée en rebondissements et un caractère architectural notable, elle sera classée sur la liste des Monuments Historiques en 1862.