Am 10. Oktober 1492, zwei Tage bevor Christoph Kolumbus endlich auf einer Insel der Neuen Welt anlegte, befanden sich zwei Mädchen zum Kastaniensammeln zwischen steilen Felswänden des San Giacomo Tals und erzählten danach, die Madonna gesehen zu haben, die alle ermahnte für die Sünder zu beten.
An diesem Platz wurde sofort eine Kapelle errichtet, der später eine Kirche folgte. Das heutige dritte Bauwerk wurde 1598 begonnen. Später wurde das Presbyterium von Domenico Caresiano mit Fresken versehen, Duchino malte ein Ölbild für den Hauptaltar, das sich heute an einer Seitenwand befindet, Emigranten in Rom finanzierten die Sakristei, so dass trotz der schwierigen Zeit während der Graubündner Herrschaft, im Jahre 1615 der Bischof Archinti hierher kommen konnte um die Wallfahrtskirche zu weihen. Die Ausschmückungen wurden noch viele Jahrzehnte fortgesetzt, Zeichen dafür, dass die Wallfahrtskirche Gallivaggio bis heute noch eine wichtige Rolle spielt im Leben der Bewohner des Valchiavenna, des Alto Lario, des unteren Veltlins und für die Mailänder und die Leute aus der Brianza, die dieses Tal besuchen.