Das Haus Zum Goldenen Brunnen wurde Anfang des 17. Jahrhunderts als Seminargebäude eines Jesuiten-Kollegs errichtet. Davon erzählt das Relief über dem wuchtigen Rundbogenportal, das einen andächtig vor dem Kruzifix knieenden Jesuiten darstellt und mit einem Ordenswappen geschmückt ist.
1604 war ein Schlüsseljahr für die Kärntner Kirchengeschichte: Mitglieder des Jesuitenordens kamen, nachdem sie schon in Graz und Laibach Quartier bezogen hatten, auch nach Klagenfurt.