Durch die Wallfahrtskirche und einen Wanderweg, der direkt durch das Ortszentrum führt, ist Kaltenberg nicht nur in der Region ein bekanntes Ausflugsziel.
Am Gemeindeamt wurden die Namen der Ortschaften von Kaltenberg angebracht - diese Idee verdeutlicht das Zusammengehörigkeitsgefühl und die persönliche Verbindung der Kaltenbergerinnen und Kaltenberger.