Der angesehene Chirurg war auch „Extrembergsteiger“. Er bestieg eine Reihe von Alpengipfeln und bezwang als erster Alpinist u.a. eine Eisrinne der Hochalmspitze (3.360 m), die seinen Namen trägt.

Gussenbauer war ein großer Gönner seines Heimatortes, da er durch bedeutende finanzielle Zuwendungen den Bau des Polinikhauses und die Erschließung der Raggaschlucht ermöglichte. Ein Denkmal am Marktplatz, errichtet von seinen Schülern und Freunden, erinnert an den großen Sohn Obervellachs. Heute ist die Adler-Apotheke im Gussenbauerhaus eingemietet.