Wolfgang Schwarz begann bei ESV Austria Innsbruck seine Fußballerkarriere. Mit ESV Austria wurde er östereichischer Jugendmeister.
1973 holte ihn die Vorarlberger Spielgemeinschaft Vorwerk in die höchste Liga Österreichs. Die Vorarlberger konnten die Klasse jedoch nicht halten. Im Sommer 1974 wechselte er zu Austria Salzburg. Für die Mozartstädter erzielte der Goalgetter in 97 Ligaspielen 32 Tore und war auch im Europacup tätig. 1976 in der ersten UEFA-Cup-Runde erzielte er gegen Adanasport beim 5:0-Sieg drei Tore. Auch beim 2:1 in Runde 2 gegen Roter Stern Belgrad war er erfolgreich, die Salzburger schieden aber nach einer 0:1-Auswärtsniederlage aufgrund der Auswärtstorregel aus.
1977 stieg Salzburg ab, schaffte aber mit den Violetten den sofortigen Wiederaufstieg. Nach diesem Erfolg folgte Wolfgang Schwarz seinem Bruder Peter, der schon zuvor von Salzburg ins heimische Innsbruck zum Wacker gewechselt war. Er kam aber in eine Mannschaft, die nach den Erfolgen der letzten Jahre gesättigt schien. Grüppchenbidlung und andere Befindlichkeiten führten in der Saison 1978/79 zum Abstieg, den man bis zum Schluss nicht wahrhaben wollte.
Wolfgang Schwarz übersiedelte nach Holland zu Sparta Rotterdam und kehrte später wieder zurück nach Innsbruck, wo er noch für die SPG Raika Innsbruck spielte.