Gazave componeerde onder andere methodes voor accordeon, zoals de Méthode d’accordéon 1ère et 2ème années, die nog steeds in omloop is en wordt uitgegeven door Henry Lemoine. Hij was ook verantwoordelijk voor veel arrangementen en composities voor accordeon, variërend van solostukken tot kamermuziek en orkestwerken. Zijn invloed is nog steeds voelbaar, en zijn werk wordt wereldwijd gewaardeerd door accordeonisten en muziekliefhebbers.