Pastergue était le secrétaire du groupe anarchiste Les libertaires Vauclusiens formé à Avignon en novembre 1893 et dont faisaient entre autres partie Roudier, Eymeric, Bourelly, Barailler et Vigne. Le groupe s’était dissous peu après à la suite de l’adoption des lois scélérates.