C’est en 1906, à l’ âge de 13 ans, que Albert Le Joly, orphelin de père, avait commencé à travaillé à l’octroi de Brest où il était considéré comme « très intelligent, docile, zélé, un employé modèle ». En février 1911 avec quelques camarades, il avait fondé le groupe la Jeunesse révolutionnaire, puis après la dissolution du groupe en avril, avait adhéré à La jeunesse syndicale dont il avait été nommé secrétaire. Puis il avait adhéré au Comité des temps nouveaux fondé en août 1911 par les compagnons Goumelon et Le Gall.