Mais la scène la plus violente qu'ait connue l'Assemblée nationale a sans doute eu lieu le 4 novembre 1904. On était en pleine affaire dite des fiches. Un énorme scandale. Les francs-maçons et des élus de gauche avaient établi des fiches, des listes d’officiers de l'armée jugés nationalistes ou catholiques à qui il fallait barrer la route. Finalement, en plein débat, un député s’était avancé vers le banc du gouvernement et avait giflé le ministre de la Défense. S’en était suivie une véritable bagarre générale. Plusieurs centaines de députés en étaient venus aux mains.