Cette expression date d'une pratique du XIIIe siècle. À l'époque, une taxe avait été instaurée pour emprunter le pont entre Paris et l'île de la Cité, excepté pour ceux qui possédaient un singe, c'est-à-dire les forains à qui on demandait un numéro à leur animal !.