Le docteur Guillaume-Joseph Bailleau (1830-1909), érudit collectionneur, fait partie des pionniers de l'archéologie moderne, et particulièrement de l'archéologie préhistorique. Contemporain de grandes figures telles que Gabriel de Mortillet, Joseph Déchelette et Édouard Lartet, avec qui il entretient une correspondance fournie, le docteur Bailleau contribue au développement des connaissances sur les premiers hommes occupant le centre de la France. Il est notamment l'un des premiers à fouiller dans les années 1860 le site de la grotte des Fées à Châtelperron (Allier), dont les vestiges témoignent de la période de transition entre l'occupation néandertalienne et celle de l'Homme moderne.. Collectionneur avide, le docteur Bailleau rassemble des objets de toutes les périodes, découverts dans l'Ailier mais aussi sur d'autres continents. Il se fait également envoyer par les plus grands noms de l'archéologie du XIX^e siècle des pièces emblématiques des productions humaines du passé. Sa collection comporte ainsi des outils en silex ou en os provenant des plus importants sites de la vallée de la Dordogne, des figurines gallo-romaines de l'Ailier ou encore des poteries médiévales. Elle est dispersée après son décès entre différentes institutions mais le musée Anne-de-Beaujeu a pu en acquérir une partie en 2016..