Hippolyte Ballue, (1820-1867), un peintre français de paysage. Arthur Ballue, (1835-1894), un homme politique français. Pierre Ernest Ballue (1855-1928), peintre et dessinateur français de l'École de Barbizon. Jeanne Ballue (1896-1997), fille de Pierre Ernest Ballue et épouse d'André Goupille, résistante française, Juste parmi les Nations.
Autre Château de la Ballue, situé sur la commune de Bazouges-la-Pérouse en Ille-et-Vilaine