Po Wojciechu z Łabiszyna właścicielem zamku był jego syn Maciej Kościelec z Łabiszyna. W listopadzie 1410 roku na zamku nocował król Władysław Jagiełło z dworem i doradcamiA. Gąsiorowski, Itinerarium króla Władysława Jagiełły (1386-1434), Warszawa 1972, s. 41-109..
W 1649 roku Łabiszyn został sprzedany Krzysztofowi Gembickiemu herbu Nałęcz, kasztelanowi gnieźnieńskiemu. Po zmarłym Krzysztofie majątek odziedziczył w 1659 roku jego syn Andrzej. Następnie około 1676 roku dobra łabiszyńskie z zamkiem odkupił stryjeczny brat Andrzeja, kasztelan łęczycki, późniejszy starosta dybowski - Paweł GembickiKs. I. Polkowski, Historya majętności łabiszyńskiej od roku 1376-1876, Poznań 1876, s. 13-15. Z powodu braku poważnych badań nieznane są późniejsze dzieje i przekształcenia zamku. Wg tradycji w 1709 lub 1710 roku tutejszy dziedzic Maciej Gembicki, przeciwnik Augusta II Mocnego, zginął podczas obrony zamku przed wojskami saskimiR. Nowicki, Skórzewscy właściciele dóbr łabiszyńskich. Rola w życiu społeczno--politycznym wielkopolskiego ziemiaństwa, Toruń 2002, s.31.
W drugiej połowie XVIII lub wg innych źródeł w pierwszej połowie XIX w.