Warowny zamek, według Jana Długosza wzniesiony przez króla Kazimierza Wielkiego jeszcze przed rokiem 1362 (kiedy osada Koło uzyskała prawa miejskie). Zamek zabezpieczał drogę prowadzącą z Wielkopolski w kierunku Łęczycy przez dolinę Warty. Budowla znajduje się na sztucznym wzniesieniu w zakolu Warty. W czasach jej wznoszenia, rzeka posiadała w tym rejonie liczne odnogi, które często wylewały, skutecznie wzmacniając jego walory obronne.