Een tekening uit 1743 van H. Spilman, laat de voorzijde (westzijde) van het kasteel Borculo zien. Rechts de donjon of woontoren, waarvan in het straatplaveisel de contouren zijn te zien. Het kasteel is voor een deel sterk tot ruïne vervallen. Het werd nagenoeg geheel, op de fundamenten en de kelders na, omstreeks 1760 gesloopt en vervangen door een kleiner L-vormig gebouw, dat in 1870 vervangen werd door de huidige villa Schaars. Het torentje links bleef tot begin 19de eeuw gehandhaafd, om toen alsnog gesloopt te worden.