Dwingelo, Ruinen door