Der Drostenhof (Burgstraße) ist eines der ältesten noch erhaltenen Gebäude in Neheim und Geburtshaus von Wilhelm von Fürstenberg, der im 16. Jahrhundert Deutscher Ordensmeister in Livland war.
Der heutige Fachwerkbau, Sitz des Neheimer Amtsdrosten, wird in das 17. Jahrhundert datiert.