Ruines du château de Rüdenburg

Le Rüdenburg a très probablement été construit entre 1050 et 1062 par le comte Bernhard II de Werl comme château fort de montagne. Sa position stratégique sur le Römberg servait à sécuriser les territoires nouvellement acquis par les comtes de Werl et à contrôler une importante route commerciale. Sous Frédéric le Querelleur (1092–1124), le château est resté en possession des comtes de Werl-Arnsberg, jusqu'à ce qu'il tombe aux mains des ennemis par une embuscade. Plus tard, le château a peut-être été partagé entre les comtes d'Arnsberg et les nobles de Rüdenberg. À partir de 1132, Herimannus de Rüdenberg est attesté comme propriétaire, servant à la fois l'archevêché de Cologne et les comtes d'Arnsberg. Le mariage du comte Gottfried II avec Agnes de Rüdenberg a consolidé les relations. Avec Konrad II de Rüdenberg († vers 1261), la lignée a atteint son apogée, mais le partage de l'héritage entre ses fils a initié le déclin.