Mitte des 16. Jahrhunderts wurde der Besitz, das herrliche Schloss, der Familie Schwertzell errichtet. Viele Zerstörungen und Wiederaufbauten hat das Willingshausener Schloss seither erlebt. Heute wird das Schloss als Gutsverwaltung der landwirtschaftlichen Güter der Familie von Schwertzell genutzt und ist das Prachtstück der idyllischen Gemeinde.