Замок Фрауэнштайн, впервые упомянутый в 1221 году, является одним из старейших зданий в Висбадене: согласно дендрохронологическим исследованиям, он был построен в 1182 году. Одним из его строителей был Генрих Боде фон Фрауэнштайн, состоявший на службе у архиепископа Майнца.

Замок Фрауэнштайн стал собственностью архиепископа Майнца в 1300 году. С 1421 года графы Нассау выступали в качестве бургманнов от имени Майнца. Майнцу удавалось противостоять попыткам завладеть замком Фрауэнштайн вплоть до 1803 года. Только после этого семье Нассау удалось завладеть замком.

С 1821 года о его сохранении заботилось Общество древностей Нассау. В 1996 году замок был продан федеральной землей Гессен обществу Burgverein Frauenstein e.V.

На самом старом виде замка Фрауэнштайн 1723 года изображена башня с деревянным башенным помещением и крутой шатровой крышей, такой, какой замок выглядит сегодня. Пятиугольная снаружи и квадратная внутри крепость датируется XIII веком и построена из зеленоватого гнейса со стенами толщиной до 2 метров. В трехэтажную башню можно было попасть по внешней деревянной лестнице, а внутри каменная лестница соединяет три этажа. Крутая деревянная лестница ведет с бочкообразного свода верхнего этажа на площадку башни и в деревянное помещение башни. Два жилых этажа отапливались камином.

С 1999 года здание подверглось анализу и структурной защите, а в 2001 и 2002 годах была отреставрирована башенная комната с крутой шатровой крышей. Однако погребенный подвал не был вскрыт. Сохранились горловина рва и остатки щитовой стены.