De Sterrenberg is waarschijnlijk een van de oudste kasteelcomplexen langs de Midden-Rijn: De donjon werd uiterlijk aan het einde van de 12e eeuw gebouwd.

Naast zijn ouderdom heeft kasteel Sterrenberg echter als bijzonderheid twee opeenvolgende schildmuren. De buitenste is nog sterker en hoger dan de innerlijke en is duidelijk gericht tegen het naburige kasteel Liebenstein. Aan deze twee eens zeer vijandige burchten kan de door de eeuwen heen bepalende problematiek van wisselende eigendomsverhoudingen in het Midden-Rijngebied worden afgelezen. Want in de middeleeuwen lagen daar vaak de gebieden van verschillende heersers direct naast elkaar. De vijandigheid tussen prinsen, graven of abten manifesteerde zich in de tegendelen die de heerschappij veiligstelden. Volgens de sage van de "Vijandige Broeders" zouden het in het geval van kasteel Sterrenberg en Liebenstein bovendien broers en zussen zijn geweest die in conflict de verdedigende gebouwen hebben opgericht.

In plaats van familieconflicten wacht de hedendaagse bezoeker een kasteel met ruimtes voor feesten, vakantiewoningen, evenals gastronomie met een terras en prachtig uitzicht. In het seizoen vinden er op bepaalde data rondleidingen door de oude muren plaats.