Kasteel Sterrenberg is waarschijnlijk een van de oudste kasteelcomplexen aan de Midden-Rijn: de donjon dateert uit het late 12e eeuw.

Naast zijn ouderdom heeft kasteel Sterrenberg als bijzonderheid twee opeenvolgende schildmuren. De buitenste is nog sterker en hoger dan de binnenste en duidelijk gericht tegen het naburige kasteel Liebenstein. Aan deze twee, ooit bitter vijandige kasteelcomplexen is de door de eeuwen heen schrijnende problematiek van wisselende eigendomsverhoudingen in het Midden-Rijndal af te lezen. Want in de middeleeuwen lagen hier vaak de gebieden van verschillende heersers direct naast elkaar. Talrijke vijandelijkheden tussen vorsten, graven of abten manifesteerden zich in de tegenkastelen die de heerschappij veiligstelden. Volgens de sage van de Vijandige Broeders zouden het in het geval van kasteel Sterrenberg en Liebenstein bovendien broers en zussen zijn geweest die in conflict deze versterkte bouwwerken hebben opgericht.

In plaats van familieconflicten verwelkomt het hedendaagse bezoeker een kasteel met ruimtes voor feesten, vakantiewoningen samen met gastronomie met een terras en een prachtig uitzicht.