Nowy Zamek, nazywany Pałacem Habsburgów, powstał w latach 1885–1895 z inicjatywy arcyksięcia Albrechta Fryderyka Habsburga. To właśnie z tym miejscem związane są dzieje żywieckiej linii Habsburgów, która odegrała ważną rolę w historii miasta i regionu. Otaczający pałac park ma jeszcze starsze korzenie. Jego początki sięgają 1712 roku, gdy zakładano tu ogród w stylu włoskim, a w pierwszej połowie XIX wieku został on przekształcony w angielski park krajobrazowy. Dziś to jedno z najbardziej reprezentacyjnych i malowniczych miejsc spacerowych w Żywcu.