W roku 1352 książę Bogusław V wykupił z prywatnych rąk niewielki skrawek terenu w obrębie miasta lokacyjnego. Przeznaczono go pod zabudowę, wznosząc w ciągu kilku lat ceglany zamek na planie kwadratu. Późniejsze przebudowy przyczyniły się w stosunkowo niewielkim zakresie do zmian w jego wyglądzie. Na zamku często przebywali książęta pomorscy, niektórzy przyszli tu na świat, inni znaleźli tu swój ostatni spoczynek. Najsławniejszym jego lokatorem był Eryk Pomorski (1382-1459), późniejszy król Danii, Szwecji i Norwegii.
Jest to jedyny w dzisiejszej Polsce tak blisko położony brzegu Bałtyku średniowieczny zamek i w zasadzie jedyny w tej części Pomorza pełniący rolę muzeum. Szczególnie atrakcyjna jest otwarta niedawno wystawa stała poświęcona legendarnemu księciu Erykowi.