Главный архитектурный памятник Балтийска – Шведская крепость. Она представляет собой пятиугольник со сторонами в восемьдесят метров. Каждый из бастионов имеет собственное имя: Альбрехт, Пруссия, Кениг, Кениген, Кронпринц. Их окружает широкий ров, на внешней стороне которого расположены пять равелинов: Людвиг, Шторхнес, Фальвинкель, Кронверк, Шинкен-Шанц.

С момента начала строительства в XVII веке шведским королем Густавом Первым Адольфом крепости была уготована роль надежнейшего европейского банка.

Сооружение строили таким образом, чтобы деньги могли храниться в его подземельях при постоянной температуре и влажности. Здесь, в надежде завоевать Русь и взойти на престол, хранил свою корону сын польского короля Сигизмунда Третьего Владислав IV. Но Минин и Пожарский спутали ему все планы. И корона ввиду ненадобности была оставлена за долги прусскому курфюрсту. После того как крепость была перестроена и обрела свой нынешний облик, многие властители, в разные времена владевшие Восточной Пруссией, использовали ее не только как цитадель, но и в качестве денежного хранилища." и ещё "Доподлинно известно, что в Шведской крепости находился штаб Управления обороной, который координировал действия немецких частей на Земландском полуострове. Когда разведчики 11-й гвардейской армии ворвались в крепость, там никого из офицеров-штабистов и охранявших их солдат не оказалось: солдаты и офицеры вермахта ушли подземным ходом.
Куда ведут эти ходы, выяснить так и не удалось – все они были заминированы. Рисковать жизнью саперов советское командование не стало, и все подступы к подземным коммуникациям просто замуровали. Техническую документацию города, в том числе инженерную и коммунального хозяйства, замковых сооружений, немцы вывезли в Германию.