В 1809 году университет Кенигсберга пригласил на работу основателя обсерватории Фридриха Вильгельма Бесселя. При нем, в ноябре 1813 года, на холме Буттерберг построили астрономический бастион. В здании из трех корпусов располагалось новейшее оборудование, в том числе приборы для определения точного положения светил в космосе и телескоп с системой линз. Также в обсерваторию входила библиотека, которая насчитывала 2 650 томов. Благодаря бастиону Кенигсберг стал одним из центров изучения астрономии. Во время британских бомбардировок в 1944 году здание было разрушено, от него остался только один корпус. В советское время в нем располагался пункт сбора призывников областного военкомата. После распада СССР здание было заброшено, в таком виде оно находится и сейчас.