Католическая кирха Святого семейства, возведенная в неоготическом стиле, на карте Кенигсберга появилась в 1907 году. Архитектор Фридрих Хайтман, разработавший проект сооружения, в конце жизни называл кирху своим лучшим творением. Зодчий, планируя здание, видел его своеобразным «семейным домом», в котором царила бы атмосфера уюта, спокойствия и умиротворения. Многие элементы, украсившие экстерьер и интерьер храма, архитектор позаимствовал у церквей Тевтонского ордена, тщательно изучив старинные готические кирхи Восточной Пруссии.
Разрушительное влияние Второй мировой войны на постройке почти не сказалось – кирха Святого семейства уцелела и после бомбардировок британской авиации, и после массированного штурма Кенигсберга советскими войсками.
В послевоенные годы здание отреставрировали, и некоторое время использовали как жилье для переселенцев. В 50-х годах прошлого века церковь перепрофилировали под складские помещения. К счастью, советские власти не разрушили строение, как многие другие сооружения немецко-прусского периода. После основательной реконструкции, завершившейся в 1980 году, здание бывшей кирхи передали Калининградской областной филармонии.
В наши дни здесь все так же проводятся симфонические концерты и другие музыкальные мероприятия, а само здание внесено в перечень культурно-исторических достопримечательностей Калининградской области.