Сохранившиеся до наших дней Росгартенские ворота построили в 1852-1855 годах под руководством архитектора Вильгельма-Людвига Штюрмера на месте предыдущих ворот, защищавших Кенигсберг с начала XVII столетия. Ворота вместе с башней «Дона» составляли единый архитектурный ансамбль и играли важную роль в оборонительной системе города.
В плане архитектуры ворота состояли из одного проезда шириной в 4 метра. По бокам от проезда располагалось по три каземата для военнослужащих. Со стороны города казематы имели окна, а с внешней стороны – амбразуры для огнестрельного оружия.
Правда, развитие военной промышленности и новые тактические разработки уже к концу XIX столетия поставили под сомнение массивные фортификационные укрепления. Росгартенские ворота, как и много других аналогичных построек, оказались ненужными военному ведомству и перешли под опеку городского муниципалитета.
В годы Второй мировой войны сооружение претерпело немало разрушений, но в послевоенное время было полностью восстановлено.
В наши дни в помещениях Росгартенских ворот расположился ресторан «Солнечный камень» – первый в Калининграде ресторан, где для приготовления блюд используют исключительно рыбу и морепродукты.
Росгартенские ворота включены в туристический маршрут «Калининград фортификационный». На фоне башен с высокой аркой часто фотографируются туристы.