В 1273 году отряд орденского наместника Дитриха Лиделау предпринял очередной поход к восточным рубежам Пруссии с целью покорить местное население. Год за годом крестоносцы оттесняли пруссов в труднодоступные восточные земли. Им удалось захватить языческую крепость, которая называлась Саминис Вике, что значит Каменное жилище.
Рядом с крепостью возникли поселения Таммау и Валькау. Однако для небольшого отряда рыцарей удержать крепость и поселения оказалось делом непосильным. Под натиском прусского ополчения тевтонцы были вынуждены отступить.
Крестоносцы явились в эти места только через 50 лет. В 1325 году хормейстер Тевтонского ордена Вернер фон Орзельн дал указание своим рыцарям укрепиться на востоке, что и позволило крестоносцам оставаться в этих местах на долгих 10 лет. До тех пор, пока не была построена крепость Инстербург. Сначала она была деревянной, но постоянные набеги литовцев вынудили рыцарей сделать ее совершенно неприступной. В крепости имелся большой, около 500 квадратных метров, двор и колодец, на случай осады. Бойницы позволяли уничтожать противника даже в том случае, если ему удалось попасть внутрь замковой территории. С появлением укрепленного Инстербурга опустошительные набеги литовцев практически прекратились.
В 1325 году в местности, окруженной болотами, началось возведение орденской крепости Прейсиш-Эйлау. В некоторых источниках упоминается прусское поселение Сутвирт, которое было предшественником рыцарского замка. Подобная традиция возведения военных построек идет от римских казарм. Укрепление имело высокие стены, ров, ворота, башню и разводной мост. К нему примыкал форбург, предзамок. Он был окружен крепостной стеной. Здесь располагались конюшни, пивоварня, помещения для солдат Ордена, кнехтов.
Замок был обителью для священников и рыцарей, где они не только исполняли религиозные ритуалы, но и жили. По орденскому распорядку, рыцари могли ночевать только в замке. Вокруг крепости возникло поселение Нойхоф, которое обязано было выплачивать Ордену за покровительство 30 кур и 3 марки ежегодно.
В 1492 году поселение обзавелось собственной символикой, которая позднее стала городским гербом. Некоронованный лев вверху был гербом старинного рода Вайды, давшего Ордену 12 славных рыцарей, двое из которых стали Магистрами Тевтонского ордена.
