В края на 20-те или началото на 30-те години на XIX век в подножието на местността Баждар се изгражда нова сграда за конак, в която се помещава официалната турска администрация. В двора на конака освен двете големи каменни здания (къшли – казармите на войниците), се намират още едно за полицейската стража и околийския управител (каймакамина), турска баня, барутница и чешма. Долната къшла се строи по времето на султан Махмуд II (1808-1839 г.). През май 1859 г., по време на управлението на Абдул Меджид (1839-1861 г.), към конака се строи и горната къшла. Мазето на първата къшла е служило за тюрма (затвор) и барутница. В двете казармени помещения са се намирали постоянно на гарнизон турски войници (без данни откога е тази практика). Войниците от гарнизона са извършвали нощни патрули в Габрово.