В старата част на града е съхранен комплекс от къщи, построени във възрожденски стил. Намират се на улиците “Свети Климент Охридски” и “Иван Вазов”. Там се помещават Къщата на художниците в града (т.нар. Керимовата къща), както и Къщата на архитектите.
Днес в Керимовата къща се помещава Домът на творческите съюзи в Кърджали. Тя е център за творчески контакти на художници, артисти, писатели. Историческата забележителност се намира в старата част на града. През 1882 година, при посещението си в Кърджали, в Керимовата къща е отседял губернаторът на Източна Румелия Алеко Богороди.
На същата улица са били изградени три хана. Най-големият бил на Мехмед Хаджи хафъз и се състоял от два големи обора, една стая за преспиване на пътници, кафене вдясно до вратата му и фурна вляво от нея.