Деревянные дома Каргополя являются неотъемлемой частью старинного города, придают ему неповторимый колорит.
Основой архитектуры Каргополя является ансамбль Соборной площади — соборная колокольня (1778), Введенская церковь (1802), Церковь Иоанна Предтечи (1751) . В городе есть и другие старинные церкви — Благовещенская, Никольская.
Гражданская архитектура города в многом состоит из деревянных домов, многие из которых построены в 19 веке. Сохранилось большое количество бревенчатых деревянных домов. Многие дома украшены наличниками. Гуляя по Каргополю, словно переносишься на пару столетий назад и идёшь по купеческому городу 19 века.