Это здание можно назвать блуждающим, т.к. четыре его предшественника в разные годы возникали и исчезали в разных местах Софийского двора. Пятое здание было заложено в 1773 году и закончено в 1775. Здание дошло до наших дней в хорошем состоянии. Архиерейский дом стал своеобразным памятником строительной деятельности губернатора Чичерина, 18 лет правившего Сибирью. С 1925 года в здании разместился губернский музей. Ныне здесь находятся экспозиции музея истории духовной культуры и природы ТГИАМЗ.