Рядом с Ярмарочным домом стояла часовня Казанской Божьей Матери, возведенная в память перенесения в 1594 году через Вологду в Соловецкий монастырь мощей митрополита Филиппа (Колычева), бывшего до возведения в сан митрополита игуменом Соловецкого монастыря. На месте часовни святые мощи были остановлены для общенародного моления перед ними.

По другой версии,  часовня была поставлена на месте главных крепостных каменных ворот в город,  называемых Спасскими.

 В советское время на месте часовни находился памятник Сталину.