В 1857 г. купцы-меценаты Бахрушины основали в Зарайске богоугодное заведение для престарелых. Сюда входили жилые и подсобные помещения, школа для девочек и сад. В 1879 г., также на средства Бахрушиных, при богадельне устроили каменную церковь в честь Казанской иконы Божией Матери.

В годы советской власти в здании богадельни разместилась городская больница, а в помещении Казанской церкви — приемный покой и служба «скорой помощи».

В 2002 г. здание церкви передано верующим. В настоящее время регулярно совершаются богослужения, ведутся восстановительные работы.