В 1861 году, будучи епископом Тамбовским и Шацким, Преосвященнейший Феофан посетил Милостиво-Богородицкий женский монастырь, где совершил освящение двухпрестольного деревянного храма в честь Пророка, Предтечи и Крестителя Господня Иоанна и пророка Божия Илии. До наших дней этот храм не сохранился. Его можно увидеть лишь на одной из уцелевших фотографий прошлых времен.
Большой ценностью для Кадомской обители представляется сохранившаяся в духовном наследии свт. Феофана Затворника проповедь, произнесенная им в Милостиво-Богородицком женском монастыре. Слово на освящение храма обители опубликовано в книге, составленной самим Владыкой Феофаном под названием "Простые истины сердца".
Святителю отче Феофане, моли Бога о нас!