Совсем скоро об этом месте узнали жители города, почитавшие Филарет как святого. Они стали навещать его, а некоторые по примеру инока стали отшельниками и поселились неподалеку. Братство росло, была выстроена часовня, но вскоре Филарет скончался, оставив иноков без духовного руководства. Тогда братия испросила у казанского митрополита разрешения построить в скиту церковь и назначить священнослужителя. В 1662 году был назначен настоятель, и начались работы по строительству церкви и стен вокруг обители.
Шли годы. Раифская пустынь росла: прибывали новые монахи, множились молитвенные традиции, строились церкви. В XVIII веке их было уже около 16 - все необыкновенно красивые, богато украшенные иконами и росписями. Обитель процветала. Но в 1918 году, как и многие другие монастыри и церкви, она была закрыта. От полного разрушения спасло лишь чудо. Монахи были вынуждены уйти из этих мест, некоторых из них расстреляли, некоторых преследовали гонения. Но до конца жизни они не оставляли своего духовного служения. В постройках монастыря расположились промышленные предприятия, трудовая колония.
Сегодня Раифский Богородицкий мужской монастырь восстановлен. Налажена духовная жизнь, реставрируются храмы, идут службы. Братия насчитывает около 60 монахов. Поездка сюда будет интересна не только церковным людям, но и тем, кто интересуется древней архитектурой.