Купцы Кастровы были не только промышленниками, но и меценатами, охотно занимались благотворительностью. Они внесли существенный вклад в финансирование строительства Нижегородской городской мечети.
В нашем городе в 1808 г. было открыто медресе – мусульманское учебное заведение, которое содержалось за счет финансовой поддержки богатых мусульман. С 1868 г. попечителем медресе стал Сайфулла Мурсалимович Кастров - владелец мерлушечного производства.

Семья Кастровых содержала медресе, построила для него здание, оплачивала жалованье преподавателям, поэтому медресе называли «Кастровским». На полном пансионе Кастровых жил преподаватель медресе Хасан Шамсутдинов и его семья.
В 1901 году в Касимовском медересе обучалось 65 учеников. Главными предметами был Коран и арабский язык, меньшее внимание уделялось светским предметам: географии, логике и истории.
После революции медресе было закрыто. В 1930-е гг. здание медресе перешло к городской организации «Жилкомхоз». В начале 2000-х гг. оно было передано в пользование мусульманской общине Касимова. В декабре 2014 г. здесь был открыт Татарский Центр культуры и искусства им. Ахмеда Ишимбаева.