30 сентября Церковь отмечала память святых мучениц Веры, Надежды, Любви и матери их Софии. Еще 100 лет назад престольный праздник в этот день праздновали в домовой церкви во имя святой мученицы Надежды при Александровском доме призрения бедных. Дом был основан в 1873 году по мысли и при содействии бывшего городского головы П.А. Устимовича. При учреждении была открыта домовая церковь во имя святой Надежды (по имени жертвовательницы - матери П.А. Устимовича). Храм был приписан к Благовещенской церкви.
Государственный архив Курской области хранит опись ценностей, изъятых 22 апреля 1922 года из Надеждинской церкви города Курска: потир, дискос, звездица, ковш, ситечко, два креста, дарохранительница с приборами, четыре лампады, ризы.
Находился Александровский дом призрения бедных на улице Дворянской, ныне улица Льва Толстого, 14. После 1990-х гг. в этом здании располагался завод медицинского стекла.