В 1899 г. «тщанием прихожан» был построен каменный трехпрестольный храм, освященный во имя святителя Николая Чудотворца с приделами в честь Казанской Божией Матери и прп. Иоанна Рыльского. К церкви пристроена каменная колокольня, крытая железом.
При храме действовала церковно-приходская школа. Приход содержал несколько земских школ. В деревнях Щербачевка, Бардаковка и Нижняя Паровая находились двухлассные, в Красном Клине — земская одноклассная. С 1900 г. законоучителем в школах состоял священик Гавриил Алексеевич Вишневский.
С 1937 г. Николаевская церковь селе Ржава бездействует по причине «отказа клира от работы». 2 сентября 1940 г. приход упразднили. По состоянию на 1 января 1953 г. числится зарегистрированной религиозная община с. Ржава. Периодически богослужения в храме прекращались из-за отсутствия священника. В 1975 г. церковь была вновь закрылась, но в 1990-х гг. приход возродился и действует до сих пор.