Дом построен в 1830-х годах надворной советницей Надеждой Федоровной Селивановой, а затем перешел к ее сыну надворному советнику Александру Никифоровичу Селиванову, продавшему его в 1850 году губернскому предводителю дворянства генерал-лейтенанту Александру Николаевичу Арапову, крупнейшему винозаводчику. Через несколько лет после его смерти, последовавшей 8 ноября 1872 года, здание сняла в аренду 2-я мужская гимназия, открытая 1 сентября 1874 года на базе шестиклассной прогимназии. В это время домом владел сын бывшего хозяина камергер Двора Его Величества Александр Александрович Арапов, ставший почетным опекуном гимназии.
В ней обучались такие видные деятели культуры, как выдающийся режиссер Всеволод Эмильевич Мейерхольд (1884–1895), «звезда» немого кино Иван Ильич Мозжухин (1899–1907), писатель-театровед, доктор искусствоведения Юрий Васильевич Соболев (1896–1906), писатель и театральный критик Николай Дмитриевич Волков (1904–1912).
А. И. Дворжанский.