В 1860-61 гг. по проекту архитектора С.И. Уптона вначале Большой Георгиевской улицы (ныне Теплосерная) было построено здание Щелочных ванн. В 1864 г. С.И. Уптоном и немецким гидротехником Штуцем здание было перестроено: были убраны общие бассейны и увеличено количество ванных комнат до 11.
В 1899 г. архитектором А.М. Кочетовым произведён капитальный ремонт здания. В 1890-х годах начались проектные разработки нового здания на углу улиц для Гидропатического заведения. В 1899-1900-х гг. на углу с Церковной улице построено двухэтажное здание в стиле эклектики ренессансного направления. Фасад был украшен лепниной в виде растительного орнамента и 13 цементными вазами на консолях.
22 июня 1914 г. у углового здания в деревянной беседке был открыт бювет Теплосерного источника №2, позже получивший название Лермонтовский.
В 1950-х годах бювет источника был закрыт; в 1990-х оставшиеся конструкции бювета разобраны. После 1950-х годов пропала кованая ограда со стороны Церковной улицы (ныне Соборная).
Внешний облик здания в удовлетворительном состоянии. Вазоны и лепнина сохранились, хотя сильно загрязнены. Входные двери, кованая решетка на аттике и памятные таблички у входа, с датой постройки здания, сохранились и находятся в удовлетворительном состоянии, но также требуют косметического ремонта.
В частности, вот этому флигелю