Кам'яна каплиця на Театральній площі була збудована у 1867 році саратовським цеховим суспільством в пам'ять чудесного порятунку Государя Імператора Олександра II від загрозливої небезпеки 4 квітня 1866 року. В той день постріл з пістолета Дмитра Каракозова (випускника саратовської чоловічої гімназії) не досяг мети, завдяки втручанню знаходився поруч обивателя.

Каплиця була освячена 4 квітня 1869 року преосвященним Іоанникієм, обробка її, зважаючи на брак коштів, тривала ще 6 років і передбачені барельєфи на стінах із зображенням подій з царювання Імператора Олександра так і не були виконані. Каплиця була відкрита для прихожан і приписувалася до Олекандро-Невського Собору, чому і називалася в народі Олександро-Невської.

З пристрою вівтаря на кошти купця Єгорова каплиця була звернена в храм і освячено преосвященним Гермогеном 4апреля 1910 року в честь ікони Божої Матері «Живоносного джерела».

У 1933 році каплиця була закрита і знесена. У 1997-1998 році відтворена за малюнками та іншими документами старанням новообраного саратовського губернатора, а у Світле Христове неділя 19 квітня 1998 року була освячена архієпископом Олександром на честь ікони Божої Матері «Живоносного джерела». В наші дні каплиця відкрита для прихожан і будучи невід'ємною частиною історії Саратова прикрашає головну площу міста. Поруч з каплицею знаходиться ще одна визначна пам'ятка - пам'ятник у вигляді православного хреста творцям слов'янської писемності Кирила та Мефодія.