Садиба В. Харитоненка в місті Суми розташована на початку вулиці Троїцької. Історія її почалася в 1860 роках, коли відомий цукрозаводчик придбав земельну ділянку на березі річки Псел в місці впадання в неї річки Сумки, де й побудував садибу й контора торгового дому «Харитоненко і син». В конторі працювало до 25 клерків, її гордістю був великий касовий зал і зручні кабінети.

У 1912-1913 рр. П. Харитоненко провів капітальний ремонт будівель, зробивши їх ще більш розкішними і комфортними, оснащеними усіма видами комунікацій. Також були перебудовані господарські приміщення у дворі - стайні, льодовики та ін Удосконалення торкнулися і саду на березі річки. Раніше перед будинком розміщувався фонтан, який прикрашала фігурка античного божества. Але пожити в облаштованій садибі П. Харитоненку довго не довелося, оскільки у 1914 р. він помер.

Вже після революції, в 1919 р. в будівлі розмістився фінвідділ, а після - дитячий санаторій імені Косіора. Під час війни приміщення були передані госпіталю, а по закінченню війни, в 1947-1952 рр. садиба як би повернула собі початкові функції, перетворившись в контору управління сахаротреста. З 1952 р. і до наших днів в садибі розміщувалися лікувальні заклади: у будівлі контори - Перша поліклініка і Сумська райлікарня, а в домі - міська дитяча лікарня, пізніше її перевели в іншу будівлю, а будинок перейшов управління земельних ресурсів.

В останні десятиліття садиба Харитоненко стала приходити в занепад. У 2003 році райлікарня була виселена з маєтку, в якому після грандіозної реконструкції планувалося створити «Маріїнський палац Сумської області». Пізніше садибу планувалося відновити і пристосувати для потреб головного управління Нацбанку в Сумській області. На жаль, через відсутність коштів роботи були припинені.

Зараз садиба В. Харитоненко належить Українській академії банківської справи НБУ, яка планує створити тут Палац творчості та дозвілля студентів.