Музей образотворчих мистецтв у Хаконе був заснований компанією Pola – японським виробником косметичних засобів. Крім музею, група компаній Pola Orbis також заснувала в 1979 році Фонд традиційної японської культури і в 1996 році – Фонд мистецтв. З допомогою цих організацій Pola Orbis займається вивченням і просуванням японського мистецтва.

Музей у Хаконе зводився протягом двох років і був відкритий у вересні 2002 року. Як і багато будівлі культурно-просвітницького призначення в Японії, музей будувався як частина симбіозу рукотворних об'єктів з природою Хаконе. Музей розташований в лісовому масиві національного парку Фудзі-Хаконэ-Ідзу на тлі 300-літніх букових дерев і є фрагментом пейзажу. Щоб мінімізувати втручання в природне середовище, більшу частину музейних приміщень було вирішено розмістити під землею.

Колекція музею налічує 9500 творів мистецтва, які були зібрані протягом сорока років Судзукі Цунэси – власником Pola Group, нині покійним. У зібранні представлено близько 400 картин європейських художників, у тому числі французьких імпресіоністів і сучасних японських живописців, які писали в західному стилі. Музей має три полотнами Ван Гога, а також картинами пензля Клода Моне, П'єра Огюста Ренуара, Сезанна, Пабло Пікассо. Одним з японських авторів, представлених у музеї, є Цугухара Фудзита, який був відомий в Європі під ім'ям Леонара Фужита. Він відноситься до так званої «паризької школи». У 2013 році колекціонер, чиє ім'я не було названо, передав музею два раніше невідомих роботи майстра – полотна «Сирени» і «Гротеск». Цугухару Фудзита на початку XX століття переїхав з Японії до Парижа, де жив у кварталі богеми Монпарнас і був знайомий з Анрі Матіссом і Амедео Модільяні. У своїй творчості він використовував традиційну техніку малювання тушшю і прийоми європейської живопису. Цугухару Фудзита вважається одним з найбільш дорогих японських художників.