Восьмикутна гробниця Гюль Баба побудована при османському правлінні між 1543 і 1548 роками за наказом третього паші Буди недалеко від мосту Маргіт. Гробниця має плоский купол, покрита свинцевими пластинами і дерев'яні плитками. Під час другої битви за Буду в 1686 при Габсбургах гробниця дивом залишилася неушкодженою, але була перетворена в каплицю католиками єзуїтами, які перейменували її в Каплицю Святого Йосипа.

Коли земля, на якій покоїться прах Гюль Баба потрапила у власність Яноша Вагнера, він дозволив доступ до цієї святині мусульман, що здійснювали паломництво в Буду з Османської імперії. У 1885 році османське уряд доручив угорським інженерам відновити гробницю і, коли робота була завершена в 1914 році, вона була оголошена національним пам'ятником. Гробниця була знову відновлена в 1960-х, а в 1990-х роках зазнала повторної реставрації. В даний час Гробниця Гюль Баба є власністю Республіки Туреччина.