Триповерхова будівля була зведена у XVII столітті й спершу слугувала пивоварнею та рестораном. Пізніше кімнати в ній стали здавати в оренду. В одній із них 20 квітня 1889 року і народився Адольф Гітлер. Через три роки його сім’я переїхала до прикордонного німецького міста Пассау.
Коли Гітлер прийшов до влади, його особистий секретар Мартин Борман придбав будівлю та перетворив на культурний центр імені фюрера з бібліотекою і галереєю, де виставлялися роботи місцевих митців. У 1945 році німецькі війська хотіли зруйнувати дім, але США цьому запобігли.
По завершенні Другої світової війни будинок потрапив у приватну власність. Його використовували як школу, бібліотеку й притулок для людей із інвалідністю. У 2019 році влада Австрії остаточно націоналізувала будинок, заплативши загалом понад 1,8 мільйона євро.
Роботи з реконструкції будівлі мають початися восени 2022 року. Вони здійснюватимуться за проєктом архітектурного бюро Marte, що з федеральної землі Форарльберґ. Поліцейський відділок має запрацювати з 2023 року.
Влада Браунау-на-Інні сподівається, що реконструкція будинку зробить його менш привабливим для неонацистів, які раніше збиралися в ньому для вшанування пам’яті Адольфа Гітлера.