Замок Пуке расположен примерно в 25 км к северо-западу от Гента, недалеко от города Алтер. Когда на этом месте появились первые укрепления, точно неизвестно, но по некоторым данным, уже в 1139 году здесь были первые постройки. Замок играл важную роль в конце 14 века, в конфликте между графом Фландрии Людовиком II и Гентом.

В 1452 году в ходе восстания в Генте против Филиппа III Доброго, замок был захвачен гентским народным ополчением, но вскоре Филипп отвоевал замок, восставшие были казнены, а замок разрушен. Восстановление замка после этого заняло более века.

Во второй половине 17 века замок был перестроен, а в 1872 году владения были куплены бароном Пуке де Петегхемом из Ауденарде. Он сразу же начал реконструкцию замка, в результате которой был обновлен его интерьер и заметно изменен внешний его вид. После этого остатков прежней постройки не сохранилось. Кроме этого, французский сад был превращен в английский. Последняя владелица замка баронесса Пуке де Петегхем завещала замок одной благотворительной организации, которой замок была передан в 1955 году.

Комплекс занимает площадь около 55 гектаров, замок окружают парк и глубокий ров, заполненный водой, так что попасть в замок можно только через мост.

В 1977 году территория замка стала собственностью города Алтер, которая использует его для проведения культурных мероприятий. В 1943 году замок получил статус памятника, а прилегающий к нему парк был признан защищаемым ландшафтом в 1978 году. С 1998 года в замке находится один из офисов местного телевизионного канала.