江户时代（1603-1868年），高山阵屋作为行政中心和镇上官员的住所。高山阵屋以其优质的木材和高超的木匠技艺而闻名于世，曾被德川幕府直接控制，如今，高山阵屋为人们提供了一个了解高山镇历史的迷人视角。

虽然现在的建筑是19世纪初的重建，但从高山阵屋的构造和美感上可以看出当地工匠的技艺。事实上，该建筑群直到1969年还在使用，而现在则作为博物馆使用。

建筑群包括主要的行政中心和住宅、附属建筑和仓库等多个建筑。高山阵屋是最后一座建筑，全年（12月29日-1月1日除外）08:45-17:00对公众开放。门票为440日元。