自从在角板山设裕仁行宫开始，当地就维持管制与神秘性；蒋介石在角板山设置行馆后，同样门禁森严，除因地属山区，普通人进出须先申请入山证外，并有宪兵全天候看守，外界颇难窥其堂奥，甚至有人连当地是“总统行馆”都不知道。
但因行馆可远眺青山苍翠重叠与大汉溪上游支流蜿蜒曲折，山岚云雾笼罩，溪谷若隐若现，蒋介石一得空，有时一住就是两三个月，因此据说角板山宾馆是蒋介石生前最喜欢前往休憩或避寿的地方。
从许多照片上都可以看见，蒋介石常在角板山台地上摆张藤椅，眺望沉思的样貌，他也常带着孙辈在角板山游山玩水，留下很多合照。不过当时山区道路根本未开辟，只有载运物资的台车道，想往角板山须从大溪前往。只是汽车就算勉强开到附近，也只剩山区小径，当时已年过60岁的蒋介石因此是坐轿子上山，宋美龄当然更不在话下。
这批轿夫是蒋介石由大陆整班带出来的老人，平时在官邸内兼作园艺等工作，等蒋介石或宋美龄到角板山等山区时，会带两顶轿子6名轿夫上山，轿夫步行如风，有时连侍卫也跟不上。
由于远离都市且通信不便，蒋介石在行馆多半不看公文，不看报，白天打桥牌，晚上看电影。但因山区颠簸，宋美龄没有蒋介石如此常上角板山。但生活西化的宋美龄每到角板山行馆，最爱的下午茶就是姜饼配上热巧克力，与蒋介石相伴欣赏美景。行馆门口两棵老榕树更是1950年由蒋宋两人手植，并立下石碑纪念，至今仍枝繁叶茂，有如天然的绿色大门，当地人称“永结同心”。
宾馆内参天黑松也蔚为壮观，蒋宋两人也常携手散步听松涛，据说蒋介石还常强调，“老树之能挺立参天，在其有深根也，大丈夫要能挺立天地之间，当有其骨气与信心”，“本无动摇，能生万物”，借此来勉励子孙。直到近来，黑松才逐一枯死。
虽然升格为“总统行馆”，蒋介石对房舍并没什么更动，馆内设有客厅、餐厅、厨房、主卧房、客房与书房，侍卫和随从住在行馆后方一排宿舍；装潢采英式古典沉稳风格，家具也是择深褐色雕花搭配花布沙发。