第一宾馆座落于观音亭北侧高地，前身为日治时期的「贵宾馆」，1940（昭和15）年兴建，1942年10月26日由澎湖厅长大田政作主持上栋祭，1943年2月竣工落成。

1949（民国38）年5月17日，已下野的蒋中正总统首度飞抵澎湖，下榻贵宾馆，自此长期成为「蒋公行馆」，并改名为「第一宾馆」。之后，蒋经国总统、李登辉总统多次莅澎视察，也以第一宾馆为下榻歇脚之处。

第一宾馆因其建筑特色与历史意义，1998年12月10日公告为县定古迹。2009年完成建筑主体整修工程，2011年5月18日开馆，正式开放民众参观。

第一宾馆长期作为「蒋公行馆」，故其本体空间，以呈显「蒋公行馆」之生活情境、原始使用空间之室内布设为主题。此外，周遭环境静谧恬适，在绿荫扶疏的陪衬下，显得低调而神秘；其和洋折衷式样所呈现的丰富建筑语汇，以及清空明净的庭园美学，已成为澎湖日治时期建筑的最佳文本和典范。

本建筑为木造建筑，由于木造建筑很脆弱，火灾发生时延烧速度快如无法于火灾初期有效灭火，当消防队到时使用水柱灭火会破坏历史古迹建筑，因此配置13HP引擎移动式细水雾设备做为初期灭火的防灾设备，其防护半径为30M，此设备简易可单人操作又可随时进行教育训练，当熟能生巧时如果遇到紧急状况时便可从容应对，以细水雾设备作为防护的工具停电时也可以继续使用不须另外设紧急电源，可于第一时间灭火将灾害降到最低对中台禅寺及大环境来说是最大的帮助。