安平古堡已有300年历史，但留在游客印象中的白色了望台是日据时期所建，由荷兰人建筑的「热兰遮城」，也就是安平古堡的前身，如今只剩一堵老榕盘据、厚实而班驳的城墙，这才是安平古堡列名的一级古迹。

如同「普罗民遮」城(赤崁楼)，热兰遮城残留的遗迹已相当稀少珍贵了，古堡西北侧的古壁史迹公园中还留有一小段残墙，高大班驳，骑墙榕大剌剌地占据上缘，由气根发育而成的系根、树干盘根错结，由3、4公尺的高度直达地面，早已和城墙发展到生存与共的不可分地步；屹立300年，城墙诉说的是一页沧桑。

热兰遮城是在1624年开始动工兴建，当时是荷兰人统治台湾全岛政治及经济的中心，1662年，郑成功经过8个月的包围攻下热兰遮城后，收复台湾以及筹划反清复明大业，也以此地为决策中心。

清廷接收台湾，台南地区的行政中心由安平移回府城内，缺乏管理照料的热兰遮城逐渐倾毁，再加上建筑亿载金城时为撙节经费大量利用了这里的砖石，一般民家见状，更是有恃无恐，修筑屋舍也来此就地取材，热兰遮城就这么被拆得体无完肤。

热兰遮城被完全铲平是日据时期的事，1930年，统治者利用原地建起了红砖平台，以及白墙黑瓦带有南洋风味的海关宿舍，新建筑的使用面积较原热遮兰城小，因此部分城墙能保留至今。

安平古堡是台湾光复后的命名，现今参观的部分大致可分为古迹纪念馆、了望台、古壁史迹公园等部分；古迹纪念馆就是日据时期的海关宿舍，内容包含荷郑时期的政治史迹、热兰遮城的模型，以及由奇美博物馆筹划的荷郑时期文物展示等。

在古迹纪念馆中两幅巨型绘图，左侧呈现的是热兰遮城的位置，以及台江内海仍未淤积前安平区的形势，右侧「最后的诀别」(见图)描绘的是郑成功包围热兰遮城时，荷兰牧师奉郑成功之命入城劝降，却反而要城内人要英勇抵抗的故事；在陪同前来的郑氏官员前竟然公然违命，出城必是死路一条，住在城内的牧师女儿当然说什么也不肯让父亲离开送死，但牧师态度坚决，毅然决然赶赴黄泉路。画中牧师女儿跪地恳求，牧师既不舍又坚毅的表情，再加上明郑官员写在脸上「自找苦吃」的内心想法，带领观画人真真切切地贴近当时的情境。