永安州问题很复杂，其原本是中越模糊地带，后越南独立后蚕食此处，丁朝、前黎朝以前为潮阳镇；李朝改为永安州；陈朝为海东路；明朝初期曾吞并越南20年，此处为为靖安州之地，隶新安府；越南独立后，后黎朝改称安邦镇。越南独立初期（1428年），由于明朝溃败，越南开始沿着边境蚕食，大大扩大了控制范围。之后越南国内内乱，莫朝受到明朝武力震慑上表请降，将安广（即安邦镇，越南黎中兴朝后，避英宗讳，改为安广，英宗名维邦）永安州的澌凛、金勒、古森、了葛、安良、罗浮诸峒等一片地方再还给中国然。然而，由于越南耍滑以及明朝官员的不负责任，之前蚕食的明朝疆域并没有完全归还。
这就导致今广西防城港地区所有的入海口和伸向海洋的半岛这些失地明朝并未进一步索取，于是这一片成为模糊地带。越南在这一"飞地"上置有蠔丫村、啼鸡村、松迳村（三村皆在今广西防城港与钦州湾所夹之半岛上）、永安州（治所在今广西防城区南，后虽被废，但原属钦州的江平、黄竹、白龙尾仍为安南占据）、江平村（今广西东兴市江平镇）、春兰社（今芒街东南）、万宁州（其外为罗浮、古森、河洲、澌凛诸处）。一直到明末趁着黎莫相争之际，广东地方官员才招抚收回部分地带。但仍旧造成了令后世很困扰的"飞地"问题。
不过京族三岛却基本上一直都是越南在控制。中方并没有太大异议，由于该地区基本都是越南移民居住，中国朝廷的存在感很低，中国长期以来也均认同这里归属越南（从现在中国出版的历史地图册也能看出）。
我国官定的历史地图集中，"京族三岛"在清前期是划在越南的
