虽然朝鲜四郡的设立持续了好几百年，从公元前108年到公元313年，但是四郡并存的情况，在历史上其实并没有持续多久，不过只有二十多年，前82年，真番、临屯二郡与玄菟郡的东部地区被并入乐浪郡，而玄菟郡的治所也西迁到了高句骊县。
但是乐浪郡与玄菟郡，从东汉到曹魏与西晋都被保留了下来。值得一提的是，东汉末年割据的辽东势力公孙氏，曾经把乐浪郡南部原本是真番郡的辖地给重新分离了出来，称为带方郡，这一规划在魏晋时期也被继承了下来。
公元313年，高句丽崛起后吞并了乐浪郡，至此汉四郡彻底灭亡不存于世。而原本真番郡的辖地，也就是带方郡因为是中原王朝的飞地，因此受到了孤立，于次年被百济国所吞并。
