象河从秦始皇统一中国后就设郡和县二级，历史悠久，直到公元591年时象河已设编县、南顺郡、长林县、武宁郡，时间已长达797年，而且长林县还在往北移，开皇十一年（591年），废长林县（象河）入长宁县（仙居一带），这时南边的人们意见非常大。到隋开皇十二年（592年），南边由天台山国清寺高僧智（原名陈德安）禅师主持修建东宝宝塔，宝塔通高33.8米，底部周长30.6米，七层飞檐，八棱翘角，隔面设窗，攒尖式的塔顶。自底层有螺旋式青石阶梯，直上顶层，塔身用清一色长条青石砌筑，塔基八角各雕一尊托塔金刚石像，威武刚毅，神态逼真。塔上镌刻“长林头角”四个大字遒劲有力。宝塔的修建是为了压住北方象河或仙居一带的山头，将城市南移，民间流传着“立了东山塔，长林生头角”的谚语。

北面流传着“东山塔是用来抵压象河山头的，因为在这以前，城市一直在北面，而且北面又出人才。”到了开皇十八年（598年），又改长宁为长林，城市移到子陵上泉岗一带，后来又移到藻湖，这时才平息了风波。到建中三年（782年）又才在北境立荆门县（象河），不久被张伯仪废。又过了23年，直到唐德宗贞元二十一年（805年），又才在长林县北境（象河）立荆门县。说明古代的人们在城市建置的地理位置上意见分歧较大。后来，由于荆襄古道的渐废，荆襄驿道的东移，城市才在现在这个地方确定下来。根据赵象河为明代住守象河白沙州城的将军来看，这个城市应在明朝初期或中期才被完全撤除改为良田，这段时间内文职官员和机构都被撤，赵象河应是在象河把守马牙关的武职官员。

《太平寰宇记》，“荆门之地，乃荆，襄州要津。”为了加强对荆襄古道古城的管理，襄州刺史尉迟恭在荆门山上建有荆门关，荆门山不是虎牙山，荆门关不是虎牙关，也不是乐乡关，荆门关在北，虎牙关在南，乐乡关在东，马牙关在西，形成四关重围。可见这四关是用来保护荆门古城（象河）的重要关隘。