很多湘军将领都是靠镇压农民起义起家，双手沾满起义军的鲜血，但是他们很大一部分人都是很忠君爱国的，包括杨岳斌。公元1883年（光绪九年），中法战争爆发，战争从中国和越南的边境争夺开始，一直延伸至中国东南沿海，法军顺势入侵台湾，杨岳斌受命率领水师赴台抗击。在台湾一带水面，杨岳斌协助刘铭传打败了法国舰队，捍卫了国家主权和尊严。公元1885年（光绪十一年），中法双方停战，清朝以胜利换取议和，放弃对越南的宗主权，承认法国对越南的殖民，杨岳斌得知后悲愤不已，辞职回乡隐居。
公元1890年（光绪十六年），杨岳斌因忧愁国家和民族，在家中悄然离世，终年68岁。清廷得知杨岳斌的死讯，追赠"太子太保"，上谥号"忠武"。
