主公之在公安也，北畏曹公之强，东惮孙权之逼，近则惧孙夫人生变于肘腋之下。
这刘备看到孙夫人是心常凛凛，孙夫人再美也引不起他兴趣啊，所以后来刘备在公安城西的孱陵建了一座城，让孙夫人和她的卫队住那里去，对孙尚香敬而远之，两人也算是过起了分居生活，到刘备入蜀，孙权派大船将孙尚香接回东吴，刘备和孙尚香自此缘断，再无瓜葛。
说到刘备娶"嫂子"的事情，也就是后来的吴夫人，这吴夫人本来是益州牧刘焉第三子刘瑁的妻子，刘瑁算来和刘备都是汉室宗亲，讲起来就是自家兄弟，虽然刘瑁死了吴氏寡居，刘备娶吴氏还是有违礼法，刘备对此犹豫不决，不过群臣是纷纷劝说刘备，法正更是以晋文公娶了亲侄子晋怀公子圉的妻子怀嬴的事来劝说刘备，刘备就答应了。
刘备娶吴氏，有两个原因，一个是吴氏曾经相过面，相面的人说她是大贵之相，当初刘焉为儿子刘瑁娶吴氏过门，也正是因为听说吴氏贵不可言，刘焉心里打了小九九，希望能够在川蜀建立自己的霸业，将基业留给儿子刘瑁，只不过刘瑁在婚后十四、五年就死了，吴氏成了寡妇，而益州也被刘璋继承，刘备占领益州后，群臣和刘备心里也是都打起了小九九，搞不好刘备娶了吴氏以后可以当皇帝了？这样大家都有好处啊，古代对于命理之说可是很迷信的。
