后来，谭钟麟就收她做小老婆。谭家人都看不起她，仍然把她当下人使唤。直到生下谭延闿后，她的境况才有些好转，谭延闿很小的时候，就常听人喊他"小老三"，他有些迷惑不解，等到后来他考上了举人，有人又喊他为"三大人"，他也觉有些惶惑之感，于是就去问自己的母亲，母亲告诉他，因为自己是他父亲的小老婆，所以别人才会这么喊。亲生母亲受歧视的情景，谭延闿自小看多了，心里很难过，感到愤愤不平。
谭延闿高中会元以后，谭钟麟才向全家宣布："李氏夫人可以入正厅就座用膳。"显然，这是"母以子贵"，谭钟麟才放宽了宗法仪范的尺度。1916年，谭延闿的生母在上海病故。此时，他第二次督湘，政局动荡。此时离湘，湘督"宝座"有得而复失的可能，但他闻讯后，当即赶往上海寓所奔丧。第二年，谭延闿扶灵迎葬长沙，暂停柩荷花池。
后来，谭延闿母亲的灵柩停放在长沙谭氏宗祠。谭宅位于谭姓族祠的后进，灵柩出殡必须经过族祠出门。按照族规，妾死后不能从族祠大门出殡。出殡那天，族人议论纷纷，说她不是谭家的正室，不能从大门出殡，只能从侧门出。这次，谭延闿再也忍不住了，当扛夫要起肩时，他俯卧在棺盖上，大声说："我谭延闿死了，抬我从大门出殡!"顿时，人们鸦雀无声，只好抬着灵柩从大门出殡。
