秦琼和程咬金、裴仁基商量了一下，投靠了王世充，相当于又回到了隋王朝。王世充还是很高兴的，毕竟他们几个都是绝世的猛将。当时的隋王朝已经在风雨飘摇之际，这些手握重兵的将军们都有了自己的小心思。王世充的势力很大，他就想着把皇帝废了自己来当。
裴仁基后来发觉了王世充的想法，他就找了几个隋王朝的臣子，商量一个办法把王世充给杀死。可惜，后来的行动失败了，王世充把参与这件事的人都给杀了。对于秦琼也有了防备之心，毕竟他和裴仁基的关系那么好。为了防备秦琼叛变，王世充就派人把秦琼的老婆孩子给扣押下了。
经历了裴仁基事件以后，秦琼已经不想呆在王世充的身边了，感觉跟着他迟早得玩儿完。还不如趁早谋个好出路，李渊的名气在当时十分大，秦琼和程咬金商量了一下就想着投靠李渊去吧。秦琼在当时还是挺犹豫的，自己跑了问题不大，可是老婆和孩子怎么办？以王世充的为人，自己一旦逃跑，他肯定不会放过自己的家人。
