吕不韦往来于各国之间，信息灵通，哪里有便宜货就到那里大量收购，而后运到紧缺的地方高价卖出。由于经营得法，很快成为巨富，积累了万贯家财。
有一年，他在赵都邯郸遇见了秦昭王的孙子异人。异人是秦昭王的太子安国君的庶子。安国君有儿子20多个，都是姬妾所生，而最宠爱的正妻华阳夫人却没有生育。
异人既不是嫡子，也不是长子，母亲夏姬又早已失宠，在秦国的王孙中根本没有地位。公元前279年秦、赵渑池之会后，他被作为人质送到赵国。
这种互送人质以表示遵守信约的方式，是丝毫不起作用的。那以后，秦曾几次发动对赵国的进攻，赵虽然没有杀异人，但对他非常不客气，异人的处境很困难，终日郁郁不乐。
