可巧的是，在芝麻地里锄草的两个女子正是张良的结发妻子和亲生女儿。由于张良常年在外，一时竟然没有认出来。听到空中的山歌，妻子觉得好生耳熟，抬头看，天空中飞着一只大风筝， 坐在上面唱歌的正是多年不见的夫君。妻子又惊又喜又羞又气，又不便发作，便转头低声告诉了女儿。女儿对自己父亲的轻佻行为十分生气，顺口唱了一支歌来讽刺父亲:耕芝麻，耨芝麻，芝麻地里两朵花。我娘陪过你张良多少夜，何曾穿过什么绫罗着过什么纱?
听到下面的对歌，张良才知道自己一时糊涂，竟然调戏到自己的女儿身上。他顿时懊悔不已，羞愧难当，脑袋"嗡"的一下什么都不知道了，双手随之失去控制，身子一晃，从风筝上摔了下来，像一块陨石，"扑通"一声落到西子湖畔，再也没有醒来。
据传，那条系风筝的铁索至今还在南通呢。
传说毕竟是传说，并没有什么事实的根据。但是，这个故事却表明了当地的人们对张良升官发财后冷落家人的不满。
