杨政的残忍行径被世人唾弃，家妓做事稍有不如意的地方，便会下令杖杀并且剥下她的皮。在洪迈的《夷坚志》中有这样的记载：杨政乃秦中名将……官至太尉。然资性残忍，嗜杀人……。
在一年元旦，杨政曾大宴宾客，作为部下的李叔永也在宴请宾客之中，席间他忽遇内急，便在府兵的带领下前往茅厕。府兵在前端着蜡烛领路，灯火忽明忽暗让前行有些困难。忽然在身后的李叔永看到烛光所映的墙壁上出现了几处"人影"，以为是一副壁画。
他便上前查看，可却看不到任何笔迹，也看不出全貌来，他粗略数了一下，发现共有二、三十副左右的"壁画"。便好奇的问前面的府兵：这是何画？府兵听后先是前后观望，发现无人后才答到：我家大人妻妾成群，皆是一流舞姬，可大人的脾气不好，她们稍一不慎就会被杖杀……。
