1936年12月26日，在张学良的坚持之下，他送蒋介石回到了南京，尽管张学良在到南京之前得到过宋美龄等人的承诺，不会为难他，可是蒋介石随即就翻脸，也再次证明张学良是幼稚的。
张学良到了南京之后，发现住处外面总有人监视，很显然这些人是国民党的特务，此后张学良的行动逐渐受到限制，直到最后沦为阶下囚，这对于一个当年称霸一方的少帅来说落差巨大。
后来张学良自己也感叹，“我的生命在1936年就结束了”，张学良这样说也是有原因，因为被囚禁的生活如同行尸走肉一般，尽管期间张学良曾多次争取释放，但都功败垂成。
最有机会被释放的一次是在1949年1月23日，当时李宗仁代理总统一职，东北军曾经的将领，联名向李宗仁提出释放张学良的请求，李宗仁也答应了，可蒋介石却不干，暗中叮嘱陈诚至此置之不理。
就这样张学良白高兴一场，从此似乎死心了，他跟赵四小姐过着“男耕女织”的生活，为了打发时间张学良开辟了一块地耕种，戴着斗笠干活，犹如农家翁一般，赵四小姐则养了许多鸡。
他们这些“忙碌”只是为了打发时间而已，因为张学良的生活待遇都是充分供给的，牛排、红酒、饮料都是应有尽有，据说当时为软禁张学良一个月的开支，足够装备一个团。
