高力士见太上皇每日哀伤入骨，那日天气晴和，便扶上皇到勤政楼的飞桥上推窗闲眺，解愁散闷。桥下横跨街市，只因宫禁森严，帝后亲贵从不到飞桥上观览。街市上的百姓有人认出是太上皇，顿时喜形于色，依恋桥下，愈聚愈多，竟把一条大街壅塞住了。那太上皇见百姓如此爱戴他，便也含笑向众人点头示意。百姓不禁跳跃着欢呼道：“今日再得见我盛世繁华的太平天子了！”齐呼万岁，欢声动地。
这时肃宗皇帝卧病南内，朝廷大事都有丞相李辅国专权。他看肃宗宠爱张皇后，李辅国诸事便禀承张皇后，此举果然讨得张皇后的欢心，由此内外通成一气。张皇后见太上皇深得民心，生怕因上皇与陈元礼等一班旧臣勾结，密谋变乱，重新执朝政，便乘肃宗病势昏迷的时候，命李辅国假造皇上旨意，奉太上皇迁居西内，使之与外界隔绝，只选老弱内监三十余人，随太上皇迁居。