按理说，玄宗李隆基让谁卷铺盖，也不应该让李白走人。但是，卷铺盖回家的偏偏就是李白。天宝三载（744年）春天，李白不得不离开朝廷，离开长安。李白做翰林供奉，前后不过一年半时间。
那么，其中的原因是什么呢？
《新唐书》本传说是李白自己恳求退出朝廷回到家乡（“还山”）的，“恳求还山，帝赐金放还”。这当然是有缘故的，即李白“自知不为亲近所容”，也就是说，皇帝身边的人已经很讨厌李白，不可能容忍他继续待在皇帝身边，待在朝廷了；李白本人也意识到，继续待在朝廷已经没有意义。换言之，李白得罪了玄宗李隆基身边的人，例如杨贵妃，例如高力士。
当今权威的文学史教材，一般根据李白的自述，认定是因为朝廷中的权贵谗毁，李白被迫离开朝廷，离开长安。换言之，是朝中权贵将李白排挤出朝廷的。
