李白被召入皇宫后，与唐玄宗、杨贵妃有过近距离接触。唐玄宗欣赏李白的才华，主动与他交谈，而杨贵妃作为当时最受宠的妃子，与李白碰面也在情理之中。李白曾写下“云想衣裳花想容”“可怜飞燕倚新妆”等诗句来赞美杨贵妃，字里行间充满宫廷文人的雅致，也生动勾勒出杨贵妃的绝代风华。自古以来，才子与佳人之间总容易引发无数遐想。不过在等级森严的大唐宫廷，即便李白再狂放不羁，也不可能与杨贵妃产生什么越界的关系。尽管民间野史中流传着一些李白与杨贵妃的暧昧传闻，这些说法并不可信，但以唐朝爱才重文的社会风气来看，两人之间互相欣赏、惺惺相惜的可能性是存在的。
大约一年之后，李白就被逐出了宫廷。关于他被赶走的原因，历来说法不一。有一种观点认为，是杨贵妃与高力士在唐玄宗面前说了李白的坏话，导致他失宠；还有一种说法是，李白在诗中影射了杨贵妃与安禄山之间的不清白关系，触怒了杨贵妃。然而仔细推敲，这两种说法都站不住脚。李白虽然为人狂傲、蔑视权贵，但也不至于胆大到把杨贵妃的私生活写进诗里呈给皇帝看；而杨贵妃虽然深受宠爱，唐玄宗也不会允许她插手朝政，史书上也没有任何杨贵妃干预政务的记载。因此，她不太可能促使唐玄宗赶走李白。至于高力士，他虽然是唐玄宗身边的宠臣，但身为太监，历史上对他的评价是安分守己，不会干涉朝政。既然这两人都与李白的离开无关，那真正的原因究竟是什么？
李白进入皇宫的初衷是想做官，希望借此实现自己的政治抱负。但他在官场上的能力其实相当有限，甚至可以说并不具备处理政务的才干。他唯一能拿得出手的，就是过人的文学才华。在宫廷中，他自然有机会接触到许多机密内幕，而唐朝皇室的生活又以混乱著称，这些事关皇家颜面的事情，绝不能外传。偏偏李白嗜酒如命，一喝就醉，醉后管不住自己的嘴，更别提手中那支笔了。因此，最可能的情况是：唐玄宗担心李白喝醉后把宫中的秘密泄露出去，才没有让他留在身边做官。所以，李白被逐出宫廷，根本原因还是出在他自己身上，与杨贵妃并无关系。
