永王败北后，右相崔涣宣慰江南，收罗人才。李白上诗求救，驻扎在浔阳的中丞宋若思把李白从监牢中解救出来，并让他参加了幕府。崔涣为永王事件牵连的人开脱罪名，却得罪了同僚和下属，被罢去右相之职，并贬为太守。接替崔涣办理永王事件的官员李峘，将已结案件推翻重审，并重新拘捕释放人员。宋若思让李白先藏起来，不久，藏在潜山县司空原旧居的李白被逮捕，后被判流放夜郎。
李白晚年被判流放夜郎，但李白是否到过夜郎至今仍存争议。图为如今贵州省桐梓县的夜郎坝(图片为黄光荣提供)。
是否到过夜郎争议不断
贵高原东北部莽莽苍苍绵延千里的大娄山脉中段，有一个县城叫桐梓。在春秋战国时期，桐梓即属于古夜郎国鳖国范畴，秦汉时期属于先后设置的夜郎郡领域，史学界把桐梓称为唐宋夜郎。桐梓有个夜郎坝，四围皆山，其峰其峦，错落连环，是个海拔600多米的山间盆地，目前是夜郎镇镇政府所在地。
李白是否到过夜郎？学界至今仍有争议。有人认为李白在流放途中就接到赦免的诏书，有人则认为李白曾在夜郎居住过3年。贵州当地研究李白的学者黄光荣对记者说，桐梓留存有不少和李白有关的地点，如太白诗碑、太白碑亭、百碑台、太白书院、太白望月台、谪仙桥等。
李白中途遇赦得返，并未到过夜郎的观点，最早见于北宋人曾巩所写的《李白集三十卷序》。曾巩根据李白的诗、书、自叙分析李白遭流放后，上峡江，至巫山，以赦得释，并未到达夜郎。主张李白未至夜郎的一个主要依据是李白本人有《流夜郎半道承恩放还》一诗。
黄光荣认为，李白确实到过夜郎。仅清王琦编注的《李白全集》收集的李白诗，就有32首是关于夜郎的，如三载夜郎还，于兹炼金骨、传闻赦书至，却放夜郎回、万里南迁夜郎国，三年归及长风沙、我寄愁心与明月，随风直到夜郎西等。 公元759年，李白被赦免之时，已经58岁。两年之后，季广琛出任宣州刺史，他与李白曾同为永王幕僚。在官军收复宣州的鼓舞下，已经60岁的李白不顾年事已高，决定再次投军扫除东南之乱。他来往于金陵、宣州间，有《饯李副使藏用移军广陵序》、《宣城送刘副使入秦》诗。李白欲投李光弼军未果，写有《闻李太尉大举秦兵百万出征东南，懦夫请缨，冀申一割之用，半道病还，留别金陵崔侍御》。此次投军未果，既可说是怀揣报国之志的浪漫主义诗人李白的最后一次自我请缨，也可说是李白从政之路的最后一次尝试。随后，李白即返回当涂县其族叔李阳冰处，并于第二年卒，葬今安徽省马鞍山市当涂县龙山，后移墓地于青山。