叫瓜步的地方，大展旌旗，列于长江两岸。李璘和李偒登城眺望，见到如此军势，表面上很镇定，心里很震惊。以至于下城的时候，差点摔倒。
李璘的部将季广琛瞅见此事，对自己的部下道：“太上皇诸子之中，除陛下以外，只有永王最贤明。假如永王能率江淮精兵，直取洛阳，解南阳之围，则大功可成。现在永王不仅不这样做，反而率军东进，是心怀篡逆。我不能附逆，使子孙背上反叛的骂名。有愿意一同离开，请站出来。”
诸将全部站了出来。
当晚，季广琛率领自己的部下六千余人，离开永王的军营，投奔广陵长史李成式。
李璘闻知此事，立刻派骑兵追赶季广琛。
季广琛深知骑兵的速度，旦夕就可追上自己。于是率领士卒，以木头做成很长的木制长枪站在第一列盾牌兵的后面，大军结成龟甲阵，等待骑兵的到来。
李璘的骑兵到来后，见季广琛阵容严整，也一时没敢动手。
季广琛遥遥拱手道：“我原系永王部下，因感念永王的大恩，故而不忍与之决战，只是逃命归唐而已。若公等苦苦相逼，我必决一死战。”命劲弩齐开，准备迎敌。
骑兵将领看季广琛早有防备，贸然进攻是占不到便宜。况且季广琛距离广陵很近，一旦广陵长史李成式派兵接应，自己反而处境堪忧。于是大度的放过季广琛，率军返回。
季广琛等骑兵走光，才率军继续向广陵进发。
等到了广陵，得到了李成式的热情接待，并设宴为季广琛等人接风洗尘。
席间，李成式问起李璘军中情况。
季广琛默然不答。
李成式再问，季广琛依旧沉默。
李成式因此叹道：“季将军真是忠厚之人也。”遂不再问。
话说季广琛的逃走，令李璘心里更加慌乱，军中士气低落。
李成式正是瞅见这一机会，决定出击。先是故意命手下小股士兵每人手拿两个火把，站在长江岸边，以此迷惑李璘。
李璘对此懵然不知，还以为是李成式是在自己面前耀武扬威，所以命军士也手拿火把，站在江边遥遥对峙。
殊不知李成式这是声东击西，早就命大批的士兵乘船于当晚渡江，并且连夜偷袭李璘的军营。
李璘猝不及防，招致大败，在乱军之中，李偒肩上受了重伤。父子二人经过合计，认为东、西、北三面都无路可去，只能向南逃，逃到岭南一带才有活命的机会。于是率领家人子女及残兵败将，一路往岭南逃走。
江西采访使皇甫侁率军追赶李璘，双方在大庾岭一带展开激战。大庾岭又称作梅岭，因开元名相张九龄曾在这里监督开凿新路，命道旁多植梅树，故又名梅岭。是岭南和岭北之间的交通咽喉之地。
双方一场恶战，李璘再次大败，并且这回是输得一败涂地，连自己的命都葬送了。
李璘中箭身亡，李偒也死于乱军之中。
皇甫侁对此始料未及，也自知闯祸，但是说什么都迟了。只得命人将李璘的妻妾和子女，护送到成都府，并自己上表请求死罪。
太上皇自是伤心不已，哀悼数日。
肃宗因担心太上皇会误会是他指使人这么干的，于是免去皇甫侁的死罪，但是永不录用，算是给太上皇一个交代。
季广琛因有附逆的举动，被贬为温州刺史，后来还是官至右散骑常侍，敕封渤海郡公。
有一个人在这时候不仅没有与李璘撇清关系，反而误会是肃宗妄杀兄弟。并作诗一首，哀悼此事。
这首诗的开头是：行至上留田，孤坟何峥嵘。积此万古恨，春草不复生。悲风四边来，肠断白杨声。借问谁家地，埋没蒿里茔。
前段算是哀悼，后面的诗词就来了：昔之弟死兄不葬，他人于此举铭旌。一鸟