后來長孫無忌輔立李治后，就借口“謀反案”殺李恪“以絕眾望，海內(nèi)冤之”。

又將李恪的四個兒子全部流放嶺南，好在李仁有強健的身體，適應(yīng)能力極強，在嶺南那種崎嶇復(fù)雜、條件奇差的瘴病之地，諸多惡劣的條件下，竟然很好的活了下來。

武則天當政之時，根據(jù)對手的對手就是朋友的原則，她當年也與長孫無忌是對手，所以就赦免了李仁，并加以重用。