唐瀛州饶阳人，迁居永泰。
善属文。
太宗时以对策擢第，授门下省典仪。
以文翰见知，历太子舍人、崇贤馆直学士。
高宗时迁中书舍人，兼修国史，进弘文馆学士。
与许敬宗等支持立武后，擢拜中书侍郎、同中书门下三品，累官至吏部尚书，封河间郡公。
貌状温恭，与人言必嬉怡微笑，而褊忌阴贼，凡忤意者，皆中伤之，故时人号为“笑中刀”。
又以阴柔而害物，谓之“李猫”。
义府耻其家代无名，尝奏委吕才等重修《氏族志》，凡得五品官者，皆升士流。
并收天下旧志焚之。
后以罪流巂州，愤而卒。