祖籍赢州饶阳（今河北省饶阳），祖父曾为射洪县丞，后置田产于梓州永泰县（今四川省盐亭县的永泰乡）。李义府生于隋炀帝大业十年，属狗，出生在梓州永泰县，卒于唐代高宗乾封元年，年五十三岁。太宗时，以为监察御史，诏侍晋王。王为太子，除舍人，崇贤馆直学士。与来济俱以文翰显，时称来、李。甚谄事太子，而文致若谠直。高宗时，累官吏部尚书。义府貌柔恭，与人言，嬉怡微笑，而阴贼褊忌著于心，时号义府笑中刀。又以柔而害物，称为人猫。后以罪流于隽州死。义府著有文集四十卷，（旧唐书志作三十九卷此从新唐书志）传于世。
　　关于“以罪流于隽州死”，资治通鉴还有一段描述，可以看出李确实有些不知天高地厚。唐高宗谓李义府，“卿子及婿颇不谨，多为非法，我尚为卿掩护，卿宜戒之！”，义府勃然变色，颈、颊俱张，曰：“谁告陛下？”。上曰：“但我言如是，何必就我索其所从得邪！”。李义府竟然“殊不引咎，缓步而去”，“上由是不悦”。