祖父母：李彻，赠太子少傅。顾氏，赠信安郡夫人；俞氏，赠咸宁郡夫人。

父母：李高，赠太子太保。史氏，赠文安郡夫人。

儿子：李孟博，长子，字文约，绍兴五年（1135年）探花，后随父贬谪由藤州移琼州（今海南），卒于贬所；李孟坚，次子，字文通，号西斋，累官提举淮东常平茶盐事；李孟醇，字文直，三子，遂父谪居藤州，早卒；李孟珍，字文潜，号晏坐，四子，累官至沿海制置参议；李孟传，字文授，号磐溪，官至朝请大夫、直宝谟阁致仕。

配偶：黄氏，赠齐国夫人，葬大岭。子三：孟博、孟坚、孟醇。女三：长适奉化朝请郎沈粹中，封令人；次适柯山登仕郎陈汝楫；三适绍兴陆权（之）。

继室：管氏，封汉国夫人，葬会稽太平乡官漾村之原。子二：孟珍、孟传。女三：长适吴兴朝奉大夫章驹，封令人；次适金华经略使潘畤，封令人；三适涪州知府刘秦，封宜人。

孙子：李知孝、李知退及曾孙李复、李衢均为进士，而且祖孙四代有不少是知府以上官吏。