吴义方在唐初以博学闻名，贞观十四年（公元640年），朝廷大招天下名儒讲字于新安歙州（今安徽休宁），吴义方也参加了这一盛会，由于喜爱当地的山水之美，遂举家由豫章（今江西南昌）迁居于此。至此，祯字宗始祖吴猛的一支后裔由江西豫章迁入新安歙州。吴义方娶程氏，生3子，长子吴太微、次子吴少微、三子吴宝微。次子吴少微，字促材，号迁谷，嗣圣元年（公元684年）进士，授晋阳尉，累官至左台监察御史。史载吴少微以文学见长，与富嘉谟、魏谷倚并称“北京三杰”。当时天下文人撰写文章皆以徐、庾为宗，文风浮俚不竞，唯独吴少微、富嘉谟的文章以经典为本，雅厚雄迈，文风为之一变，受到当时人的推崇，被称为“吴富体”。吴少微对宗族历史非常关注，曾主持修纂《吴氏正宗谱》。吴少微移居休宁石舌山（今称凤凰山），离年87岁，卒葬新安休宁北郭外老柏墩，后代世居于此，子孙繁衍，形成了左台吴氏。左台吴氏是吴姓宗族中发展颇为兴盛的一支，枝繁叶茂。据《左台吴氏大宗谱》的记载，新安的左台苗裔就有70余支，总支为五大派，分别为莲塘派、金竺派、石岭派、城门派、丰溪派，其宗族发展之繁盛由此可见。所谓左台吴氏是指奉唐代左台监察御史吴少微为始祖的吴氏支派，新安是左台吴氏分布的重要地区，吴姓人口数以万计，人丁极为兴旺。据《左台吴氏大宗谱》的记载，新安的吴姓中，奉吴少微为始祖的占了九成。吴少微娶武阳公李大亮之女，生3子，长子吴隆术、次子吴巩、三子吴筠。吴筠，字文彬，曾任河东节度使，后裔迁居四川。豸岭吴就是次子吴巩的后人，属于左台吴氏五大派中莲塘派下桐城（枞阳）吴氏中的一支（桐城（枞阳）吴氏包括豸岭吴、麻溪吴和高甸吴）。