据武氏家谱记载，吴氏先祖原籍安徽寿县人，十六世纪明朝年间，吴氏投奔在安阳做官的舅父，定居武官村。

吴家鼎盛时期，村子里有九门相照大院4个，传代20多辈，是武官村第一大家族。目前，吴家大院很多房屋已经残垣断壁，但仍能看到当年的风貌，有的老房子仍有后人居住。