吴家在泾阳嵯峨山唐德宗崇陵脚下安吴堡村,因元代在这里设有近祥宫,故名庵吴堡,清代后读“庵”的谐音为“安”,改称安吴堡。吴家是安吴堡的大姓,吴家从清代起做布匹、茶叶生意发财,特别是吴家兼任通奉大夫吴蔚之子吴介侯迎娶了三原孟店有名富商周梅村之女为妻。周梅村为三原著名布商,其父周梅林为清代工部主事和大盐商。这桩亲事使吴家力量进一步雄厚,吴介侯早夭,周氏守寡多年,长期主持吴家之政。