由于媒体与舆论宣传的作用，在大众的印象中，巴菲特出身贫寒，从来没有受到过家庭的帮助。可事实是这样吗？
1964年4月，巴菲特父亲霍华特·巴菲特过世时留下的遗产共值56.33万美元。让我们来算笔账：当时，黄金价格每盎司35美元，石油价格每桶为1~2美元，1960年美国人均年收入1883美元，当时最先进的F-4“鬼怪式”飞机的价格约为每架264万美元。到了2010年，黄金价格每盎司1210美元，石油价格每桶为70多美元，美国人均年收入近4万美元，最先进的F-22“猛禽”战斗机每架1.3亿美元。这样看来，巴菲特父亲的遗产大约相当于2010年的2300万美元。英国《卫报》2004年10月9日报道，2002年美国白人家庭净资产是8.8万美元，是拉美裔家庭的11倍，非洲裔家庭的15倍。也就是说，巴菲特父亲的遗产拿到现在相当于普通美国白人家庭净资产的261倍，拉美裔家庭的2875倍，非洲裔家庭的3920倍。如果考虑到19世纪60年代的美国贫富差距要远小于当代美国，巴菲特父亲在当时的美国更属于巨富阶层。
让我们对巴菲特的家庭刨根问底，继续向上溯源。17世纪末，巴菲特来美的先祖叫约翰·巴菲特，原是法国纺织工人，为了躲避当时法国政府对胡格诺教徒的宗教迫害来到美国。1696年，他与汉娜·泰特斯在长岛亨廷顿完婚并一直居住在那儿，与当时90%的北美白人移民一样以农业为生。长岛位于纽约，纽约在北美最初的13个殖民地中属于中部殖民地，北美中部殖民地平原辽阔，可耕田地面积甚广，土地肥沃，适宜于从事农业，但由于自然环境所限，不适于大种植园农作物生产。当时的中部殖民地向欧洲与西印度群岛大量出口小麦和面包，被誉为“面包殖民地”。1700年，纽约3/4的农场庄园被12个地产商占据，1760年，北美13个殖民地被400多名大富翁控制了商业、航运、银行金融业、采矿业和制造业。因此，约翰·巴菲特一家在当时应该是属于普通北美底层农场主中的一员。
巴菲特家族的发迹要等到19世纪中期之后。19世纪中叶到20世纪初，美国领土不断扩张。1845年，美国兼并得克萨斯。1848年，美国夺取墨西哥领土的一半。1846年，美国从英国手中夺取俄勒冈大片土地。随后几十年中，大量小农涌入落基山脉以西地区的美国西部新领土。
随着西进运动的开始，1862年美国总统林肯批准通过了建设世界上第一条跨洲铁路的太平洋铁路法案，该法案规定由联合太平洋铁路公司和中央太平洋铁路公司共同承建横贯北美大陆的太平洋铁路。联合太平洋铁路的起点站是内布拉斯加州的奥马哈，中央太平洋铁路的起点站则是加利福尼亚州的萨克拉门托。1869年5月10日，全长3000多公里被英国BBC评为自工业革命以来世界七大工业奇迹之一的第一条横贯北美大陆的中央太平洋铁路和联合太平洋铁路建成通车。值得一提的是，在联合太平洋铁路工人薪水发放记录中，华工的比例在工程后期甚至高达95%。1865~1869年，有16 000多名华工参加中央太平洋铁路公司主持的筑路工程，占工人总数的90%。历史记载，当年华工像猪仔一样被卖到美国做苦力，曾有4船共载2523人、途中死亡1620人的纪录，死亡率高达64.21%。在筑路过程中，以广东人、福建人为主的矮小瘦弱的华工死伤惨重，“每根枕木下面都有一具华工的尸骨”绝非虚言。从此，名不见经传的奥马哈成为美国东西部之间重要的铁路、公路交通枢纽，逐渐成长为美国内布拉斯加州最大的工商业城市，也成为美国大城市之一，而绝不是很多不负责任的宣传材料上所说的美国小镇或小城市。
