你应该注意到银行的总裁说：“当我们开业的时候，我们的计划是帮助非白人投资者和那些所谓的小人物。我们做到了，但他们中的有些人在偿还债务的时候并不痛快，我们的生意就是这样败落下去的。”总裁在谴责贷款人的时候犯了一个错误，因为每家银行都会遇到大量坏账，而当初答应这些贷款者的请求才是银行家犯下的真正错误。
当社区银行陷入挣扎境地的时候，巴菲特与之保持着距离。罗德尼·威德曾建议巴菲特给一些黑人学生传授金融知识，但是巴菲特没有表态。“巴菲特这个人就像一团谜，”罗德尼·威德评价说，“他很大方，为人诚实，还很勤奋。但他从来没有真正明白，在我们这个黑人生活窘迫的社区里，他作为一个富人所能扮演的角色。”当呆账越来越多时（这正是巴菲特害怕发生的情形），他明确表示拒绝再追加投资。
罗德尼·威德曾抱怨巴菲特“根本不了解穷人生活的艰辛”，事实正好相反，巴菲特正是太了解这群人了，因此他才把自己的钱包看得紧紧的。如果没有希望得到应有的投资回报，他是不会让自己的投资在社区银行里打水漂的，这一点和投资纺织业是一样的。
尽管巴菲特崇尚自由，但是他对于大手大脚地花钱从来都是心有戒备的。乔治·麦戈文当时正在争取民主党总统候选人提名，他曾在巴菲特家中做过客，而且似乎赢得了巴菲特的好感。不过到最后，麦戈文宣布如果自己当选总统，就会给全美国每人每年增加1 000 美元的福利开支。巴菲特立刻像扔掉一个烫手的山芋一样抛弃了他，投了理查德·尼克松一票。
从某个角度来看，巴菲特是有些小气，但是他打心底认为个人或组织（或自己的孩子）不应该不劳而获就变得富得流油。他在看待社会事业时考虑问题的角度和考虑商业行为是一样的：他需要有回报。有些好的社会事业需要人们摸着石头过河，甚至需要有百折不挠的精神，但是让巴菲特迈出这一步是很难的一件事。实际上，让他成为一名优秀投资人的素质反而阻碍了他在社会上大展宏图。巴菲特做任何事情都需要一个评价尺度。“在投资领域你可以衡量收益，”他对一个记者坦言，“而对于有些东西，到最后你都不知道自己到底是赢还是输了。”
和其他许多地位显赫的人物一样，巴菲特认为他在出版界既是公民，又是资本家。20 世纪60 年代末期，杰伊·洛克菲勒把他介绍给查尔斯·彼得斯，此人之前是和平队的负责人，当时正在创办一本杂志—《华盛顿月刊》。这本月刊所拥护的正是巴菲特推崇的白手起家的自由主义精神。于是巴菲特投资32 000 美元，并且找到来自于得梅因的一位自由派朋友乔·罗森菲尔德做合伙人。巴菲特心中充满了崇高的理想，他对罗森菲尔德说：“这本杂志很有意思，只要它不赔钱，那就值得投资。”
