鲁西南就是这样，练武的风气很盛。何思源也曾在小时候拉架子，并且他在中学求学时，学校专门有武师辅导，鲁西南的男女老幼，喜爱武术，连新媳妇也不例外。当地流传的顺口溜是：“三嫂子，娶到家，一身武功真利洒，双手能推四斗门，单腿会踢八字花，巴掌一拍墙掉土，双脚一跺砖成渣。三哥上前交把手，一跤摔个仰八叉，三嫂擀了张白面饼，摊上鸡蛋煎葱花，三哥一吃怪香哩，明儿个再摔个仰八叉。”
何思源年少时，家里非常破败，全家的生活来源主要是出租自家靠近街面的房子。菏泽是明清两代的曹州府所在地，向来有七十二道街、七十二眼井、七十二个大坑的称号，是江苏、河南、山东、安徽和直隶省的交界处，各地商旅和人员来来往往，也是一个交通的要道。何思源家有几间祖上留下的房子，他的堂弟、历史学家何兹全在《怀念仙槎大哥》中写到：
仙槎哥家房子很宽阔，临街是四间大门面,可以开店铺，门内后面一个小园，有北房三间或四间。我记忆里，这个前院常是出租的,临街门面开过绸缎店,开过中药铺。因为是出租的，小时候没有进去过。
四间门面的东边，是仙槎哥家的大门。进大门也有一个小院，靠大门东边是一间南房，南房对面二门墙外还有一间东房，住着一位同族哥哥，是个草市经纪（掌秤的），门前街上就是草市。二门在前院北房后，二门里是仙槎哥家住的院子。五间大北房，东房三间，西房三间。东房南头一间是厨房。北房西头往后走，还有一个小院，有棵大槐树，一间磨房。磨房有个后门，后门外是个大坑。
祖上的荣光已经过去，路还是要自己走，从何兹全的回忆我们看出，这么大的院子是空落的，已经没有了原先的热闹，幼年的何思源望着破败的家，一种失落一种振兴的感奋一定会涌到心头。
