在父母的记忆里，虽然自己对三个儿子一视同仁，并没有任何偏私之处。但小书豪无疑是最幸运的。
首先，哥哥书雅练习篮球时，父亲林志明还是个“菜鸟训练师”，而且亚裔家庭普遍对篮球不感冒，甚至不知道如果有志让孩子更好地打球，究竟该参加什么比赛，抑或进行何种特训——书雅也因此错过了打初中联赛的机会，那个时期正是最佳的成长阶段。吸取了教训的林父，没有在书豪身上犯同样的错误，何况帮哥哥找球队打比赛时，就可以带着他一并参赛。而比起弟弟书伟，林书豪则胜在先后碰到了不少好教练，给他机会出场，帮他改正错误，弟弟则没有那个运气，光在高中就走马灯般换了三个教练……
“可以说，天时、地利、人和都落在了书豪身上。”林母笑着说。而上帝对这位篮球少年真正的恩赐，则是他远超家人的身高。
时至今日有人开始猜测，因为林书豪外祖母的家族都很高，比如外祖母的父亲身高超过1.83米，所以他能长到1.91米也是可以理解的。也有人戏称，因为林书豪是三兄弟中食量最大的，所以长得比较高大——林父的解释更客观些，因为林书豪打球最拼命，消耗最大，自然吃得也就最多。要知道中学时他曾同时参加了4支球队的训练，课余生活几乎就是穿梭在各个球场之间，不补充能量怎么扛得住？“没有什么比练球后大吃一段更爽的事情了！”这就是林书豪眼中的欢乐时光。
不管怎么说，读中学那几年，身高一直是林书豪最介意的事。
从小，林书豪就习惯挑战“更高更快更强”，因为他总是和比自己年长三岁的哥哥一起训练。哥哥的球队跑步练体能，他坚持跟在后面；哥哥的球队进行室内训练，他也一起练习投篮。“我始终跟着哥哥，因为超过他一直是我的目标。”球场上，林书豪并不害怕和比自己高大强壮得多的人较量；可初中毕业时只有1.6米高，这样的现实仍然让他有些沮丧。别说在篮球队，即便在高中校园里，林书豪都属于标准线以下的那一拨，甚至不少女孩都比他高，比他重。
“记得我总是校队里最矮的那个人，直到读高中时依然又瘦又小。我觉得自己根本没机会进大学打球了，入选NCAA校队根本就是白日做梦。”尽管帕洛阿尔托高中教练彼得·迪彭布罗克将自己召入队，但林书豪心里很清楚，如果不能长得更高一些，被淘汰出校队只是早晚的事。每次训练结束回到家，他都忍不住问父母：“我还能再长高点儿吗？”
