母親吳信信祖籍浙江省嘉興市平湖，是壹名電腦軟件工程師。
外婆陳意子為浙江嘉興人，醫生，熱心公益，曾為家鄉平湖中學捐款助學數十載。
外曾祖父是浙江知名報人陳惟儉。
其兄林書雅目前在紐約大學就讀牙醫專業。
其弟林書偉，現正就讀排名全美前二十五名文理科大學的紐約漢彌敦學院，也是籃球校隊成員。
林書豪的父親林繼明和母親是在20世紀70年代從臺灣移民來美國的，兩人在普度大學學習計算機工程。
夫妻兩人對運動都談不上喜愛，但是他們看NBA，非常喜歡看“J博士”歐文打球。
林繼明每周三次帶著他的三個兒子到球場上去，試圖讓他們模仿NBA巨星的打球動作。
三個兒子都在高中時加入了籃球隊，但只有二兒子林書豪打出了名氣