ビッグダディの代名詞とも言えるのが、波乱万丈な結婚・離婚歴です。合計7回以上の結婚歴（同一人物との復縁を含む）を持つ彼の家系図は、日本の芸能・ドキュメンタリー史上でも類を見ない広がりを持っています。
まず、大家族の原点となったのが最初の妻である佳美（よしみ）さんです。林下氏との間に4男4女の8人の子供をもうけ、三つ子の出産や度重なる復縁・別居で番組のドラマを生み出しました。現在の佳美さんはメディアの表舞台から完全に退き、地方で一般人として穏やかな生活を送っています。
そして、番組後半に登場し強烈なインパクトを残したのが美奈子さんです。自身の連れ子5人を伴って林下氏と結婚し、第八女となる紬美（つむぎ）ちゃんを出産。離婚後はタレントとして自叙伝『ハダカの美奈子』を出版し、その後再婚・離婚を経て、現在はシングルマザーYouTuber・インフルエンサーとして独自のファン層を築いています。美奈子さんと林下氏の間に直接の交流はほぼないものの、お互いの活動に敬意を払い、それぞれの場所で奮闘を続けています。
