鳥谷夫妻には現在、5人の子供（3男2女）が誕生しており、プロ野球界でも指折りの子だくさん家族として知られています。現役時代の鳥谷氏は、シーズン中は年間140試合以上を戦い、ホーム・ビジターを行き来する超過酷なスケジュールを送っていました。その間、ワンオペレーションに近い状態で5人の子育てと家事を切り盛りしていたのが裕子さんです。
引退後の特別番組やインタビューにおいて、鳥谷氏は家庭内での素顔について度々語っています。グラウンドでは「クール」「感情を表に出さない」と言われた鳥谷氏ですが、自宅では子供たちと一緒にスポーツを楽しみ、学校行事や習い事の送迎にも積極的に参加する非常に子煩悩な父親です。自宅リビングでは野球の話題を過剰に持ち込まず、子供たち一人ひとりの個性を尊重した教育方針を夫婦で共有していることが明かされています。
阪神タイガース時代に構えた関西圏の自宅を拠点にしつつ、東京での解説や収録仕事、野球振興活動に合わせて柔軟に行き来する生活を送っています。家族全員で食卓を囲む時間を何よりも大切にしており、現役を退いた今だからこそ、長年支え続けてくれた妻や子供たちとの時間を最優先にする姿勢が見て取れます。
