家庭人としての杉良太郎には、俳優としての重厚なイメージとは異なる温かな包容力がある。前妻との長男であり、実力派俳優として活躍する山田純大との関係も極めて良好だ。伍代は再婚という繊細な立場でありながら、決して無理に母親ぶることなく、一人の人間として誠実に家族と向き合ってきた。
山田純大もまた、父親を心身ともに支え続ける伍代に対して深い敬意を払っており、家族間の風通しは非常に良い。互いのプライベートとプロフェッショナルとしての領域を尊重し合う大人の家族関係が、家庭内に常に穏やかな空気をもたらしている。