賀来賢人さんの現在の家族構成は、夫婦と2人の子供の計4人家族です。第1子は2017年6月、第2子は2021年2月に誕生しています。プライバシー保護と子供の安全を最優先に考え、性別や名前、正確な生年月日などは非公表を貫いていますが、テレビ番組やインタビューでは折に触れて育児に向き合う父親・母親としてのリアルなエピソードが語られています。
ふたりの関係性を語る上で外せないのが、モデル出身の榮倉奈々さんと長身の賀来賢人さんが放つ圧倒的なビジュアルバランスです。賀来賢人さんの身長は178cm、榮倉奈々さんは170cmで、身長差は約8cm。年齢差は榮倉奈々さんが1学年上(1988年2月生まれ)で、賀来賢人さん(1989年7月生まれ)が1歳年下という姉さん女房の組み合わせです。