政治色の強い上地家ですが、家庭環境は極めて明るく、温かい絆で結ばれています。上地雄輔の家族構成は、父親、母親、本人、弟の4人家族です。
母親はかつて大手航空会社のキャビンアテンダント（CA）として勤務していた経歴を持つ、知性と美貌を兼ね備えた女性です。テレビ番組でも上地本人が「母は非常にポジティブでユーモアがある人」と語っており、厳格になりがちな名家の教育の中で、子どもたちの自由な意思と個性を伸び伸びと育てる方針を貫いてきました。
また、弟の上地光祐（こうすけ）さんは、学生時代にアメリカンフットボールの選手として活躍した屈指のスポーツマンです。現在は一般企業に勤めていますが、兄である雄輔との兄弟仲は非常に良好で、家族全員がお互いを深く尊重し合う理想的な家庭環境が築かれています。
