あおい輝彦の私生活は、芸能界でも屈指の堅実さと家族愛で知られています。1972年、人気絶頂期に元ファッションモデルの秦紀子（はた・のりこ）さんと結婚。当時の芸能界としては異例の純愛婚であり、結婚生活は半世紀を超えた現在も極めて円満です。
二人の間には1男1女が誕生しています。長男の青井一樹（あおい・かずき）氏は、かつてジャニーズJr.や俳優として活動し、父と同じ表現者の道を志した時期がありました。親子共演などを経て、現在は芸能界の第一線から身を引いて独立し、自身の家庭と生活を築いています。
また、長女の英里奈さんもすでに成人し、家庭を持っています。あおい輝彦は家族のプライベートを過度にメディアへ露出させない配慮を徹底しており、夫婦水入らずの時間を大切にしながら、孫たちの成長を温かく見守る穏やかな日常を送っています。
