組織のルーツを辿ると、創始者である向後平(こうご ひらし)の存在に行き着く。戦後の混乱期から高度経済成長期へと向かう時代、新宿を中心とする繁華街で独自の勢力を築き上げた向後平は、強固な縄張りと人間関係を基盤に「向後一家」並びに後の向後睦会へとつながる組織の礎を打ち立てた。
当時の歌舞伎町は、利権と縄張りを巡る衝突が日常茶飯事であった。その激動のなかで組織は、圧倒的な武闘派としての顔を持ちながらも、巧みな交渉力と組織統制力で頭角を現していく。単なる街頭の群れにとどまらず、近代的な暴力団組織としての体裁を整えていった過程は、日本の社会・犯罪ジャーナリズムにとっても長年の検証対象となってきた。