辰吉寿希也氏を語る上で欠かせないのが、波乱万丈なボクシング人生を歩んだ父・丈一郎氏と、それを献身的に支え続けた母・るみさんの存在です。辰吉家は丈一郎氏、るみ夫人、長男・寿希也氏、次男・寿以輝氏の4人家族。阪神淡路大震災や幾多のタイトル戦など、激動の時代を家族一丸となって乗り越えてきました。
母のるみさんは、メディアの過剰な取材から幼い兄弟のプライバシーを守り、一般的な感覚を失わないよう厳しくも愛情深く育て上げたことで知られます。偉大な父を持つ家庭特有の重圧がある中でも、兄弟がグレることなく真っ直ぐに成長したのは、るみさんの徹底した家庭教育と、丈一郎氏の「子ども自身の意志を尊重する」という教育方針があったからに他なりません。