高校時代、いわゆる「金足農旋風」を巻き起こした際、吉田輝星は全国的なアイドル的存在となった。当時から彼の好きなタイプや彼女の有無に関しては、日本中で大きな注目が集まっていた。
プロ入り直後には、SNS上の共通点や同席の噂からアナウンサーやモデル、元アイドルとの熱愛疑惑が一部で取り沙汰されたことがある。しかし、どれも目撃写真や確定的な証拠が存在したわけではなく、人気選手ゆえの噂に過ぎなかったのが実情だ。球団関係者によれば「彼は若手時代からとにかく野球漬けの毎日で、軽率な行動を取るタイプではなかった」という。