美形な容姿とともに吉沢さんの子供時代を象徴するのが、本格的に打ち込んだ剣道です。小学1年生から中学3年生までの約9年間、厳しい道場に通い続け、見事「剣道二段」を取得しています。
剣道を始めたきっかけは、母親からの勧めでした。幼少期に少し落ち着きがなかったことや、礼儀作法を身につけさせたいという親心から道場に通い始めた吉沢少年ですが、稽古は非常に過酷で、当時は「行きたくなくて泣いていた日もあった」と本音を漏らしています。しかし、途中で投げ出すことなく9年間継続し、中学時代には関東大会で優秀選手に選出されるほどの実力派へと成長しました。
剣道で培われた体幹の強さ、瞬発力、そして竹刀を交える際の高い集中力は、のちの俳優活動においてアクションシーンや時代劇の殺陣で遺憾なく発揮されることになります。華麗なビジュアルの根底にある「芯の強さ」と「武道精神」は、この9年間の鍛錬の賜物です。