二人の親密さが過熱するにつれ、週刊誌やネットコミュニティでは「細木数子が滝沢秀明を養子に迎える」「数百億円とも言われる遺産を滝沢に譲渡する密約がある」といった言説がまことしやかに語られました。しかし、これらの噂は客観的事実から完全に否定されます。
細木氏の莫大な資産や事務所の権利、そして六星占術の正統後継者となったのは、実の姪であり後に正式な養子縁組を結んだ細木かおり氏です。かおり氏は2014年頃から細木数子氏のマネジメントや鑑定助手を務め、2019年には正式に後継者として継承。細木氏が2021年11月に呼吸不全で息を引き取った際も、全事業と資産は細木かおり氏を中心とした一族に正当に引き継がれました。
滝沢氏が法的・金銭的な利益を受け取る余地は一切なく、噂の出所は番組内での「うちの養子においで」「財産を全部あげてもいい」という細木氏流の愛情表現（リップサービス）を、メディアが面白おかしく切り取って拡散したに過ぎません。
