旅行予約サイトやSNSのレビューにおいて、湯の蔵は常に総合評価4.6〜4.8点（5点満点中）というトップクラスの数値を維持しています。実際の利用者が残した生の声や宿泊アンケートを精査すると、宿泊体験に対する満足ポイントと、一部で指摘される惜しいポイントが明確に浮かび上がってきます。
最も多くの絶賛を集めているのが、平山温泉特有のアルカリ性単純硫黄温泉がもたらす泉質の良さです。「湯船に入った瞬間、化粧水を全身に浴びているかのようなとろみを感じる」「湯上がり後の肌のしっとり感が翌日まで持続する」といった声が圧倒的多数を占めます。湧出する源泉を贅沢に掛け流しで使用しており、湯守の手によって湯温も細やかに管理されています。
一方で、口コミに見られる留意点としては、「敷地が広大かつ自然豊かな庭園造りのため、離れの客室から本館・大浴場・食事処への移動で雨天時や冬場に少し肌寒さを感じる」「敷地内の石畳や段差が多く、高齢者や足元が不安な方は事前の部屋タイプ相談が必要」といった構造上の特徴に起因する意見が挙げられます。これらは昔ながらの風情ある木造離れ建築の裏返しでもあり、事前に動線を把握しておくことでギャップを防ぐことが可能です。
