クレー射撃と並んで麻生太郎氏の代名詞となっているスポーツがゴルフです。政界きっての腕前として知られ、ハンディキャップは最盛期で片手シングル(HC 3〜5程度)の実力を誇っていました。
力強いスイングから繰り出す正確なショットと、勝負どころでのパッティングの冴えは、プロゴルファーや同伴者からも絶賛されています。国内外の要人とのゴルフ外交においても、その高いプレースキルと軽妙なトークが信頼関係の構築に大きく寄与してきました。
高齢を迎えてなお、定期的にラウンドをこなすタフなスタミナを維持しており、その健康的な体躯と健脚ぶりは日頃のスポーツ習慣の賜物といえます。