昭和期の政治家であり実業家、華族としても知られる。岡山県岡山市で生まれ、学習院高等科で学んだ。1920年に家督を相続し、侯爵を襲爵。1934年には貴族院侯爵議員となり、農林省や厚生省の委員を歴任。1940年、自らの私邸の敷地を譲渡し渋谷区に東郷神社を建設した。1947年の日本国憲法施行で華族の身分を喪失後も、日本コリークラブ会長や霞会館理事長を務めた。1959年、日本狆クラブ設立に参加し副会長となり、1969年には会長に就任した。