遠江横須賀藩の第7代藩主である。播磨姫路藩主酒井忠実の三男で、西尾忠固の養子となり、天保14年（1843年）に家督を継いだ。藩政においては茶や樹木の栽培に力を入れ、財政再建を目指した。絵画にも造詣が深く、華渓と号した。文久元年（1861年）、江戸の外桜田屋敷で41歳で死去し、長男の忠篤が跡を継いだ。