対馬国府中藩の9代藩主。享保2年（1717年）に生まれ、元文4年（1739年）に兄の義如によって家老に任じられる。宝暦2年（1752年）、義如の死後に養子として家督を継ぎ、藩主となる。従四位下、侍従・対馬守に叙位・任官され、宗姓に復して名を義蕃と改める。宝暦12年（1762年）に家督を義如の嫡男で養子の義暢に譲り隠居するが、なおも藩の主導権を握り続け、安永3年（1774年）まで影響力を保持。安永4年（1775年）に59歳で死去。