タイトルまんまです。
またやるかもしれないので、メモ。

h3タグをh4に変更する場合

update xoops_wp_posts set `post_content`= replace(`post_content`,'<h3>’,'<h4>’) where post_content` like ‘%<h3>%’

こんな感じ。
当然、閉じタグもしないといけないです。