勝手にメディアライブラリーの画像が複製される

以前から時々気になっていたのですが、例えば、過去に投稿した記事を再度編集して、再び公開するとします。
そう言う作業をすると、その記事の中に貼り付けている画像が勝手に複製されてメディアライブラリーに溜まって行くのです。
例えば、
オリジナルの画像が image.png だとすると、
image_1.png
image_2.png
image_3.png
・・・
みたいに、再公開する度にどんどん増えていくのです。
実際に記事に挿入しているのは image.png なので、これらの複製画像は手作業で削除しています。
なぜこんな症状が起こるのか分かりません。
プラグインなどが関係している可能性もありますが、サイトを運営しているので全部のプラグインを外して
実験するのも手間が掛かります。
また、必ずしも再現性があるとは限らないのです。
もし何か、解決のヒントをご存じでしたら教えて下さい。