自動付与されたパラメータ部分のみを削除したい

「Google Analytics for WordPress by MonsterInsights」のプラグインを使用しています。
Googleサーチコンソールで、「noindex タグによって除外されました」や「インデックス未登録」の項目に、やたらと長いURLが上がっているのを見つけました。

（https://ドメイン/ディレクトリ（ファイル名）/?utm_source=rss&utm_medium=rss&utm_campaign=ディレクトリ名）

URLの後に、自動でパラメータが付与している状態です。
調べてみると、上記のプラグインが関係しているようなので、自動付与をOFFにする設定をしました。
これで、今後このパラメータが自動で付くことはないと思いますが、プラグイン導入時からOFFにするまでの間に作成されたパラメータ付きのURLは、まだ存在しています。
サーチコンソールでエラーが出ているわけではないので気にしなくてもいいのかとも思いますが、必要のないURLなので出来れば削除したいのですが、URLのパラメータ部分のみを削除する方法がわかりません。

理想としては、
・https://ドメイン/ディレクトリ　→　200　ステータスコード
・https://ドメイン/ディレクトリ（ファイル名）/?utm_source=rss&utm_medium=rss&utm_campaign=ディレクトリ名　→　404　もしくは　410　ステータスコード

このような状態にしたいのですが、どのような設定をすればいいのか教えて頂きたいです。
最適なプラグインがあれば、導入も検討します。
サイト内には、これとは別のパラメータを使用している箇所がありますので、サイト全体のパラメータを無効にするといった対応は出来ません。

よろしくお願いします。