> 除外した商品を、また掲載に戻すにはどのようにすればよろしいでしょうか？
> RMSの除外商品管理から除外設定されている該当商品をチェックし、削除をすれば戻るのでしょうか？

そうですね。ご提示いただいた上記の方法から除外登録した商品を広告掲載商品に戻すこともできますが
復活させる商品が複数あった場合、遡ることがお手数だったり、探すのに時間を要してしまうかと思いますので
CSVでご覧いただいております、除外商品管理画面から全件ダウンロードしていただき
以下のフォーマットで一括登録することもできますので是非ともご検討くださいませ。
https://ad.rms.rakuten.co.jp/rpp/sample/sample_items_exclude.csv

また、CSVで除外設定を行なったり外したりする際は
以下のコントロールカラムで管理されておりますので
CSVにて一括操作する場合はご注意くださいませ。

[検索連動型広告（RPP）] プロモーションメニューで除外商品を登録する
https://navi-manual.faq.rakuten.net/promotion/000009973
＝＝＝＝＝＝＝＝

3）コントロールカラムを入力する。
コントロールカラムの定義：

「コントロールカラム：n」：除外商品を登録する
「コントロールカラム：d」：除外商品を削除する

＝＝＝＝＝＝＝＝

また、ゴールド会員様限定で公開しております
RPPレポート君から、除外商品登録用フォーマットをダウンロードしていただくと、
除外設定中の商品だけを抽出して、CSV一括登録用のフォーマットでファイルを生成できますので
こちらのご利用も是非ともご検討くださいませ。

RPPレポート > RPPレポート > 除外商品登録用フォーマットをダウンロード

詳しくは以下キャプチャをご確認くださいませ。
https://ec-masters.gyazo.com/a201431268a7ae287946fee416abb0cb