例外URLに共通サイトの複数のURLを登録したいのですが、ワイルドカード(*)のような設定は可能なのでしょうか？

ご提示いただいたようなワイルドカードを使用することは出来ません。
ただし、以下のような場合、どちらも規制対象となります。
例）http://alsi.co.jp/ を登録すると、http://www.alsi.co.jp/ や、http://web.alsi.co.jp/ も規制されます。
例）http://alsi.co.jp/security/ を登録すると、security 以下全てのディレクトリも規制されます。

このFAQが掲載されているサイト名: 香川県情報教育支援サービス : https://www.kagawa-edu.jp/faq/modules/smartfaq/faq.php?faqid=155