この記事は更新から24ヶ月以上経過しているため、最新の情報を別途確認することを推奨いたします。
アラート処理ルール を利用することで特定のリソースから送信されるアラートに対して、それを抑制することができます。抑制する曜日や時間帯は指定が可能です。
なおアラート処理ルールは公式ドキュメントではアラート プロセス ルールと記載されています。

以下アラート処理ルール作成中の画面です。

スコープでAzureリソースを指定します。

アラートの抑制をしたい場合には「抑制」を選択します。スコープで指定したリソースからアラートが送信される際に、このルールが適用される動作となります。

毎日19:00~6:00のアラートを抑制したい場合の入力例です。