この記事は更新から24ヶ月以上経過しているため、最新の情報を別途確認することを推奨いたします。
はい、構築可能です。
SQL ServerのAlwaysOn可用性グループ構成時にWSFCクラスタ構築する手順が参考になります。
[Azure Virtual Machines で SQL Server フェールオーバー クラスター インスタンスを構成します。]
https://docs.microsoft.com/ja-jp/azure/virtual-machines/windows/sql/virtual-machines-windows-portal-sql-create-failover-cluster