以前は標準でインストールされていたような気がするんですが、いつの間にかなくなっていたのでインストールしました。
Windows の「アプリと機能」からインストールできます。

スタートメニュー > 設定 > アプリ > アプリと機能 > オプション機能 > 機能の追加 > XXPS ビューワー