はい、可能です。
ホームゲートウェイから無線LANカードを抜くと、Wi-FiはOFFになります。

フレッツ光クロス対応（BBIQライト10ギガコース）のホームゲートウェイ（XG100-NE）をご利用の場合

無線LAN内蔵のため、無線LANカードがありません。Wi-Fi機能の切替手順についてはXG-100NE 機能詳細ガイドをご確認ください。

ホームゲートウェイレンタルをお申込みいただき、フレッツ光クロス対応のホームゲートウェイ（XG100-NE）をご利用の場合、Wi-Fi機能をOFFにすることはできません。