Microsoft 365のWindows 10 もしくは Windows 11 Enterpriseは、Entra ID (旧 Azure AD) の利用が必須ですか？

はい、Entra ID (旧 Azure AD)の利用が必須です。
（Microsoft 365利用開始時、ユーザー登録をすると自動的に Entra ID (旧 Azure AD) 上でユーザー登録/管理がされます。）