はい、可能です。

WPパネル内「パスワード保護」機能をご利用いただくことで、「WordPressサイト全体」「WordPress管理画面」それぞれに対して、パスワード（BASIC認証）を設定することができます。

詳しい設定方法は「設定マニュアル」をご覧ください。