アクション編集画面の以下のチェックボックスを外すとオンラインのオペレーターがいない場合、新規ユーザーにチャットは表示されません。
ただし、この設定は 表示タイプウィジェット のテンプレートに限りますので、ご注意ください。