通常であれば「サウンド コントロールパネル」で設定ができる場合が多いと思います。
Windows 10のバージョンにより表示内容や表示場所が異なりますが、下のサイトを参考にして下図の画面が出たら、「サウンド」タブの「プログラム イベント」から【バッテリー低下アラーム】と【バッテリー切れアラーム】を選択して、最下段からサウンドを選んで「テスト」で確認してみてください(下図ではサウンドが「なし」になっています)。
また、HPのノートパソコンであれば、「HP Battery Alert」という機能もあるようです。
よく分からない場合はHPのサポートに相談してみてください。