Windows Update でダウンロードに利用されるプロトコルは(Windows 10 以降の場合)既定で「配信の最適化」で、そうでない場合でも BITS が利用されますが、いずれもレジューム ダウンロードに対応しています。
そのためダウンロード中にネットワークが切断されたり、シャットダウンや休止状態になっても、ネットワークが利用可能になったタイミングで中断されていたダウンロードが(可能な限り)再開されます。場合によっては再開できず最初からダウンロードしなおしになることが絶無ではないと思いますが、基本的には再開になります。
※BITS がレジュームダウンロード可能であることは以下に記載されています
バックグラウンド インテリジェント転送サービス - Win32 apps | Microsoft Learn
配信の最適化は、更新プログラムをファイルとしてダウンロードするのではなくチャンクに分割してダウンロードするので、受信済みのチャンクがあればそれを再ダウンロードすることはありません。