2023年05月24日 更新
どうも、クラゲジュニアです。
Windowsのタスクバーを隠すことは、タスクバーで右クリック > タスクバーの設定から可能です。

タスクバーの動作にてタスクバーを自動的に隠すにチェックを入れればOK
しかし、稀にこの設定を行っているにも関わらず、タスクバーが隠れてくれない場合があります。クラゲジュニアは何度か設定をやり直してみましたがダメでした。
一見関係なさそうに見えますが、エクスプローラーを再起動することにより解決します。やり方は以下の通りです。
右クリック > タスクマネージャーを選択しエクスプローラーにて右クリック > 再起動
これでOK。
以上です。