勘違いされていませんか?
出入口カメラの映像が表示されていないため、接続に利用しているマジックコネクトに問い合わせをしたところ「Microsoftリモートデスクトップ経由のオーバーレイ表示に対応しているかご確認をお願いいたします。」との回答があったのですが、どなたかMicrosoftリモートデスクトップでオーバーレイ表示が対応しているかご存じの方、いらっしゃいますでしょうか?
マジックコネクトが確認せよと言っているのは、「出入り口カメラの映像を表示するアプリケーションが、リモートデスクトップ経由で表示できるかどうか」、つまり、原因の切り分け作業です。
この切り分けをすることによって、マジックコネクトとしては対応できないものかどうかを断じようとしているだけですので、この質問を第三者に尋ねたところで意味がありません。。。
(誰かに聞いたといっても、マジックコネクトとしては「その誰かが言っているだけ」と処理して、取り合ってもらえないでしょう)
現実的には、会社に出社された際、あるいは出社されている方に、会社内の PC 間で Microsoft リモートデスクトップで接続し、表示できるかどうかを検証することでしょう。
それが試せないなら、出入り口カメラのアプリケーションメーカーに問い合わせてください。
(現時点では Microsoft に聞くことでも、Windows に関する一般的な質問でもないという認識です)