Microsoft Lists では、専用のリストテンプレートを利用することで、動画のプレイリストを作成することができます。
この動画のプレイリストですが、SharePoint のページにリスト Web パーツで埋め込もうとすると、次の画像ようにグリッドビューで表示されてしまいます。（※2023/05/29 時点）
このグリッドビュー表示を解決するには、埋め込み Web パーツ を利用します。埋め込み Web パーツに次のコードを設定すると、ページ内に Microsoft Lists で作成したプレイリストを埋め込むことができます。
<iframe width="幅" height="高さ" src="リストのURL"></iframe> <!-- サンプル --> <iframe width="500" height="400" src="https://contoso.sharepoint.com/sites/HR/Lists/Playlist/AllItems.aspx"></iframe>
※コマンドバーを非表示にする方法は、把握していません。
参考
2023/06/08 追記
私の環境では、リスト Web パーツでもプレイリストを表示できるようになりました！！
2023/07/15 追記
リスト Web パーツはサイト内のリストしか対応していないので、他のサイトのプレイリストを埋め込みたい場合などは、この埋め込み Web パーツを利用してプレイリストを埋め込む方法も使えるかもしれませんね！
