Windowsメディアプレイヤー – 最近使ったメディアを非表示に設定
【最近使ったメディアプレイヤー】の履歴は【設定】から非表示にすることが可能です。
設定方法
メディアプレイヤーを起動して【ホーム】に移動(Ctrl + Shift + F
)します。サイドメニューから【設定】を選択し【プライバシー】にある最近使ったメディアを記憶するが有効から無効に設定することで履歴を非表示に設定ができます。

ただ【再生キュー】の履歴は現状非表示にはできないみたいです。
【最近使ったメディアプレイヤー】の履歴は【設定】から非表示にすることが可能です。
メディアプレイヤーを起動して【ホーム】に移動(Ctrl + Shift + F
)します。サイドメニューから【設定】を選択し【プライバシー】にある最近使ったメディアを記憶するが有効から無効に設定することで履歴を非表示に設定ができます。
ただ【再生キュー】の履歴は現状非表示にはできないみたいです。