4744さんのがコレかな。
Apple music見て、ダウンロードされてるとFor Usみたいに↓マークが出てるから、4768さんの手順で削除。
ダウンロードされてないと何も出てないからスミン出来るよ。

横入りすみません。自分もよくわからなくて流れ見て変えてたんですが、要はライブラリにいれた状態でダウンロードせずに聴くってことですか？