Finalmente descobri como remover arquivos locais da biblioteca, mas não consigo encontrar uma maneira de apagar/remover músicas/álbuns eu baixei do Spotify que são não o que eu gosto em tudo.    Por exemplo, eu pensei que eu baixei o mais recente álbum top40, mas acabou por ser algo nos anos 40.
Eu uso a versão Premium do Spotify.  A primeira resposta ajudou a remover músicas de uma lista de reprodução, como estrela.
Eu gostaria de encontrar uma maneira de remover da minha biblioteca do Spotify também se possível.  Excluir é cinza fora na área de biblioteca.