Para excluir as músicas baixadas do spotify, você tem duas opções: Excluir apenas de uma playlist ou excluir todo o conteúdo que você baixou e liberar espaço no seu celular ou computador.
Opção 1: Abra a playlist que você quer remover o download e clique ou toque na setinha verde.
Opção 2: Clique ou toque na sua foto de perfil e vá em: Configurações e depois vá em Armazenamento. Toque em Remover todos os downloads.
Lembrando que isso não apagará a sua playlist, apenas vai remover as músicas do computador ou celular.
Caso você não tenha familiaridade com determinados procedimentos no seu computador, procure um técnico de sua confiança.