Oi jc-bahia tudo bem?
Depende muito da situação.
O material não estar mais no Slot do Material Editor não significa nada, o Material Editor é apenas para editar materiais.
Se o material estiver aplicado em qualquer coisa da cena, ele aparece no Material/Map Browser, que é onde está tudo.
Do Material/Map Browser você pode colocar no Material Editor, como explico nos tutoriais básicos sobre este assunto aqui na 3D1, dá uma olhada lá, são dois.
Se for este o caso, então está certo, vai conseguir retirar o material do objeto e deixar sem material nenhum, só com a cor padrão como uma primitiva.
Agora, se é um objeto importado na cena e criado com um renderizador de terceiros, pode não dar certo.
Por exemplo, se tem uma cena criada com o V-Ray e você não usa esse render, não tem ele instalado e deseja inserir o objeto na sua cena.
Pode não dar certo, porque dependendo de onde estiver aplicada a imagem, ela vem lincada no objeto dentro de funções que não estão disponíveis, pois o render não está instalado, e você não tem como retirar.
Abraços