Нет. Всё равно будет естественный отбор, пускай даже от абиотических факторов. Например, нужно всегда быть приспособленным к температуре, химическим веществам.
Если вы о людях, то у нас есть естественные враги.
Естественные враги — не единственный способ вытеснить вид из экологической ниши. Приспосабливаемость вида связана с дрейфом границ самой ниши, сопротивлением факторам среды и т.д. Уж скорее, на вырождение обречён вид, слишком жёстко удерживающийся в границах своей ниши и не способный видоизменяться; но и то сказать — ленточные черви прекрасно себя чувствуют!