Для удаления воспользуйтесь зубной пастой. Сделайте из неё жидкую кашицу и нанесите её на несколько минут на краску оставленную фломастером. Потом уберите салфеткой. Эффект очистки будет зависеть от вида краски фломастера и материала обоев. Если использовать спирт, то скорее всего вы просто размажете краску.
Если обои светлые можно попробовать отбеливатель, спирт или ацетон. Если фломастер пермонентный сделать это не просто, особенно если прошло много времени.