Все зависит от того какой размеры щель. Если не совсем большая, то можно строительным войлоком, а если большая, т можно пенопластом, кирпичом или пластиком.
Продается множество герметиков, например, акриловые. Если щели небольшие, то можно ими. Если эти щели в мокрых зонах, санузлах, то подбираете силиконовые санитарные герметики.