Если Вам это очень важно, значит наверняка Вы не бездушная в своих мыслях девушка. Ответив человеку резкое "Нет" , Вы скорей всего посеяте в том человеке противоречивые чувства, которые могут привести к необратимым последствиям.
Самое щадящее решение,на мой взгляд, это избегать по возможности встреч и звонков.
Через некоторое время у него скорей всего всё пройдёт.