Почему бы просто не перестать говорить? Или прямо сказать, что у вас нет желания продолжать разговор. Если конечно нет какой-то проблемы, которую вам необходимо совместно решить, и вы можете её сделать.
Вы не обязаны ничего говорить, не обязаны тратить время на любой вопрос по капризу собеседника. Вы свободный человек.
А все отмазки исходят из позиции, что вы обязаны поддерживать любой разговор, но именно сейчас, чисто случайно, у вас какое-то срочное дело, или вдруг заболел зуб, или ещё что-то.