Именно так и сказать.
Если он не умен, то задаст вопрос: "Почему?"
Ответ простой: "не хочу". Точка. И не надо пускаться в пространные и путанные обьяснения почему не хочешь. На возможное обиженное сопение и надутые губы не обращать внимание.
Если у него все в порядке с интеллектом и с логикой он сам найдет обьяснение вашему отказу и выстроит систему защиты от обиды, уязвленного самолюбия и прочих эмоциональных "химер" которые отравляют всем нам жизнь.
Поведет себя как капризный мальчик, которому не дали желаемую игрушку... нахх Вам такой "собеседник" нужен.

Сестра Вам лучше меня процитирует адептов гештальт - терапии с их мантрой о том, что Вы родились на свет не для того чтобы оправдать его ожидания, в том числе и сексуальные.

Вот собственно и все.