Отказ от секса без любви

Уважаемые! Помните я здесь спрашивала совета стоит ли создавать из секса любовь? Спасибо всем оветившим. Мне помогло ваше мнение - я решила расстаться с МЧ, который воспринимает меня как секс об'ект и не дает надежду на любовь.
Подскажите как это сделать лучше. Сегодня он предложил к нему прямо на работу в пятницу вечером приехать(он начальник отдела), остаться наедине после работы. Я сказала, что вряд ли, но возможно, что сама хочу, но что это как бы и не совсем от меня зависит - у меня свои внешние обстоятельства.
Сижу и думаю, что же делать дальше. Если сейчас в полный игнор, то подумает, что неадекватка какая-то. Если сказать как есть, что нужно больше, чем секс, то скажет ОК и получится, что он меня бросил, а я в дураках.
Если сказать, что есть другой, то вроде бы и врать не хорошо и уж слишком быстро кого-то нашла.
Может еще какой вариант посоветуете?
Что делать?
Чтобы сохранить достоинство и остаться на высоте в его глазах?