Hombre,
Si te preocupa....te va a costar estar agusto.
Y eso luego, "te lo llevas" a 'otros terrenos'.
Por mi parte, si te sientes mal a ese respecto, hagas lo que hagas, no sólo no vas a mejorar nada (me refiero a si no te apetece),
Lo único que vas a lograr es sentirte cada vez peor.
Lo primero que haría, sería aceptar que es así. No engañarme. Quizá no necesites darle un sentido para poder explicárselo a esa persona; quizá no sea una buena idea obsesionarse con qué pueda gustar (o disgustar) a esa otra persona.
Quizá no fuera una mala idea aclarar qué buscas o esperas en esa 'relación' con esa otra persona (igual sólo buscas sexo, y nada más...yo que sé).
Aclárate primero.
Pero sea como sea,
No me 'obligaría', a hacer algo que no me apetece. No temas al rechazo. Hay 'situaciones' que pueden doler, sí. Podría ser más sano afrontarlo.