Woher hat er denn deine Handynummer und E-Mail-Addy?
Die würde ich zuerst mal wechseln oder den AB / Mailbox drangehen lassen, wenn du keine Nr. siehst.
Bei solchen Typen gilt nämlich dein neutrales Verhalten schon als Akzeptanz, wenn nicht als Ermutigung.