ปฎิเสธคนที่เราไม่ชอบ ยังไงครับ ไม่ให้มีผลกระทบ??

สวัสดีครับ ผมอายุ 24 ปี เพิ่งย้ายที่ทำงาน เพิ่งเริ่มเข้าทำงานได้ประมาณ 2 เดือน
เข้าเรื่องเลยนะครับ มีคนอยู่สำนักงาน มาแอบชอบผม ครั้งแรกที่เขาเจอหน้าผม เขาก็ยิ้มให้ ผมก้ไหว้เขาเพราะเขาเป็นหัวหน้าใหญ่ แล้วก้ไปกินข้าวเลี้ยงต้อนรับผมเข้าทำงานหลังจากวันนั้น เขาฝากพี่คนที่รู้จักกับผมมาบอก ว่าเขาชอบและรู้สึกดีกับผม พี่คนที่รู้จักเขาเล่าให้ผมฟังว่า อยู่ที่ทำงานพี่คนนั้น ครั่งใคร่หาแต่ผม  เคยบอกว่าเคยเห็บรุปผมในเฟส ไปกินเหล้ากับเพื่อน คิดว่าเป็นผม เพราะจำนาฬิกาผมได้ ผมฟังพี่เขาเล่าผมรู้สึกกลัว  เหมือนเขาพยายามมาสอดส่องชีวิตผม พี่เขาพยายามหาเรื่องทักมาคุยแต่ล่ะวัน วันล่ะหลายๆรอบ พี่เขาอายุ 37 ปี พี่เขาเป็นหัวหน้าหน่วยงานสังกัดเดียวกับพี่คนที่ผมรู้จัก ผมอยู่อีกหน่วยงานหนึ่ง แต่สังกัดเดียวกัน แต่ ก็ไปๆมาๆ จะได้เจอหน้ากันอยุ่บ่อยครั้ง ผมไม่อยากบอกเขาตรงๆ ผมกลัวจะมีผลกระทบต่องานผม เพราะเขาเป็นถึงหัวหน้าใหญ่ แต่บางครั้งผมก็รำคาน แต่ไม่รุ่จะปฎิเสธเขาไปยังไง มีใครพอจะแนะนำ ทางออกให้ผมได้ไหมครับ 🙏🏼🙏🏼🙏🏼

ปล.ผมไม่ใช่ ผช นะครับ
ขอบพระคุณครับ