自分の恋愛に他人を巻き込む人

[1. 匿名]

職場の同僚に好きな人がいるのですが、私が相手の男性と仲がいいのを知っていて、彼を誘ってとか飲みに行く時一緒に来てとか巻き込んでくる人がいます
1人で頑張りなよと断ると私が冷たい人みたいに言います
私には小さな子もいるし、そんな事に付き合ってる余裕はありませんしハッキリ言って面倒くさいです
断ることは悪いですか？
ちなみに同僚はもうすぐ40歳です