前几天交了一个男友，
虽然先前认识了几个月，
却因为对方慢熟，以及之前几乎没有单独相处的机会，
会在一起只是他做了一个很贴心的举动，也感受到他对我的关爱，
就糊里糊涂的决定交往了...
但在一起几天后，还是觉得没有很适合，
除了教育背景差很大之外，
再加上知道他的一些比较私人的事情后，
更大幅减低我跟他继续走下去的意愿，
即使已经看见他有在努力改变，
我也对自己的耐心一点把握都没有
简单来说，就是现在想抽身提分手，
但因为目前的生活朋友圈几乎重叠，
甚至会影响到工作上面的合作，搞得不知道怎么开口...
请问该怎么办才好？