付き合ってちょうど1年になる彼氏と性格が正反対すぎて、なにを話してもお互いに相手がこう考えるだろうと予測することがすべて的外れになります。
すれ違いに気づく度に話し合いを重ねてきましたが、最近忙しくてあまり会えていなかったのもあって、会うたびにすれ違い、話し合いの時間のほうが長くなるのに疲れてきました。
もうスパッと別れた方がいいのか、もう少し打ち解けるための時間をかけたほうがいいのか、自分で判断ができないのでアドバイス欲しいです。

すれ違いというのは、例えばこんな感じです。
一緒に出かけた時、私がお手洗いに行ってる間に彼が待っててくれますが、ひと言もなく勝手にほかの店を見に行きます。
私は毎回置いていかれたかと思って焦って探しに行きます。いつも怖いので、一度「勝手に何処かへ行かないで」と言いましたが、彼の耳には届かなかったようで
先日のデートでは完全に見失い、2分ほど探し回ってLINEしたら彼がお手洗いのあたりに戻っていたので、私は怒って「勝手にいなくなるの、もう二度とやらないで。次やったら置いて帰る。」と強めに言いました。

あとから聞いたら、彼は「いつもトイレから出てきたときに『おまたせ』というから、気にしているのかと思った。待ってる姿を見せないために他のところへ行っていた」そうです。
しかも「俺のなかに、置いていくという発想がなかったから、そんなに怖がられるなんて思いもしなかった」

私からしたら、女性がお手洗いで持たせるのはある程度仕方がないところがあるので、『おまたせ』は半分は申し訳なさでも、半分はマナーとして言っているだけです。

それよりも私は、恋人を黙って置いていくことの方を気にしてほしかった。
私は何とか気持ちを伝えるべく、自分が子供で親においていかれたらどう思う？と言いましたが、それは子どもだから怖いだけ、と全然伝わらない様子でした。

こんなふうに、私が気持ちを伝えると「そんな発想はなかった」ばかりで、逆に彼が私のためにと思ってやることは空回って私のためになっていないことばかりです。

話し合いはできるので、そこはいいんですが、話し合った所で分かり合えないなと思えることが増えてきました。倦怠期なのか、もう限界なのか…。どうやって判断したらいいでしょうか？