彼氏がバイトを辞めろと言う理由、どうするべき？

彼氏から急に「バイト辞めて」って言われて、びっくりしてしまいました。理由を聞くと「他の異性と関わってほしくないから」だそうです…。ちょっと嫉妬深いところがある彼ですが、まさかここまで言われるとは思わなくて困惑しています。

私としては、バイトは大事な収入源ですし、同僚ともいい関係を築いています。それに仲直りしないって言われても、なんだかそれはおかしいかなと感じます。こんな時、どのように彼と向き合うべきでしょうか？