It’s OK if you don’t like me. Not everyone has good taste.

Ce n'est pas grave si tu ne m'aimes pas. Tout le monde n'a pas bon goût.