Eu tanho Polarizador e UV, o UV fica o tempo todo na lente, para proteção, e o Polarizador uso quando julgo necessário, nem sempre tiro o UV, por pura comodidade mesmo.
A grande função do UV é proteger o primeiro "vidro" da "lente", por isso ele fica lá o tempo todo. O Polarizador não pode ser usado da mesma maneira, pois é escuro e interfere na fotometria, o que pode ser muito prejudicial em várias situações, e também pq é bem caro para ficar permanente como proteção.
Enfim, tenha os dois.
Abraços.