Eu gostei da ideia e apesar de ser novo no fórum, já vi que esta área em particular precisa mudar um pouco.
A maioria dos comentários são vazios e não acrescentam nada (nem pra quem está se submetendo a avaliação, nem a quem avalia). Falta conteúdo na avaliação.
Já vi comentários como "Votei razoável, porque eu faria diferente.". Sério. É obvio que todos faríamos diferente.
Se existir alguma forma de limitar a avaliação, por pessoas com um mínimo de experiência, seria interessante.
Pega lá um número razoável de caboclo aqui do forum, que tenha interesse em ser "avaliador", dá uma olhada no portfolio do cara, conversa com o cara pra saber se ele tem condições/conhecimento técnico de avaliar uma fotografia. Seria interessante, pois teria muito mais respaldo ter uma avaliação boa de um grupo de avaliadores respeitados e com profundo conhecimento. Hoje, o mesmo que posta foto ruim, é o cara que avalia a do outro colega. Se ele não teve conhecimento técnico para fotografar, como ele faz a avaliação da fotografia do coleta ?
Adicionalmente, sugiro alteração na escala de votação (que é editável na hora da criação, inclusive):
1 - Snapshot. Não há um bom conteúdo na fotografia. Qualquer um, com qualquer câmera, poderia tirar esta foto.
2 - O assunto da foto, está bem definido, mas a fotografia precisa de maior desenvolvimento. Existe algum conteúdo/ideia na foto e demonstra algum conhecimento técnico, porém, ainda precisa amadurecer em algum aspecto (edição/composição/habilidades diversas). Esta foto não é indicada para utilizá-la em um portfolio.
3 - Imagem sólida. Boa fotografia, qualquer fotógrafo profissional poderia colocá-la em seu portfólio. Porém, ainda não é uma fotografia que impressione.
4 - Excelente! Típica fotografia de portfólio, difícil de encontrar algum problema na fotografia. Talvez alguém fizesse algo diferente, porém, o resultado obtido seria muito semelhante. Praticamente perfeito, porém, ainda não é uma fotografia que me faça pensar ou ficar olhando por muito tempo.
5 - Perfeito ! Imagem inesquecível. Essa imagem impressiona pela qualidade de composição, edição e habilidades do fotógrafo. Não há como indicar algum aspecto que poderia ser melhorado.