Com lentes manuais, 90% modo manual, apenas porque fica mais fácil de fotometrar assim.
Se preciso garantir continuidade de exposição entre vários frames, modo manual também, para evitar a flutuação da exposição.
Se é durante o dia, com lentes eletrônicas, prioridade de abertura já que quase sempre minha fotografia é baseada primeiramente no estudo do DOF e fixando a abertura, posso me dedicar aos outros aspectos do processo fotográfico sem ficar me preocupando em setar e ficar ajustando velocidade a cada variação de luz. A câmera é bem competente para fazer isso, e eu fazer isso a mão para obter o mesmo resultado é apenas perda de tempo.
Se estou fotografando corridas, modo Tv.
O segredo não é usar um modo, é usar o modo mais apropriado para o momento.