Em situações com muito pouca luz é sempre complicado fotografar sem IS, salvo com assunto estático e uso de tripé. Se for bem iluminado, sem IS vai bem, pois dá pra usar velocidades mais rápidas, que conseguem congelar a imagem sem problemas. A grande diferença(no meu ponto de vista) entre a f/2.8 e a f/4 IS, são seus pesos, a f/2.8 pesa 1,4Kg, enquanto a f/4 a metade disso. A escolha vai mesmo do que você precisa, se precisa de f/2.8 vá sem medo. Quando tira fotos com sua 24-105mm sente falta de maior abertura? A resposta pode estar aí...