Sim, pois irá variar de acordo com a localidade e disponibilidade do servidor.
O servidor pode estar com muitas conexões abertas ( no limite do que suporta) ou a infra-estrutura de redes do servidor até seu ponto é ruim.
Tente variar de servidor se estiver tendo LAG, e só um ponto que gostaria de colocar : até cerca de 200ms o ping é dado como aceitável, sendo os melhores casos abaixo de 100ms, como já está abaixo de 100ms em alguns casos que você citou, se estiver tendo LAG de duas uma : ou o servidor é ruim, ou seu computador é o responsável pelos LAG's (CPU ou GPU, ou RAM ou HD, eventualmente a placa mãe (bus)).