Creio que isso seja uma aceleração do seu mouse ou alguma configuração do seu osu!.
Caso seja da marca Multilaser, seu mouse provavelmente possui aceleração.
*caso seja alguma marca que não há nenhum manager (como Razer Synapse) não sei se existe maneira de tirar essa aceleração do mouse.
*caso seja da Razer, vá no Razer Synapse>Mouse>Desempenho e coloque a ACELERAÇÃO no 0.
Espero ter ajudado.