Suele pasar...a no ser que tengas una buena tarjeta de sonido o uses un programita muy querido...un tal ASIO no se qué, que la latencia te la baja muchisimo llegando a ser inapreciable en un buen PC. Cerca de unos 400ms mas o menos ya está bastante bien. Ahora mismo no me acuerdo bien del nombre del programa lo tengo por ahi abandonado, pero es la solución más efectiva y rápida a lo que comentas.
Esperemos que aquí alguien suba el programita o diga exactamente el nombre yo almenos te digo qué no te preocupes que eso se soluciona.
Saludos