¿Los ganchos de teclado pueden causar retraso en la entrada?

Utilizo hooks en el código de C# para capturar la entrada del teclado del usuario.
El código se muestra a continuación:

[DllImport("user32.dll", CharSet = CharSet.Auto, SetLastError = true)]
public static extern IntPtr SetWindowsHookEx(int idHook, LowLevelHookProc lpfn, IntPtr hMod, uint dwThreadId);

using (Process curProcess = Process.GetCurrentProcess())
using (ProcessModule curModule = curProcess.MainModule)
{
    return SetWindowsHookEx(idHook, proc, GetModuleHandle(curModule.ModuleName), 0);
}

Y el “proc” es mi función de procesamiento. Esta función se llamará cada vez que haya una entrada del teclado. El código es así:

private IntPtr HookCallback(int nCode, IntPtr wParam, IntPtr lParam)
{
    if (nCode >= 0 && (wParam == (IntPtr)WM_KEYDOWN || wParam == (IntPtr)WM_SYSKEYDOWN))
    {
        // hacer algo
    }
    if (nCode >= 0 && wParam == (IntPtr)WM_KEYUP)
    {
        // hacer algo
    }
    return CallNextHookEx(IntPtr.Zero, nCode, wParam, lParam);
}

El problema ahora es que cuando la carga de CPU de mi computadora es alta, la entrada del teclado se retrasa. Es decir, sigo presionando la tecla A y cuando suelto el teclado, sigue escribiendo.

Creo que es porque, supongamos que se ingresan 10 teclas A, pero debido al alto uso de CPU, solté las teclas cuando solo se procesó la quinta tecla, y la computadora continuó procesando las otras 5 teclas, lo que causó este retraso.

Entonces, ¿mi suposición es correcta? ¿Hay alguna forma de resolver este problema aquí? Muchas gracias.