El frametime es el inverso de los FPS, se calcula dividiendo 1000ms (1 segundo) entre el numero de FPS por lo que si los fps están variando constantemente el frametime también. La única manera de tener el frametime constante es limitado los fps ( a 60 por ejemplo) y tendrás un frametime bastante estable (entorno a 16.6ms en el caso de 60fps, si tu gráfica es capaz de mantener 60 fps claro).
Hay herramientas como rivatuner que limitan los fps a nivel de drivers y logran un frametime mucho mas estable.
Como te digo, si el frametime varía porque también lo hacen los fps no hay problema, es lo que debe pasar. Otra cosa es que a fps bloqueados y constantes tengas tirones, sube el framtime y bajan los fps... entonces podría haber un problema.