Всё происходит от того, что камера обнволяется после того, как будут обработаны данные с прошлого кадра. Если вы быстро перемещаете взгляд в игре, а затем резко останавливаетесь, движение прекратится только со следующим кадром. Таким образом, создаются заметные разрывы, вне зависимости от фреймрейта.