Comme dit Zephyr, faut savoir si la latence est principalement dûe à tes structures de contrôle (if, for, manipulation de variables etc...), ou alors aux fonctions de calculs mathématiques. Si ce sont les fonctions mathématiques qui bouffent le temps, t'auras pas grand chose à y gagner. En C, tu ne feras que les appeler différemment, mais ce seront les mêmes fonctions.
Par contre, en effet, t'as gros à gagner sur l'algorithme de ton programme.

A toi de voir ce que signifie gros dans ton cas, si c'est quelques centièmes de seconde, tu ne gagneras que ça...