C'est quoi que tu appelles un point aberrant ? J'arrive pas à comprendre avec ta fonction zarb (Si c'est ce à quoi je pense, tu as envisagé de filtrer la texture avant de l'utiliser ? Par exemple avec un filtre moyenneur ou un filtre gaussien)
Et pour le coup si ta texture évolue en temps réel, tu aurais sans doute meilleur temps à utiliser un shader (v3) pour faire du vertex texturing.
(Rebalancer un vertex buffer entier à la carte graphique à chaque image y'a difficilement plus couteux en perfs…)