PBR материалы и свет настроены круто. Попробуйте передавать массив с точками повреждений на вершинный шейдер (3.0 версии хватит). смещайте верины как вмятины и подкрашивайте грязью. Один минус - нужно нормали пересчитывать динамически, но может и без этого прокатит.