Pour procéder à une évaluation métrique (automatique) d'un texte généré de manière automatique, il faut nécessairement disposer d'un texte source (rédigé par un humain) et d'un texte cible (rédigé par un logiciel). Les deux textes doivent en outre être de taille équivalente (ce qui peut supposer un travail de post-édition du texte source). Les métriques BLEU, ROUGE, NIST, METEOR et WER peuvent être testées ci-dessous via le toolkit Asiya-Online.