Les filles se battent Partie II : Réponse de Duolingo (en quelque sorte)

J'ai écrit sur les filles qui se battent Partie I ici.

tl;dr : les fournisseurs de tests traditionnels se positionnent contre les nouveaux entrants comme Duolingo English Test (DET) en mettant l'accent sur l'évaluation humaine et la validité appuyée par la recherche ; les preuves de ces affirmations sont discutables.

J'ai promis de vous tenir au courant s'il y avait des répliques des fournisseurs de tests modernes, et je considère le livre blanc de The Quantum Hub (sponsorisé par DET) publié hier comme une réponse. Ce n'est pas une réponse directe, mais j'ai besoin de construire le récit d'un vrai combat, donc me voici appelant cela Round I (coup et contre-coup) 😂

Le livre blanc plaide pour une transition accélérée vers les tests uniquement en ligne. Financement, données de recherche et biais évident de DET mis à part, j'adhère à plusieurs de leurs arguments.

1. Les centres de test sont concentrés dans les villes de premier rang, « excluant » effectivement les candidats ruraux qui doivent voyager de nuit et payer des hôtels juste pour passer un examen. Un modèle à domicile supprime cette barrière d'infrastructure, permettant la mobilité depuis des régions sans installations de test physiques.
2. Le document soutient que les centres physiques sont en fait plus sujets à la fraude, mentionnant la vulnérabilité aux réseaux de « faux candidats » et aux épreuves à format fixe divulguées. Les fournisseurs numériques peuvent créer des tests « adaptatifs » (où aucun examen n'est identique) et exiger des données biométriques pour contrer la mémorisation par cœur et la fraude par usurpation d'identité courantes dans les centres physiques.

*3. Les auteurs remettent en question la validité des examens de 3 heures, arguant qu'ils mesurent souvent l'endurance plutôt que la compétence linguistique. En utilisant le Computer Adaptive Testing (CAT) pour ajuster la difficulté en temps réel, le DET affirme pouvoir identifier le niveau de compétence en moins d'une heure, éliminant le facteur fatigue.

*C'est un point avec lequel je suis en désaccord. La fatigue dans une langue cible est réelle, et doit être entraînée et testée. Les environnements de travail nécessitant 8 heures en langue cible, les études ou cours ou projets de groupe nécessitant des heures et des heures en langue cible, il y a absolument une composante d'endurance dans l'utilisation réelle de la langue.

Positionnement stratégique

Depuis la pandémie, le monde est passé en ligne, et chaque fournisseur de tests traditionnel a été forcé de s'adapter, créant des produits de test à domicile. Ceux qui ont été plus lents à adopter les formats modernes ont vu leur part de marché grignotée par de nouveaux entrants comme DET ou des entreprises établies un peu plus agiles (PET).

Un vrai champ de bataille en développement est la rapidité avec laquelle les gouvernements et les institutions peuvent être convaincus de passer effectivement au tout-numérique. Le Home Office britannique, comme exemple récent, passe aux tests en ligne d'abord dans le cadre de son nouveau processus d'appel d'offres. Il ne devrait pas non plus échapper à personne que DET a choisi une société de conseil en Inde, l'un des champs de bataille les plus féroces pour les tests d'anglais, pour sponsoriser une étude s'adressant directement aux initiatives gouvernementales.

Si DET, LanguageCert, ou une autre start-up alimentée par l'IA en développement peut accélérer le passage au numérique, ils peuvent potentiellement gagner sur plusieurs fronts : niveler le terrain de jeu pour les étudiants, augmenter les revenus, et transformer l'infrastructure massive de centres de test de leurs concurrents traditionnels (centres de préparation aux tests, baux commerciaux, structures de licence complexes à démanteler, etc.) en passifs de bilan du jour au lendemain.

Carte de combat Round I

IELTS a lancé quelques coups légers sur l'humain dans la boucle et la validité appuyée par la recherche. S'ils peuvent continuer à commander des études pour marteler ce point et créer un vrai corpus de preuves, ils pourraient être en mesure de se positionner comme l'option plus traditionnelle mais meilleure pour servir les étudiants. Mais le sentiment académique est loin d'être unifié sur ce sujet et facilement contré par des études commandées par les nouveaux entrants.

DET est allé directement au corps, s'attaquant au cœur du paysage des tests : l'équité pour les étudiants et l'adoption institutionnelle. S'ils peuvent affaiblir les fournisseurs traditionnels ici, un coup à la tête dans les rounds suivants devient possible.

Gagnant : DET