Testeurs du test fermé non comptés : pourquoi Google en voit moins de 12
Vous avez invité 15 personnes. Peut-être 20. Google dit quand même que votre app a besoin de plus de tests, ou votre propre compte ne tombe pas juste. Il n'y a pas de message d'erreur pour ce cas. La cause est presque toujours la même : les personnes que vous considérez comme « testeurs » ne sont pas toutes inscrites au test fermé, sans interruption, pendant les 14 jours qui précèdent votre demande.
Voici la règle dans les mots de Google : « Lorsque vous demandez un accès en production, au moins 12 testeurs doivent être inscrits à votre test fermé depuis au moins 14 jours sans interruption » (Aide Play Console). Chaque mot de cette phrase est une façon de perdre des testeurs.
Un testeur manquant, ou beaucoup ?
| Situation | Cause probable | À vérifier en premier |
|---|---|---|
| Tout un groupe de testeurs n'a jamais compté | Mauvaise piste, ou jamais inscrits | Causes 1 à 3 |
| Un ou deux testeurs ont disparu | Ils sont partis, ou arrivés tard | Causes 4 et 5 |
| Le compte semblait bon, Google a quand même demandé plus de tests | L'activité, pas le nombre | Cause 7 |
Causes et solutions, dans l'ordre où les vérifier
1. Ils sont dans votre test interne, pas dans votre test fermé
Seul un test fermé remplit l'exigence. Dans le tableau des pistes de Google, les tests internes n'ont aucune exigence (« Aucune. ») et la production passe par un test fermé : « Exécutez un test fermé avec au moins 12 testeurs inscrits pendant 14 jours sans interruption » (Aide Play Console).
Pire, le test interne bloque le test fermé. Google indique : « Un utilisateur qui choisit d'activer le test interne de votre application ne peut plus recevoir de test ouvert ou fermé » (Aide Play Console).
Solution : retirez vos testeurs du test fermé de la liste interne. Demandez-leur de quitter le test interne, puis de s'inscrire au test fermé. Leurs 14 jours partent de cette inscription. Les différences entre les trois pistes sont détaillées dans test interne, fermé ou ouvert.
2. Ils sont sur la liste mais ne se sont jamais inscrits
Ajouter une adresse à une liste, ou une personne à votre groupe Google, l'autorise seulement à entrer. Ça ne l'inscrit pas. Google indique que les testeurs accèdent à une page leur expliquant en quoi consiste la tâche de testeur, « ainsi qu'à un lien d'activation. Chaque testeur doit cliquer sur ce lien d'activation » (Aide Play Console).
Solution : renvoyez le lien d'inscription à tous ceux qui n'ont pas confirmé. Demandez à chaque testeur une capture de la page qui indique qu'il est testeur, avec la date. C'est votre preuve.
3. Votre groupe ou votre liste n'est pas associé à la bonne piste
Les testeurs appartiennent à une piste par la liste ou le groupe défini dans son onglet Testeurs. Si vous avez créé une piste de test fermé supplémentaire, elle a ses propres testeurs. Si votre groupe Google a été saisi dans le mauvais champ, personne dans ce groupe n'est sur la piste.
Solution : ouvrez Tester et publier > Tests > Tests fermés > Gérer le canal > Testeurs sur la piste qui porte votre version (la Play Console en français appelle les pistes des « canaux »). Vérifiez que le groupe Google est saisi avec l'option Google Groupes, ou que les bonnes listes d'adresses sont cochées, et que vous avez enregistré. Google ne dit pas si des testeurs répartis sur plusieurs pistes de test fermé s'additionnent. Gardez vos testeurs sur une seule piste.
4. Des testeurs ont quitté le test
Un testeur peut partir à tout moment. Dans l'application Play Store, il trouve votre app sous Gérer les applications et l'appareil > Bêta et appuie sur Quitter (Aide Google Play). Certains le font pour se débarrasser d'un build bogué. D'autres par erreur.
La FAQ de Google est stricte : « Les testeurs qui s'inscrivent au test, y participent pendant moins de 14 jours, puis se désinscrivent ne sont pas pris en compte. Si un testeur se désinscrit, puis se réinscrit plus tard, les 14 jours doivent être consécutifs pour être comptabilisés dans le quota minimal » (Aide Play Console).
Solution : un testeur parti puis revenu repart du jour 1. Recrutez un remplaçant tôt plutôt que d'attendre qu'il atteigne de nouveau 14 jours.
5. Vous avez compté 14 jours depuis le début du test, pas par testeur
Chaque testeur a ses propres 14 jours. Si huit personnes se sont inscrites le jour 1 et quatre autres le jour 5, vous n'avez 12 testeurs avec 14 jours consécutifs qu'à partir du jour 19, pas du jour 15. Le calcul détaillé est dans comment se comptent les 14 jours.
Solution : tenez un journal simple : adresse du testeur, date d'inscription, toujours inscrit (oui/non). Votre première date de demande possible est 14 jours pleins après l'inscription de votre 12e testeur, à condition qu'aucun des 12 premiers ne soit parti.
6. Vous avez modifié la liste ou le groupe pendant le test
Les pages d'aide de Google ne disent pas ce que devient l'inscription d'un testeur quand vous retirez son adresse de la liste, ou que vous le retirez du groupe, en plein test. Ne le découvrez pas à vos dépens. Évitez de « faire le ménage » dans votre liste ou votre groupe avant d'avoir obtenu l'accès production.
7. Le nombre était bon, l'activité ne l'était pas
Quand Google demande plus de tests, il cite deux types de raisons : « si vous avez moins de 12 testeurs inscrits ou si l'engagement des testeurs est insuffisant pendant la période de test » (Aide Play Console). S'inscrire, c'est la règle. Utiliser l'app, c'est ce que demande le formulaire : si les testeurs ont utilisé toutes les fonctionnalités, et si leur usage correspondait à ce que vous attendez en production.
Douze personnes inscrites le jour 1 qui n'ont jamais ouvert l'app peuvent donc être comptées, et ne pas suffire pour autant. Si c'est ce qui s'est passé, voyez accès production refusé.
Prévoir une marge dès le jour 1
- Recrutez plus de 12 personnes. Il y a toujours des abandons. Commencez à 15 ou 20, et vous pourrez en perdre quelques-uns sans relancer le compteur.
- Expliquez la règle aux testeurs. Google recommande lui-même : « Informez vos testeurs qu'ils doivent rester inscrits à votre test fermé pendant au moins 14 jours sans interruption » (Aide Play Console).
- Tenez vos propres registres. Les pages d'aide de Google ne décrivent aucun rapport exportable des inscriptions par testeur. Votre journal et les captures des testeurs seront vos seules preuves.
- Ne faites pas la demande le premier jour possible. Un testeur en retard ou un décalage horaire peut vous laisser à un jour près. Attendre un jour de plus coûte peu.
Quand contacter Google
Si vos registres montrent 12 testeurs ou plus inscrits au test fermé, sans interruption, pendant les 14 jours précédant votre demande, et que Google vous a quand même indiqué qu'il y en avait moins de 12, utilisez le lien Contactez-nous de l'aide Play Console. Joignez votre journal et les captures datées des testeurs. Dans tous les autres cas, la réponse est plus de temps de test, pas l'assistance.
Pour la vue d'ensemble de l'exigence, voyez le guide des tests fermés Google Play.
Questions fréquentes
Les testeurs internes comptent-ils dans les 12 testeurs ?
Non. Google exige un test fermé avec au moins 12 testeurs. Le test interne est une piste à part, et Google indique qu'une personne qui active votre test interne ne peut plus recevoir votre test fermé.
Un testeur qui se désinscrit puis revient compte-t-il encore ?
Seulement à partir du jour où il revient. Google indique que si un testeur se désinscrit puis se réinscrit plus tard, les 14 jours doivent être consécutifs pour compter.
Ajouter l'adresse d'un testeur à ma liste suffit-il ?
Non. Être sur la liste ou dans le groupe Google l'autorise seulement à entrer. Chaque testeur doit ouvrir le lien d'inscription et s'inscrire.
Les testeurs doivent-ils continuer à utiliser l'app ?
La règle de Google porte sur le fait de rester inscrit 14 jours. Mais Google cite aussi une activité insuffisante des testeurs comme raison de demander plus de tests : les testeurs doivent donc continuer à utiliser l'app.