Alpha testeur d’un service web 2.0 cela rapporte parfois!

Fin 2005, je m’étais inscrit pour la phase d’alpha test de Riya, start up proposant un service de reconnaissance faciale permettant de classer vos photos par visage donc.

Première phase de l’alpha test :

L’intérêt était de tester l’application avant tout le monde et pouvoir ainsi se faire une idée précise de ce que pouvait être le service proposé par Riya et la qualité des résultats fournis pas l’application. C’était pas mal j’ai pu voir l’application et la tester, cf mon post sur le sujet. Je crois que cette phase avait été ouverte à environ 1000 testeurs! Pour Riya l’intérêt de cette phase était évident : tester grandeur nature le service pour identifier les bugs, la tenue des serveurs…

Deuxième phase de test :

Un mois plus tard, Riya a envoyé un mail à tous les alpha testeurs (les 1000) pour leur proposer de participer à un « Ground Truth Test » en uploadant au minimum 1000 photos et surtout en renseignant de manière manuelle les visages de chacune des photos uploadées sur le site, le tout bien sûr sans utiliser la fonction de reconnaissance automatique qui fait toute la force du logiciel Riya. La méthodologie de test retenue par Riya impliquait aussi l’envoi d’un DVD contenant toutes les photos qui avaient été uploadées sur le site. L’objectif de cette phase était de comparer ce que pouvait donner la version automatique (renseignée automatiquement par le logiciel sur la base du DVD envoyé) avec le set de photos manuellement tagées online par l’utilisateur.

Pour motiver les foules, Riya a proposé une remuneration soit en argent soit en nature par l’envoi d’un appareil photo numérique (valeur de l’APN non définie à l’origine du mail).

Je ne vous cache pas que cette étape à laquelle j’ai participé a été fastidieuse puisqu’il a fallu composer avec les nombreux bugs de l’application et surtout se taper à la main le tagging des visages de mes 1000 photos. Quelques dizaines d’heures plus tard (cela m’a prit pas mal de temps quand même, ma femme peut témoigner) j’avais fini le job (après quelques phases de doutes où j’ai failli tout abandonner car un bug m’obligeait à recommencer plusieurs fois l’opération de tag sur une partie des photos).

Entre temps j’ai discuté fréquemment avec un ingénieur de Riya pour lui faire part des bugs identifiés et de ma progression… A la fin il m’a dit le nombre de personnes participant à la phase de test et j’avoue avoir été étonné du nombre qu’il m’a donné, seulement une vingtaine soit 2% des alpha testeurs… Pas terrible comme ratio ! Et puis j’ai pu apprendre que peu d’entre nous avaient réellement terminés cette phase de test !

Quelques semaines plus tard j’ai reçu un mail de Riya et j’ai compris qu’ils ne se foutaient pas de nous en nous donnant un appareil photo haut de gamme, le dernier compact de canon, le ixus 750 (d’une valeur de 380 euros quand même). Comme le montre la publicité de canon ci-dessous, l’appareil est vraiment petit et présente toutes les dernières innovations de l’univers de la photo.

Donc merci Riya et j’attends avec impatience l’ouverture de la phase de beta pour voir les amélioration.