Sammenlign fødevarescanningsapps med de samme emballager og tydelige fejltal

For at sammenligne fødevarescanningsapps retfærdigt skal du give dem de samme opgaver på de samme emballager og definere succes, før du ser resultaterne. Nogle få tiltalende skærmbilleder dokumenterer ikke nøjagtighed, og en test af én funktion vurderer ikke alle appens funktioner.

Vælg en afgrænset opgave

Begynd med noget observerbart, for eksempel at udlæse portionsvægt og mængden af et navngivet næringsstof fra en læselig etiket. Lav en referenceafskrift fra emballagen, og få den kontrolleret uafhængigt før testen. FDA's vejledning i at læse etiketter kan hjælpe med at fortolke felterne; den certificerer hverken din test eller nogen app.

Registrér hver emballages identitet og kildebillede. Vælg et varieret, men håndterbart udvalg, og beskriv dets begrænsninger: for eksempel kun emballager til tørre fødevarer med engelsk tekst fotograferet i godt lys. Beskriv ikke denne stikprøve som repræsentativ for enhver indkøbssituation.

Brug samme fremgangsmåde

Registrér appversion, enhed, dato, inputbillede og relevante indstillinger. Beslut på forhånd, om gentagne forsøg og manuelle rettelser er tilladt. Tester du en stregkodefunktion i én app og billedafskrift i en anden, skal du rapportere dem som forskellige opgaver frem for at påstå, at det er en direkte konkurrence i nøjagtighed.

Gem de rå resultater, før du retter noget. Registrér identitetsafvigelser, mængdefejl, enhedsfejl, manglende felter og tilfælde med ulæselig reference hver for sig. Et match med det forkerte produkt bør ikke tælles som vellykket udlæsning, blot fordi de viste tal ser plausible ud.

Angiv nævnerne ærligt

I en hypotetisk test af 12 emballager med fire bedømte felter hver er der 48 planlagte feltkontroller. Hvis to referencefelter er ulæselige, skal du angive 46 kontroller, som kan vurderes, og to udeladte kontroller med begrundelser. Hvis 42 af de 46 resultater, der kan vurderes, stemmer, skal du angive 42/46 frem for at gøre resultatet til en bred påstand om, at appen er nøjagtig under alle forhold.

Angiv også, hvor fuldstændige resultaterne er for hver emballage. Flere feltfejl samlet på én emballage fortæller en anden historie end én fejl på hver af flere emballager. Tidsforbruget kan være nyttigt, men skeln mellem automatisk behandlingstid og tid brugt på at kontrollere og rette resultater.

Offentliggør fremgangsmåde, stikprøvens begrænsninger og observerede antal samlet, hvis du deler evalueringen. Undgå at vælge nye udeladelser, efter at du har set, hvilken app de favoriserer. Eksemplet rapporterer ingen virkelig apps ydeevne; det er en metode til at indsamle dokumentation, før du udformer en anbefaling.