Confronta le app che scansionano gli alimenti usando le stesse confezioni e conteggi espliciti degli errori

Per confrontare in modo equo le app che scansionano gli alimenti, assegna loro gli stessi compiti sulle stesse confezioni e definisci il successo prima di guardare i risultati. Qualche schermata accattivante non dimostra l’accuratezza, e provare una funzione non equivale a valutare tutte le funzioni di un’app.

Scegli un compito circoscritto

Parti da qualcosa di osservabile, come estrarre il peso della porzione e la quantità di un nutriente specifico da un’etichetta leggibile. Crea una trascrizione di riferimento dalla confezione e verificala in modo indipendente prima della prova. La guida della FDA statunitense alla lettura delle etichette può aiutare a interpretare i campi; non certifica la tua prova né alcuna app.

Registra l’identità di ogni prodotto confezionato e l’immagine di origine. Scegli un insieme vario ma gestibile e descrivine i limiti: per esempio, solo confezioni di alimenti secchi con etichette in inglese, fotografate con buona luce. Non presentare quel campione come rappresentativo di ogni situazione di acquisto.

Usa la stessa procedura

Registra versione dell’app, dispositivo, data, immagine fornita e impostazioni rilevanti. Decidi in anticipo se consentire nuovi tentativi e correzioni manuali. Se provi un flusso basato sul codice a barre in un’app e la trascrizione da immagine in un’altra, descrivili come compiti diversi senza affermare che sia un confronto diretto di accuratezza.

Salva i risultati grezzi prima di correggere qualsiasi cosa. Tieni separati gli abbinamenti al prodotto sbagliato, gli errori di quantità, gli errori di unità, i campi mancanti e i casi con riferimento illeggibile. Un abbinamento a un prodotto errato non va contato come un’estrazione riuscita solo perché i numeri visualizzati sembrano plausibili.

Riporta i denominatori con onestà

In una prova ipotetica su 12 confezioni con quattro campi valutati ciascuna, sono previsti 48 controlli di campo. Se due campi di riferimento sono illeggibili, riporta 46 controlli valutabili e due esclusioni motivate. Se 42 dei 46 risultati valutabili corrispondono, indica 42/46 invece di trasformare il risultato nell’affermazione generale che l’app è accurata in tutte le condizioni.

Riporta anche la completezza per confezione. Diversi errori di campo concentrati su una confezione descrivono una situazione diversa da un errore su ciascuna di più confezioni. Il tempo necessario può essere utile, ma distingui l’elaborazione automatica dal tempo speso a verificare e correggere i risultati.

Se condividi la valutazione, pubblica insieme la procedura, i limiti del campione e i conteggi osservati. Evita di scegliere nuove esclusioni dopo aver visto quale app favoriscono. Questo esempio non riporta prestazioni reali di alcuna app: è un metodo per raccogliere prove prima di formulare una raccomandazione.