Protocollo v2.0.0 · 15 uscita 2026
Come verrà svolto lo studio
La registrazione è aperta. Prima della raccolta definiremo con le aziende numero dei partecipanti, durata e analisi dei dati. Lo studio non ha ancora pubblicato i risultati.
01Confronta compiti simili
Ogni partecipante produrrà due contenuti provenienti da brief diversi, ma di difficoltà simile. Utilizzerai l'intelligenza artificiale su un'attività e lavorerai senza intelligenza artificiale sull'altra. L'ordine verrà redatto prima di iniziare.
02Registra il tempo per ogni passaggio
I tempi di produzione, revisione e correzione verranno registrati separatamente. Anche le consegne rifiutate entrano nel conto, poiché hanno consumato il tempo del team.
03Valutare la consegna
Il revisore controllerà se il contenuto è corretto, soddisfa il brief, è chiaro e presenta fonti verificabili. La consegna deve soddisfare tutti e quattro i criteri. Il revisore riceverà il materiale senza sapere se è stata utilizzata l'intelligenza artificiale.
04Esaminare i dati per la pubblicazione
Analizzeremo i risultati anche quando l’AI non porterà guadagni né aumenterà il lavoro. Prima della pubblicazione i dati verranno esaminati e resi anonimi. La divulgazione del nome di un'azienda richiede un'autorizzazione specifica.
Cosa verrà misurato
- Tempo per consegna approvata
- Somma dei verbali di produzione, revisione e correzione, compresi i tentativi rifiutati, divisa per il numero di consegne approvate. La contabilità verrà effettuata separatamente per le attività IA e non IA. Se non vengono approvate consegne, questo indicatore non avrà alcun valore.
- Costo per consegna approvata
- Costo delle ore lavorate più spesa per API o strumento, diviso per il numero di approvazioni. Il calcolo verrà presentato solo una volta inseriti i costi necessari.
- Qualità e fallimenti
- Numero di consegne approvate e rifiutate. Criteri di valutazione, revisore, brief e strumenti consentiti verranno definiti prima dell'assegnazione degli incarichi.
- Confronto a coppie
- Variazione temporale mediana tra le due attività della stessa persona, considerando solo le coppie complete con entrambe le consegne approvate. Questo limite potrebbe favorire coloro che hanno ottenuto un buon risultato in entrambe le condizioni. Pertanto, l'analisi informerà anche su quante coppie sono state escluse.
Campione, privacy e limiti interpretativi
La partecipazione è volontaria. I risultati descriveranno le aziende partecipanti e potrebbero non rappresentare il mercato. La dimensione del campione, i tempi, le regole di chiusura e l'analisi per azienda saranno concordati prima della raccolta. La dimensione del campione necessaria per rilevare un effetto con precisione statistica non è stata ancora calcolata.
La persona può imparare da un compito all'altro e i brief possono presentare difficoltà diverse. L’estrazione degli ordini riduce parte di questo problema, ma non lo elimina. Lo strumento presenta sintesi descrittive. Non calcola la significatività statistica o gli intervalli di confidenza.
Nello strumento di raccolta registra solo codici e misure. Le note, i nomi e i documenti dei clienti dovrebbero restarne fuori. I contatti di registrazione vengono salvati separatamente. La partecipazione allo studio e alla pubblicazione dei dati avrà i propri accordi.
Rovemark vende strumenti di intelligenza artificiale e conduce anche questa ricerca. Questo collegamento commerciale sarà segnalato nelle pubblicazioni. Il protocollo è pubblicato su questo sito Web senza registrazione OSF, certificazione NIST o revisione paritaria. Eventuali modifiche al metodo saranno identificate e giustificate.