Riconoscimento intelligente dei caratteri di Zia Vision

Le schermate in questo articolo sono in lingua inglese. L'interfaccia di Zoho CRM potrebbe variare in base alla versione e alla lingua impostata.

Inserisca i Suoi dati fisici nei Suoi processi digitali

Il riconoscimento intelligente dei caratteri o ICR è una tecnologia di riconoscimento ottico in grado di riconoscere, acquisire e digitalizzare dati disponibili in qualsiasi forma fisica utilizzando l'Intelligenza Artificiale.

In Zoho CRM, l'ICR è integrato come parte di Zia Vision, lo strumento di rilevamento e validazione delle immagini basato sull'intelligenza artificiale.

In questo documento scoprirà:

Estrazione basata su modello

Come addestrare Zia per estrarre dati dalle immagini

Prompt dei campi zero-shot

Esplorare la tecnologia alla base del prompt zero-shot

Perché è necessario l'ICR nel CRM?

Dai biglietti da visita alle etichette dei prodotti, dai moduli di registrazione alle fatture, dai documenti d'identità alle etichette di spedizione, le Sue operazioni si basano su dati stampati provenienti da una varietà di supporti fisici. Tuttavia, è importante che i Suoi agenti mantengano il passo con la Sua attività e non sprechino tempo e impegno preziosi nella conversione manuale del testo stampato in dati utilizzabili.

Supponiamo che Lei sia un rappresentante commerciale impegnato e abbia incontrato alcuni potenziali clienti di alto valore a una conferenza e scambiato biglietti da visita. Al ritorno in ufficio, deve creare un record per ogni biglietto da visita ottenuto, inserendo dettagli come il nome della persona, il numero di telefono, il sito web, l'indirizzo e così via.
Oppure immagini un flusso di lavoro post-produzione in cui un responsabile di magazzino deve registrare informazioni come nomi dei prodotti, numeri SKU, date di produzione e così via dalle etichette dei prodotti attaccate ai prodotti confezionati e inserirle tutte in Zoho CRM.

In entrambi gli scenari, il processo effettivo di nurturing dei lead e gestione delle scorte inizia solo dopo che i dati sono stati caricati nel sistema, ma gli agenti hanno dovuto dedicare la maggior parte del loro tempo all'importazione dei dati nel sistema.

Pertanto, per semplificare la creazione dei record, migliorare la produttività aziendale e alleviare l'affaticamento da compilazione, Zia Vision è ottimizzato con la funzionalità ICR.

Scelga la tecnica ICR adatta alla Sua attività: tipi di ICR in Zoho CRM

Dal lavorare con orientamenti standard prevedibili come i documenti d'identità a quelli dinamicamente variabili come i biglietti da visita, la Sua attività opera con una gamma di formati di dati fisici e per adattarsi e soddisfare le diverse esigenze aziendali, l'ICR in Zoho CRM è dotato di due tipi di metodi di estrazione:

Basato su modello
Prompt dei campi zero-shot

Estrazione basata su modello

L'estrazione basata su modello è un metodo di estrazione in cui si addestra Zia con alcuni campioni

Richiede il caricamento di immagini campione dei dati con gli stessi orientamenti (stesso modello con valori di dati diversi, affinché Zia possa comprendere)
Localizzare manualmente i valori dall'immagine caricata e associarli ai campi del CRM dal layout/modulo scelto.

In questo modo, Zia saprà dove nell'immagine recuperare i valori e con quale campo del CRM associarli nel layout selezionato.

Ad esempio:

Assicurazione con un clic

Le attività assicurative spesso coinvolgono processi che richiedono molto tempo. Per semplificarli, Coverly, un fornitore di assicurazioni tecnologicamente avanzato, ha ideato le richieste di assicurazione con un clic, in cui i clienti inviano documenti d'identità autorizzati dal governo per creare polizze istantanee. Utilizzando l'ICR, gli agenti assicurativi che lavorano su queste richieste possono usare queste immagini per creare nuovi record in pochi semplici passaggi.

Completamento delle verifiche sui fornitori

Zylker è una piattaforma di formazione online che consente agli esperti di dominio di registrarsi e condurre corsi sulle loro piattaforme. Per migliorare l'esperienza utente, la piattaforma registra gli esperti tramite moduli web e richiede solo alcuni dettagli di base, come nomi e indirizzi email. Con queste sole informazioni, Zylker non può autorizzare gli esperti; tuttavia, richiedendo anche l'invio di foto dei loro documenti d'identità, Zylker può estrarre i dati e arricchire i record con le informazioni necessarie.

Ecco una panoramica su come creare un record da un'immagine:

Addestramento di Zia per l'estrazione basata su modello

Come qualsiasi modello di intelligenza artificiale discriminativo, Zia Vision richiede un addestramento preliminare con formati e orientamenti delle immagini tramite immagini campione.

Per addestrare Zia

Vada su Impostazioni > Zia > Vision > Intelligent Character Recognition.
Nella pagina ICR, faccia clic su Create New Rule per creare un set di addestramento per un modulo.
Nella pagina Create New Rule, esegua le seguenti operazioni:

Fornisca un nome per la regola.
Scelga il modulo e il layout desiderati.
Dalle opzioni del tipo di estrazione, scelga Template-driven. Questo richiederà l'addestramento di Zia con immagini campione prima di estrarre i dati in tempo reale.
Nel campo Field to store the input image, scelga il nome del campo desiderato in cui desidera archiviare l'immagine utilizzata per l'estrazione.

Faccia clic su Next. Verrà indirizzato all'interfaccia di addestramento denominata Upload Image(s).
Nella pagina Upload Image, faccia clic su Upload Image(s).
Nella schermata successiva Upload Image for Extraction, aggiunga la Sua immagine trascinandola e rilasciandola dal file manager oppure individuandola tramite esplorazione.

Per cercare il file, faccia clic sul pulsante Browse e selezioni il file dal Suo dispositivo. Quindi faccia clic su Extract.

Arriverà allo studio di addestramento di Zia. Zia riconoscerà i caratteri nell'immagine e contrassegnerà tutti i caratteri validi come regione di interesse utilizzando il riquadro di delimitazione.

Zia riconosce ogni parola nell'immagine, inclusi i nomi dei campi e i valori dei campi.

Se ciò che Zia riconosce è accurato, può fare clic sul riquadro e associarlo al nome del campo dal layout.
In caso contrario, può anche trascinare i margini per coprire i caratteri e associarli come valore di un campo.

Dopo aver associato i caratteri localizzati ai campi, faccia clic su Train.
Faccia clic su Save per salvare la regola.

Una volta addestrato Zia per l'estrazione basata su modello, può iniziare a creare e arricchire i record in quel layout e modulo.

Accuratezza per il tipo di estrazione basata su modello

L'accuratezza nella trasformazione da testo a digitale si basa sull'addestramento e sull'uso coerente del modello. Oltre al set di addestramento caricato, Zia si addestra automaticamente dalle immagini caricate per creare i record.

Per garantire accettazione e accuratezza, si assicuri di aver soddisfatto i seguenti prerequisiti:

Ha creato le regole ICR in Zia Vision.
L'immagine caricata deve avere lo stesso layout del campione.
L'immagine deve avere un orientamento di tipo scheda.

Ecco le linee guida per l'etichettatura delle immagini e l'estrazione dei dati:

Se la Sua immagine è conforme ai prerequisiti e alle linee guida ICR sopra menzionati, Zia può fornire una corrispondenza perfetta.

Prompt dei campi zero-shot

Il prompt dei campi zero-shot è un metodo avanzato di estrazione dei dati che non richiede alcun addestramento. Si indica a Zia quali campi cercare nell'immagine di input (prompt dei campi) e Zia, grazie alla sua intelligenza, sarà in grado di identificare ed estrarre quei dati senza richiedere alcun intervento umano.

Come funziona?

Come ha visto nel metodo di estrazione basato su modello, è necessario localizzare i valori dalle immagini e addestrare Zia ad associarli ai campi del CRM. Nel metodo di estrazione tramite prompt dei campi, Zia utilizza il suo modello basato su VLM per farlo.

Ecco una breve panoramica sul VLM:

Vision-Language Model (VLM)

Un Vision-Language Model (VLM) è un sistema di intelligenza artificiale generativa multimodale che accetta immagini e testo come input e produce output testuali come descrizioni, etichette o campi estratti.

Panoramica dell'architettura:

Un tipico VLM integra due componenti principali:

Vision Encoder - Una rete neurale che converte un'immagine in embedding visivi ad alta dimensionalità.
Large Language Model (LLM) - Un modello di generazione del testo che elabora token testuali e produce output basati su contesto multimodale.

Questi componenti sono collegati tramite un livello di proiezione, in modo che l'LLM possa interpretare le caratteristiche visive come parte della sua sequenza di input.

Il Vision Encoder converte l'immagine in patch embedding, mentre l'LLM converte il prompt in embedding testuali. Questi embedding visivi e testuali vengono proiettati in uno spazio compatibile che consente all'LLM di integrare il contesto visivo con il prompt. L'LLM esegue quindi la generazione standard del token successivo per produrre output, guidato da istruzioni esplicite fornite dall'utente.

Nel caso del prompt dei campi zero-shot, si scelgono i campi di cui si desidera estrarre i valori e associarli al record del CRM.

Quindi, ogni volta che un'immagine viene caricata nel modulo specificato, in base ai campi scelti, Zia può identificare istantaneamente i valori rilevanti dall'immagine di input, estrarli come dati digitali e produrre output associando i valori corretti a quei campi del CRM.

Come utente, tutto ciò che deve fare è validare l'accuratezza e decidere se mantenere le associazioni o meno. Se ci sono incongruenze nei dati (ad esempio, nel Suo elenco a discesa del CRM c'è O positivo, e il Suo cliente ha scritto O+), Zia potrebbe identificarli come risultato, ma Le consente comunque di correggerli subito dopo l'estrazione.

Questo è il prompt dei campi zero-shot: si scelgono i campi e si estrae senza alcun addestramento preliminare su dove nel modello standard si possano trovare i valori.

Tuttavia, sebbene il prompt dei campi di per sé produca un'estrazione accurata, potrebbero presentarsi scenari in cui un'azienda potrebbe aver bisogno di estrarre immagini con valori simili (ad esempio, indirizzo di fatturazione e indirizzo di spedizione), nel qual caso è possibile scegliere di fornire prompt di estrazione avanzati per Zia.

Prompt di estrazione avanzati per Zia

Immagini di voler utilizzare una fattura per creare ordini di produzione nella Sua organizzazione. Una fattura è un documento che contiene un indirizzo di spedizione e un indirizzo di fatturazione e scegliere solo il campo nella regola potrebbe talvolta essere vago e portare a estrazioni di valori errate. Quindi, nei casi in cui sono possibili più valori o interpretazioni per un campo, si sceglie di aggiungere maggiori dettagli sul campo come prompt.

Questo prompt può essere fornito in linguaggio umano naturale e Zia può comprendere le specifiche prima di iniziare l'estrazione.

Funzionalità dell'ICR tramite VLM:

L'estrazione tramite il metodo di prompt dei campi può funzionare con i seguenti elementi:

Formati: JPG, JPEG e PNG
Orientamenti: forme geometriche prevedibili e altre forme personalizzate come nelle schede fustellate.
Tipi di scrittura: testi scritti a mano, testi stampati leggibili e testi stampati a punti.

Configurazione delle regole per i prompt dei campi

Per abilitare l'acquisizione ICR per un modulo, è necessario disporre delle regole ICR.

Per configurare le regole ICR per il prompt dei campi:

Vada su Impostazioni > Zia > Vision > Intelligent Character Recognition.
Nella pagina ICR, faccia clic su Create New Rule per creare un set di addestramento per un modulo.
Nella pagina Create New Rule, esegua le seguenti operazioni:

Fornisca un nome per la regola.
Scelga il modulo e il layout desiderati.
Scelga il tipo di estrazione come Field prompting.
Selezioni tutti i campi per i quali è necessario estrarre i valori dall'immagine di input.
Scelga un campo in cui archiviare l'immagine di input per riferimento futuro. Ricordi, questo è opzionale.
Faccia clic su Proceed. La Sua regola ICR per quel modulo e layout è pronta. Ora i Suoi agenti possono iniziare a scansionare le immagini per digitalizzare i dati.

Faccia clic qui per scoprire come creare record tramite ICR.

Scenari aziendali

Contattare i potenziali clienti delle fiere

Uno dei principali vantaggi della partecipazione alle fiere è attirare nuovi lead, e un modo rapido per fare conoscenza è scambiare biglietti da visita. Utilizzando l'ICR, i rappresentanti possono creare rapidamente record dei lead e iniziare a qualificarli e coltivarli senza dedicare tempo all'inserimento manuale dei dettagli nei record.

Digitalizzazione delle registrazioni dei pazienti

Le registrazioni dei pazienti vengono ancora raccolte come moduli compilati a mano in molti ospedali. Sebbene possano disporre di una robusta automazione dei processi, il trasferimento manuale di questi lunghi dati di tipo modulare nel sistema e poi nel processo comprometterà il flusso di lavoro. Utilizzando l'ICR, l'addetto alla reception può acquisire, caricare e creare il record del paziente in un istante.

Lavorare con l'ICR

Creazione di record

Per creare un record da un'immagine

Vada al modulo desiderato e faccia clic sul menu a discesa disponibile accanto a Crea record.
Ricordi: È necessario aver configurato una regola ICR per abilitare questa opzione.
Nella pagina Create Record from Image, trascini e rilasci l'immagine da cui intende estrarre il testo. Può anche fare clic su Browse per selezionare l'immagine dal Suo dispositivo.
Faccia clic su Proceed. Zia inizierà a estrarre i dati.
Una volta completata l'estrazione, Zia avrà associato i valori dei campi dall'immagine. Questo è comune per entrambe le tecniche di estrazione.

In base all'accuratezza dell'estrazione, può scegliere di mantenere le associazioni di valori di Zia. Ricordi, Zia estrarrà tutti i caratteri in un'immagine, che potrebbero includere dati che non corrispondono a un campo nel Suo layout. Può deselezionarli se non ne ha bisogno.
Se ha utilizzato il prompt dei campi zero-shot per quel modulo:

Se ci sono incongruenze nei dati (ad esempio, il dato nell'immagine è USA e il dato nel Suo layout è Stati Uniti d'America), Zia Le consentirà di correggere le incongruenze.

Può scegliere il valore corretto dai valori dell'elenco a discesa.
Se è un amministratore o un utente con permesso di creare o modificare il layout del record, può anche aggiungere un nuovo valore direttamente in quello spazio.

Faccia clic su Proceed.

Se questa immagine non è soddisfacente, può provare una nuova immagine.

Aggiornamento dei record esistenti

Oltre a creare record dalle immagini, è possibile anche arricchire i record esistenti utilizzando le immagini caricate nei record.

Per arricchire i record esistenti

Vada al record che desidera arricchire e faccia clic sull'immagine a cui desidera fare riferimento per l'arricchimento.
Faccia clic sul pulsante Enrich from Image nell'angolo in alto a destra dell'anteprima.
Zia avrà isolato i caratteri nell'immagine. Validi i dati arricchiti e quelli esistenti e faccia clic su Proceed.
Dopo l'associazione, verrà indirizzato alla pagina di modifica del record, con i campi arricchiti evidenziati per un rapido riferimento.
Faccia clic su Save per registrare le nuove modifiche.

In conclusione, l'ICR in Zoho CRM La aiuta a ottenere i seguenti risultati:

Risparmiare tempo e fatica.
Migliorare agilità e produttività.
Gestire la logistica operativa in modo che gli agenti possano concentrarsi sui processi.
Alleviare l'affaticamento causato dal costante spostamento dello sguardo tra le fonti dati e gli schermi.

Quando usare cosa: una guida per scegliere il tipo di estrazione

Sebbene l'ICR offra due tipi di estrazione, utilizzare quello giusto per l'attività giusta porterà efficienza al processo.

Utilizzare l'estrazione basata su modello:

Se la Sua fonte dati si presenta sempre in un formato standard e costante. Una volta addestrato sulla struttura standard, Zia sarà in grado di elaborare il resto dei record in arrivo con maggiore accuratezza.
Se è necessario estrarre sia immagini che caratteri dall'immagine sorgente.

Utilizzare l'estrazione tramite prompt dei campi:

Se il formato e l'orientamento dell'immagine sorgente cambiano continuamente per ogni caricamento.
Se l'immagine sorgente presenta una gamma di formati di scrittura, incluse note scritte a mano.
Se ha molte esigenze di estrazione estemporanee.

Limiti e limitazioni: un riepilogo

Limitazioni del metodo di estrazione basato su modello:

Nell'ambito dei metodi di addestramento per l'estrazione ICR, Zia può riconoscere volti umani, ma non prodotti, oggetti o animali.
L'estrazione basata su modello funziona solo con immagini con orientamento di tipo scheda.
I valori estratti dalle immagini possono essere associati solo ai campi nel layout specificato. Al momento non è possibile associare immagini con valori di sotto-moduli.

Limitazioni del prompt dei campi zero-shot:

L'attuale prompt dei campi zero-shot non è in grado di acquisire immagini.
L'estrazione di dati da una tabella e il loro salvataggio in un sotto-modulo nel layout non è possibile.

Punti da ricordare

È necessario creare regole ICR per iniziare a creare record.
È possibile creare fino a tre regole per un'organizzazione.
Un modulo può avere una sola regola.
È possibile caricare fino a due immagini per layout di modulo.
In qualsiasi momento, è possibile modificare, aggiornare o eliminare la regola.
Per un'associazione accurata, nel caso del metodo di estrazione basato su modello, si raccomanda di includere l'intera area contenente i caratteri di destinazione senza tagliare gli angoli.
È possibile ingrandire e ridurre l'immagine per migliorare la leggibilità durante l'associazione.