TL;DR
- A detecção de duplicados com IA usa a IA para avaliar registros, pontuar pares ou desenhar a lógica de correspondência.
- Onde a IA roda decide se os resultados se repetem e por onde passam os dados do CRM.
- Uma boa ferramenta de correspondência com IA mostra porque é que os registros corresponderam e mantém os grupos inteiros juntos.
- A IA encontra candidatos, mas são as pessoas que decidem o que é um duplicado e o que sobrevive.
- O Dedupely Intelligence é uma correspondência com IA que roda como código fixo na infraestrutura do Dedupely.
Cada vez mais ferramentas de deduplicação descrevem a correspondência como baseada em IA. O rótulo parece uma só coisa, mas abrange designs muito diferentes.
Numa ferramenta, um modelo de linguagem lê os seus registros sempre que procura duplicados. Noutra, um modelo aprendeu como são os duplicados e pontua cada par.
Num terceiro, a IA ajudou a escrever a lógica de correspondência, e o aplicativo roda código simples. Cada desenho se comporta de forma diferente com os seus dados, resultados e mesclagens.
Neste artigo, vai ver como funciona cada design e o que significa para a consistência, a privacidade e o controle. Vai ter também uma lista de perguntas a fazer antes de confiar o seu CRM a uma ferramenta de deduplicação com IA.
Porque se usa IA na detecção de duplicados
A correspondência clássica compara campos com regras que define, como email exato ou nome semelhante. Funciona bem quando sabe que campos combinar e com que rigor. O nosso artigo explicativo sobre como funciona a correspondência de duplicados aborda esses tipos de correspondência.
O difícil é conhecer as combinações. Os duplicados complexos só aparecem quando vários campos coincidem, e cada base de dados se sobrepõe de forma diferente. A IA é útil aí: consegue olhar para muitos padrões e encontrar combinações que uma pessoa não se lembraria de experimentar.
Três formas de a IA participar na correspondência de duplicados
1. Um modelo avalia os seus registros em tempo de execução
A ferramenta envia registros, ou pares de registros, para um modelo de linguagem e pergunta se são iguais. O modelo responde toda vez que a correspondência roda.
Isso lida bem com texto desorganizado, como apelidos ou nomes de empresas escritos de cinco jeitos. O custo é que um modelo de linguagem prevê respostas prováveis, então os mesmos registros podem receber uma resposta diferente em outra execução. Os dados do seu CRM também viajam para onde o modelo roda.
2. Um modelo treinado pontua cada par
Algumas ferramentas treinam um modelo com exemplos de duplicados e não duplicados. Em uso, dá a cada par uma pontuação, e os pares acima de um limiar tornam-se correspondências.
As pontuações costumam ser consistentes para o mesmo modelo. O modelo também pode mudar quando é retreinado, às vezes com base em decisões dos usuários. O que ele aprendeu pode ser difícil de explicar, então uma pontuação de 0,92 não diz quais campos determinaram a correspondência.
3. A IA desenha a lógica, e código fixo a roda
Aqui a IA trabalha antes, enquanto a lógica de correspondência é construída. Ela ajuda a encontrar as combinações de campos e comparações que pegam duplicados complexos. O que roda sobre os seus dados é código comum que dá sempre o mesmo resultado para os mesmos registros.
Assim os resultados são repetíveis e nenhum modelo se mete no caminho dos seus dados. A contrapartida é que a lógica só muda quando o fornecedor a melhora.
Os três modelos num relance
| O modelo decide em tempo de execução | Um modelo treinado pontua os pares | Lógica desenhada com IA, código fixo | |
|---|---|---|---|
| Mesma entrada, mesmo resultado | Sem garantia | Normalmente, até ser retreinado | Sim |
| Para onde vão os dados do CRM | Para onde o modelo roda | Depende de onde o modelo está alojado | Fica onde o código roda |
| Porque é que os registros corresponderam | Uma explicação em texto, se pedida | Uma pontuação, muitas vezes sem razões por campo | Os campos e comparações que coincidiram |
| Aprende com as suas decisões | Só através de prompts | Muitas vezes, se for retreinada com feedback | Não; as alterações vêm do fornecedor |
As ferramentas também podem misturar esses designs, então pergunte qual deles roda nos seus dados.
O que a IA não decide por si
Seja qual for o design, a IA encontra candidatos. Duas decisões continuam com a sua equipe.
A primeira é o que conta como duplicado. Isso depende do caso: duas filiais podem ser um cliente para uma empresa e dois para outra. Nenhum modelo sabe como o seu negócio vende e fatura, por isso alguém tem que confirmar ou rejeitar o que ele encontra.
A segunda é o que o registro mesclado mantém. Qual registro sobrevive, quem é o responsável por ele e qual e-mail vence são regras de negócio. Elas devem ser definidas e visualizadas antes de qualquer mesclagem, porque uma mesclagem altera o CRM em produção.
Perguntas a fazer a uma ferramenta de deduplicação com IA
Estas perguntas vão além do rótulo e mostram como uma ferramenta se comporta com os seus dados.
| Pergunta | Porque é importante |
|---|---|
| Onde a IA roda: ao construir a lógica, ou sobre os meus registros? | Decide se os resultados se repetem e se os dados saem da ferramenta |
| Os dados do meu CRM são enviados para um modelo de IA externo ou usados para o treinar? | Sua equipe de segurança vai perguntar, e muitos contratos limitam isso |
| Os mesmos registros dão sempre o mesmo resultado? | Não pode testar uma pesquisa que não consegue repetir |
| Posso ver porque é que dois registros corresponderam? | Quem revisa precisa dos campos que concordaram para decidir rápido |
| Mostra em conjunto grupos de três ou mais registros? | Os duplicados vêm muitas vezes em grupos, e os pares dividem a decisão |
| O que acontece quando rejeito uma correspondência? | Deve continuar rejeitada, e deve saber se isso altera o modelo |
| Quem decide que valores sobrevivem à mesclagem? | Suas próprias regras e uma prévia devem decidir o que o registro mesclado mantém |
| Pode mesclar automaticamente, e o que o trava? | Os limites de segurança importam mais quando a lógica de correspondência não é sua |
| Com que frequência procura duplicados novos? | Diz a você com que rapidez os novos registros são pegos |
Para uma comparação de assistentes de chat, automações e scripts, veja o nosso artigo sobre como as ferramentas de IA se comparam na desduplicação de CRM. Se a sua equipe de segurança estiver envolvida, o nosso artigo sobre o que as equipes de segurança perguntam sobre uma ferramenta de deduplicação trata o lado deles.
Como o Dedupely Intelligence usa IA para encontrar duplicados complexos
O Dedupely Intelligence é uma correspondência com IA: a IA desenha a lógica de correspondência, que roda como código determinístico na infraestrutura do Dedupely. Os dados do seu CRM nunca são enviados a modelos de IA externos, processados por eles nem usados para treiná-los.
As correspondências rejeitadas ficam rejeitadas e não a treinam. As análises rodam automaticamente, e, por segurança, você mesmo revisa e mescla as correspondências.
Pergunte onde a IA roda
"Com IA" diz que há IA envolvida em algum ponto. Onde ela roda diz como a ferramenta se comporta: se os resultados se repetem, para onde vão os seus dados e se você consegue ver por que os registros corresponderam.
Qualquer que seja o modelo escolhido, as decisões que mais importam continuam com você. Sua equipe decide o que é um duplicado, o que o registro mesclado mantém e quais correspondências são rejeitadas.
Perguntas frequentes
Como é que a IA encontra registros duplicados?
De uma de três formas. Um modelo de linguagem avalia os registros a cada execução, um modelo treinado pontua cada par, ou a IA desenha uma lógica que roda como código comum. Cada desenho difere em consistência, privacidade e facilidade para explicar uma correspondência.
A detecção de duplicados com IA é precisa?
Depende do design e dos seus dados. A lógica que roda como código fixo dá sempre o mesmo resultado, por isso você pode testá-la. Os modelos em tempo de execução podem responder de forma diferente entre execuções, por isso, seja qual for a ferramenta, teste-a com registros que você já conhece antes de mesclar.
A deduplicação com IA envia os dados do meu CRM para um modelo de IA?
Algumas ferramentas fazem e outras não. Se um modelo avalia seus registros em tempo de execução, seus dados vão para onde esse modelo roda. Se a IA só desenhou a lógica, os dados podem ficar onde o código roda, então pergunte diretamente ao fornecedor e peça a resposta por escrito.
A IA pode decidir que duplicados mesclar?
A IA pode encontrar duplicados prováveis, mas sua equipe deve decidir o que conta como duplicado e o que o registro mesclado mantém. São regras de negócio sobre responsáveis, estágios e campos-chave. Revise as correspondências duvidosas, rejeite as falsas e visualize a prévia das mesclagens antes que qualquer coisa mude no seu CRM.
Uma ferramenta de deduplicação com IA deve aprender com as minhas rejeições?
Depende do que pretende. Um modelo que aprende com o feedback pode mudar os resultados com o tempo, o que algumas equipes apreciam e outras acham difícil de testar. O mais importante é que uma correspondência rejeitada continue rejeitada e que saiba se as suas decisões mudam o modelo.
Ou cadastre-se com o Google
