paint-brush
Como Gen AI e AWS Bedrock turbinaram a extração de dados imobiliários por@indium
480 leituras
480 leituras

Como Gen AI e AWS Bedrock turbinaram a extração de dados imobiliários

por Indium5m2024/06/25
Read on Terminal Reader

Muito longo; Para ler

O setor imobiliário e de capital privado são um mundo onde os dados são reis, mas extrair esses dados pode ser uma tarefa árdua. Um cliente precisava de um cavaleiro de armadura brilhante para extração de dados, uma solução que pudesse automatizar o processo, melhorar a eficiência e libertá-lo das amarras da entrada manual de dados. Veja como eles enfrentaram o desafio.
featured image - Como Gen AI e AWS Bedrock turbinaram a extração de dados imobiliários
Indium HackerNoon profile picture

Olá, aficionados por dados! Hoje, estamos mergulhando no mundo imobiliário e de private equity, onde os dados são reis (ou talvez rainhas, dependendo do seu mercado). Mas extrair esses dados? Isso pode ser uma dor real. Basta perguntar ao nosso cliente, um fornecedor de soluções digitais de middle office que estava se afogando em um mar de papelada.


Deixe-me dizer, extrair manualmente dados de relatórios de avaliação de ativos, avaliações imobiliárias e registros de cobrança de aluguéis é suficiente para fazer qualquer um chorar. É lento, tedioso e sujeito a erros. Nosso cliente estava enfrentando uma ameaça tripla:


  • Extração manual de dados: Extrair dados manualmente é como lavar pratos – interminável e, francamente, devastador.
  • Complexidade dos documentos: esses documentos não eram a lista de compras da sua vizinhança. Eram feras desestruturadas e prolixas, com tabelas que fariam um matemático chorar.
  • Consumo de tempo: a manipulação manual desses dados era um buraco negro, consumindo tempo e recursos preciosos.


Tinha que haver uma maneira melhor: Gen AI.

A busca pela eficiência: por que precisávamos de automação


Nosso cliente precisava de um cavaleiro de armadura brilhante para extração de dados, uma solução que pudesse automatizar o processo, melhorar a eficiência e libertá-lo das amarras da entrada manual de dados. Aqui está o que eles estavam procurando:


  1. Eficiência – Reduzindo a carga de trabalho manual associada à extração de dados.
  2. Precisão – Extração de dados com precisão semelhante à de um laser para garantir informações confiáveis.
  3. Flexibilidade de Documentos – Lidando com diversos tipos de documentos, desde caos não estruturado até tabelas limpas e organizadas.

Construindo o Dream Team: Gen AI e AWS Bedrock


Sabíamos que uma abordagem única não seria suficiente. Então, montamos um time dos sonhos de tecnologias, com geração AI e AWS Bedrock liderando o ataque. Veja como enfrentamos o desafio:


  1. Construindo uma fortaleza: o poder da AWS – Aproveitamos o poderoso ambiente de nuvem AWS, utilizando os serviços AWS Bedrock para construir um back-end robusto. Essa fortaleza forneceu uma base segura e escalonável para nossas soluções desenvolvidas sob medida.
  2. Análise de documentos com Gen AI: o cérebro da operação – Desenvolvido pela AWS Bedrock, criamos um analisador de documentos personalizado. Essa ferramenta inteligente era como Sherlock Holmes para documentos, analisando sua estrutura e conteúdo para identificar e extrair campos de dados relevantes com extrema precisão.
  3. Pipelines especializados: adaptados para cada documento – Não acreditávamos em uma abordagem “tamanho único”. Em vez disso, projetamos pipelines especializados de extração de dados para cada tipo de documento, garantindo desempenho e precisão ideais para todos os formatos, desde relatórios de avaliação de ativos até avaliações imobiliárias.
  4. Modelos e ferramentas avançadas de IA: The Superpower Squad – Reunimos uma liga de modelos e ferramentas de IA extraordinários para alcançar os melhores resultados possíveis. O OpenSearch forneceu uma plataforma de pesquisa com flexibilidade e escalabilidade, enquanto o FAISS facilitou a recuperação eficiente de documentos semelhantes. Além disso, aproveitamos o poder de modelos básicos como Titan e Cohere, juntamente com Retrieval-Augmented Generation (RAG) para levar o processo de extração ao próximo nível.
  5. Integração com documentos digitalizados: nenhum documento deixado para trás – Sabíamos que os documentos digitalizados eram uma realidade, por isso integramos o AWS Textract. Esta poderosa ferramenta extrai dados de documentos digitalizados com uma precisão impressionante, garantindo um processamento perfeito de todos os formatos de documentos.
  6. Qualidade dos dados: nossa principal prioridade – Manter a precisão dos dados era fundamental. Implementamos verificações rigorosas de qualidade de dados (DQ) nos dados extraídos, empregando mecanismos de filtragem para garantir resultados limpos e confiáveis. Isso garantiu que o cliente recebesse dados confiáveis, prontos para uso posterior.


Ao combinar esses elementos, criamos uma solução abrangente que atendeu às necessidades específicas do cliente para extração de dados eficiente e precisa de documentos complexos e variados.

Sucesso quantificável: os números não mentem

O impacto do nosso Solução com tecnologia Gen AI estava claro como o dia (e mensurável!). Veja como a Gen AI ajudou nosso cliente a obter melhorias significativas:


  • Precisão crescente: 87% em todos os níveis – Nosso cliente ansiava por precisão de dados e nós entregamos. Nossa solução alcançou uma impressionante taxa de precisão de 87% em todos os tipos de documentos. Isso significava que os dados extraídos eram confiáveis e estavam prontos para análise e uso adicionais, sem extensa verificação manual.
  • Redução drástica no esforço manual: de dias para horas – A natureza demorada da extração manual de dados era um grande gargalo para o cliente. Nossa solução simplificou o processo, resultando em uma redução impressionante de 700 vezes no esforço manual. Imagine tarefas que antes demoravam dias para serem concluídas, agora realizáveis em questão de horas. Pense nos recursos realocados e no potencial para aumento de produtividade! Isso é um multiplicador de tempo de 700x, pessoal. Isso é como economizar semanas em um projeto, liberando sua equipe para se concentrar em tarefas de nível superior, análise estratégica ou até mesmo buscar aquele equilíbrio indescritível entre vida pessoal e profissional.
  • Economia significativa de custos: uma vantagem quádrupla – Os ganhos de eficiência proporcionados pela automação também geraram economias substanciais de custos para o cliente. Ao eliminar a necessidade de extração manual de dados, o cliente obteve uma redução de custos de 4x. Estas poupanças podem ser reinvestidas em novas iniciativas de crescimento, expandindo as suas ofertas de serviços ou até mesmo encantando os seus clientes com taxas mais baixas.

Além dos números: o efeito cascata da eficiência

Os benefícios da nossa solução vão muito além dos números. Aqui está o que nosso cliente experimentou:


  • Melhor tomada de decisões: com dados precisos e oportunos ao seu alcance, o cliente pode tomar decisões baseadas em dados com confiança.
  • Atendimento ao cliente aprimorado: Tempos de resposta mais rápidos e melhor qualidade dos dados traduzidos em um melhor serviço para seus clientes.
  • Maior escalabilidade: A automação liberou recursos, permitindo ao cliente escalar suas operações e lidar facilmente com um volume maior de dados.

Conclusão: Gen AI e AWS Bedrock – Sua equipe dos sonhos de extração de dados

Este projeto é um testemunho para a Geração AI e o poder do AWS Bedrock . Ao combinar essas tecnologias inovadoras, conseguimos transformar um processo tedioso e sujeito a erros em uma operação simplificada e eficiente.


Se você está se afogando em um mar de documentos e lutando para extrair dados, não se desespere! Podemos ajudá-lo a construir seu próprio time dos sonhos. A experiência da Indium em Gen AI e nossa compreensão dos desafios do seu setor podem ajudá-lo a liberar o potencial dos seus dados e alcançar resultados notáveis.


Então, você está pronto para dizer adeus à extração manual de dados e dar as boas-vindas a um mundo de eficiência e produtividade? Vamos conversar! Estamos aqui para ajudá-lo a transformar seus problemas de extração de dados em algo do passado.