paint-brush
Como tornar qualquer LLM mais preciso em apenas algumas linhas de códigopor@FrederikBussler
6,727 leituras
6,727 leituras

Como tornar qualquer LLM mais preciso em apenas algumas linhas de código

por Frederik Bussler5m2023/08/14
Read on Terminal Reader

Muito longo; Para ler

A revolução da IA mudou com o surgimento de Large Language Models (LLMs) como o ChatGPT, indicando uma vitória sobre a complexidade dos dados. Esses LLMs enfrentam desafios devido a enormes conjuntos de dados (até um petabyte) e à natureza complexa da linguagem humana. Ferramentas centradas em dados, como o Cleanlab, revolucionaram o tratamento de dados de IA, automatizando processos de melhoria de dados e democratizando avanços. A IA centrada em dados é essencial devido a erros de anotação (7-50%) em conjuntos de dados do mundo real, dificultando o treinamento. OpenAI e ferramentas como Cleanlab priorizam a qualidade dos dados, permitindo melhorias significativas na precisão do modelo. Uma demonstração do Python mostra como o Cleanlab detecta problemas de etiqueta, filtra dados e treina modelos novamente, resultando em um notável aumento de precisão de 63% para mais de 66%. Essa abordagem centrada em dados é promissora para futuros LLMs como o GPT-5.
featured image - Como tornar qualquer LLM mais preciso em apenas algumas linhas de código
Frederik Bussler HackerNoon profile picture
Frederik Bussler

Frederik Bussler

@FrederikBussler

Published author and writer.

Aprender mais
LEARN MORE ABOUT @FREDERIKBUSSLER'S
EXPERTISE AND PLACE ON THE INTERNET.
0-item
1-item
2-item

STORY’S CREDIBILITY

Guide

Guide

Walkthroughs, tutorials, guides, and tips. This story will teach you how to do something new or how to do something better.

Original Reporting

Original Reporting

This story contains new, firsthand information uncovered by the writer.

Vested Interest

Vested Interest

This writer has a vested interest be it monetary, business, or otherwise, with 1 or more of the products or companies mentioned within.

L O A D I N G
. . . comments & more!

About Author

Frederik Bussler HackerNoon profile picture
Frederik Bussler@FrederikBussler
Published author and writer.

Rótulos

Languages

ESTE ARTIGO FOI APRESENTADO EM...

Read on Terminal Reader
Read this story in a terminal
 Terminal
Read this story w/o Javascript
Read this story w/o Javascript
 Lite