Airton Lira junior articles - 22 total
Feature Engineering para Embeddings com SparkML e MLFlow no Databricks Experiments
Hoje resolvi relembrar alguns conceitos de machine learning e entre eles a parte de vetorização de...
AI - DBRX - Databricks - Documentando automaticamente suas tabelas e colunas do Unity Catalog
Fala galera de Data, espero que todos estejam bem e acompanhando essa nova era da tecnologia que...
Datavault com minIO, Delta e Spark no jupyter notebook
E aí, pessoal! Estou super animado para compartilhar minha experiência construindo uma arquitetura...
Automatizando a Qualidade de Dados com DQX: Performance e praticidade
Introdução ao DQX No cenário atual, onde os dados são frequentemente comparados ao "novo...
Criando multi-agents AI de forma simples
Opa, pessoal! Espero que todos estejam bem. Estou iniciando aqui uma série de artigos que...
Como passar na certificação AI Practitioner - AWS
Se você chegou até aqui, é porque tem um objetivo claro: dominar o mundo da Inteligência Artificial...
Ganhe melhores respostas das IA - Prompt Engineer - Contemplative
O conceito de Contemplative Large Language Models (LLMs) ganhou atenção recentemente, particularmente...
Auditoria massiva com Lineage Tables do UC no Databricks
Explorando as Lineage Tables do Unity Catalog no Databricks 🚀 As Lineage Tables do Unity...
Entendendo e aplicando estratégias de tunning Apache Spark
Motivadores para ler esse artigo. Experiência própria e vivenciada em momentos de caos e...
Redis + Redundância com Sentinel + Docker
Redis: Configuração, Manipulação e Alta Disponibilidade com Sentinel Neste artigo, vamos...
Métricas para algorítimos de regressão
Métricas de Erro para Algoritmos de Regressão Quando elaboramos um algorítimo de regressão...
Processando 20 milhões de registros em menos de 5 segundos com Apache Hive.
Iniciando com Hadoop e Apache Hive: Arquitetura, Configuração e Otimização Neste artigo...
Utilizando o pattern Heartbeats em Golang
Implementando Heartbeats em Go para Monitoramento de Aplicações Durante minhas aventuras...
![[API Databricks como serviço interno] dbutils — notebook.run, widgets.getArgument, widgets.text e notebook_params](https://media2.dev.to/dynamic/image/width=1000,height=420,fit=cover,gravity=auto,format=auto/https%3A%2F%2Fdev-to-uploads.s3.amazonaws.com%2Fuploads%2Farticles%2Fbu4j4cwtv13zia6kqu37.jpg)
[API Databricks como serviço interno] dbutils — notebook.run, widgets.getArgument, widgets.text e notebook_params
Reduzindo Custos com Automação de Processos no Databricks Tive uma necessidade em um...
Implementando uma Lambda com GitLab CI/CD e Terraform para Integração SFTP, S3 e Databricks em Go
Reduzindo Custos com Automação de Processos no Databricks Tive uma necessidade em um...
Duckdb — O novo banco de dados dos Big Data
DuckDB: O Novo Favorito para Análise de Dados DuckDB é um mecanismo de análise SQL que...
Criando um LLM do zero com Transformers
Introdução 🌟 Os Modelos de Linguagem de Grande Escala (LLMs) como GPT revolucionaram a...
Langchain — RAG — Retrieval Augmented Generation
RAG + LangChain: Potencializando LLMs com Seus Próprios Dados 🚀 O que vamos...
Golang com Opentelemetry, prometheus, Grafana tempo OSS e Grafana padrão
📋 Descrição Este projeto é uma aplicação completa de monitoramento e rastreamento distribuído...
Desvendando o Atlas: Gerencie Seus Esquemas de Banco de Dados com Estilo🚀
Fala, pessoal! Se você já se perdeu no labirinto de migrações de banco de dados ou ficou com aquele...
Criando um Service Principal para acesso ao SQL Warehouses Databricks via DBeaver
Neste artigo vou ensinar como se conectar a um cluster serverless do SQL Warehouse do Databricks...
Apache Nifi & Registry com MinIO
Neste artigo vou trazer um cenário de ingestão de dados e inserção de multiplos arquivos no minIO...