Compartilhando Módulos Python em Notebooks Databricks

Arquitetura de Namespaces Corporativos no Databricks: Disponibilizando Códigos Internos para Toda a Equipe

À medida que os times de engenharia e ciência de dados crescem dentro de uma organização, surge um desafio comum: como compartilhar funções utilitárias e regras de negócio comuns entre múltiplos notebooks no Databricks?

Copiar e colar funções no topo de cada notebook cria um pesadelo de manutenção. Modificar configurações do cluster nem sempre é viável devido a restrições de governança e segurança. 

Neste artigo, apresentamos uma solução arquitetural baseada em namespaces e scripts de inicialização silenciosos para centralizar e disponibilizar ferramentas internas para todos os funcionários, utilizando um módulo de formatação brasileira ('ptbr') como caso de uso.

Formatação pt-BR Elegante em Python

Formatação Regional Elegante em Python: Interceptando f-strings com o método __format__

Exibir métricas financeiras ou volumes de dados no padrão brasileiro (pt-BR) - com pontos separando os milhares e vírgula nos decimais (1.234.567,89) - é um requisito mandatório em quase todos os relatórios corporativos no Brasil.

No entanto, o que deveria ser uma tarefa simples de exibição pode se transformar em um código verboso ou em erros inesperados dependendo do ambiente em que o código roda.

Neste artigo, discutiremos as limitações das abordagens tradicionais e apresentaremos uma solução elegante usando recursos nativos avançados do Python para resolver o problema com zero verbosidade.

Só existe zero, um e infinito

Tenho costume de guardar algumas ideias valiosas que fui aprendendo na vida em frases curtas e memoráveis, ao menos para mim.

Uma das ideias que guardo em uma frase desse tipo é:

> "Só existe zero, um e infinito."

A ideia escondida nesta "minha" frase é: As coisas podem acontecer nunca, pode acontecer uma vez, ou podem acontecer infinitas vezes. Se acontecerem duas vezes, a terceira vez e daí em diante, até o infinito, são garantidas.