Quando as primeiras ferrovias foram construídas no século XIX, os engenheiros colocaram trilhos com [larguras] variadas (https://railroad.lindahall.org/essays/rails-guage.html); trens e carruagens foram fabricados para se adequar ao seu conjunto local. Mais tarde, quando os proprietários quiseram conectar diferentes ferrovias, seus trens e trilhos se mostraram incompatíveis. A maioria dos países teve que padronizar suas ferrovias com grandes despesas.

Hoje, para quem está construindo a infraestrutura que conecta o mundo digital, a padronização é tão importante. Além dos recursos físicos, agora movemos as informações de um lugar para outro e, para fazer isso corretamente, precisamos que os dados de diferentes fontes sejam compilados de acordo com padrões consistentes.

Para conseguir isso, organizações e indivíduos em todo o mundo estão criando estruturas acordadas sobre como compilar dados. Pelo valor de face, é um trabalho simples, consertar o encanamento básico que permite que novos serviços e produtos digitais sejam criados. Mas fazer com que as pessoas concordem muitas vezes pode ser mais difícil do que alinhar a tecnologia.

• Para mais informações sobre o assunto, consulte nosso governo digital newsfeed.

Por que padrões?

O compartilhamento de dados entre organizações - públicas, privadas e acadêmicas - está no coração de a maioria dos trabalhos digitais. Mas muitas vezes os dados não são compatíveis. As informações em um conjunto de dados podem ser definidas de maneira diferente em outro. A maneira como os dados são organizados em um conjunto pode torná-los irreconhecíveis em outro sistema. Pode ser algo tão simples quanto a maneira como você escreve uma data.

Padrões são acordos documentados entre organizações digitais para definir e organizar dados da mesma maneira. Embora possam parecer obscuros para não especialistas, eles permitem que as informações cheguem de um lugar a outro. Sem padrões, os desenvolvedores precisam gastar seu tempo e recursos coletando e limpando dados, e não criando serviços.

Embora as maravilhas da IA e “the blockchain” capturem as manchetes, os padrões são as reformas de infraestrutura básicas que significam que os sistemas podem trabalhar juntos. Muitas vezes, o resultado não é particularmente chamativo.

Em 2014, Steve Bennett, um defensor dos dados abertos, escreveu um conjunto de padrões para permitir que os conselhos na Austrália abram seus dados. Eles foram adotados: eles agora são amplamente usados em todo o estado de Victoria para publicar informações do conselho e estão se espalhando para outros conselhos na Austrália. Mas, para Bennett, comunicar os benefícios de padrões eficazes não é simples.

“As pessoas procuram algum tipo de história de alto impacto e alto valor”, disse Bennett. “Eu acho que a realidade é que você tem muitos de muito baixo impacto. Há muitas organizações que usam \ [os dados ], como uma pequena empresa que está executando algumas simulações e só precisa saber onde estão os hidrantes. ”

Desvio padrão

Embora os benefícios dos padrões de dados sejam claros o suficiente, tanto o setor privado quanto o público costumam ignorá-los ou resistir a eles.

“Quando comecei a falar com as pessoas sobre a necessidade de padrões, na verdade encontrei uma quantidade surpreendente de ignorância entre os tecnólogos”, disse Greg Bloom, Diretor de Organização da Open Referral Initiative , um grupo que desenvolve maneiras de organizações digitais nos setores público e privado trabalharem juntos.

O que Bloom descobriu foi que muitos tecnólogos presumiram que cabia à maior e mais dominante organização em um campo definir os padrões. “\ [Muitos ] tendiam a insistir que os padrões não são possíveis, que a única maneira de ter um padrão é alguma organização ganhar o mercado e, em seguida, definir o padrão - temos visto repetidamente como isso o resultado é. ”

Se os líderes de mercado são os que definem os padrões, as empresas menores podem ficar de fora. Adaptar ou “limpar” os dados para que possam operar com outros sistemas é caro e demorado. Para pequenas empresas, ONGs ou organizações comunitárias, a falta de padrões justos e abertos pode colocar um trabalho potencialmente lucrativo além de suas atribuições.

Dumping de dados

A falta de padrões também prejudica aqueles que trabalham com dados do governo. Nos últimos anos, cada vez mais governos nacionais e locais se comprometeram a publicar dados em seus sites, ajudando na transparência e dando a empresas ou grupos comunitários a chance de trabalhar com isso.

Os benefícios são claros - as empresas podem criar serviços valiosos, por exemplo planejadores de viagens, que os órgãos públicos não têm a experiência ou tempo para. Mas isso não acontece se os governos publicam dados sem pensar se eles podem ser usados.

“As pessoas procuram algum tipo de história de alto impacto e alto valor - acho que a realidade é que você tem muitas histórias de muito baixo impacto"

“Sabemos muito bem que, se você tem um portal de dados aberto, muito poucas pessoas realmente usam os dados”, disse Jean-Noé Landry, diretor executivo da Open North, uma canadense sem fins lucrativos que ajuda o governo a trabalhar com dados abertos. “Há uma lacuna entre as promessas de dados abertos, que são baseadas em princípios e valores, e a realidade real - ser capaz de demonstrar o retorno do investimento.”

Definindo o padrão

Os padrões exigem consenso. Há um debate entre se os padrões devem ser definidos por uma organização ou abertos, permitindo que todas as organizações com aparência no jogo participem. Quando os padrões são abertos, todas as organizações podem acessá-los e entender o que precisam fazer para tornar seus dados e sistemas compatíveis entre si. Quando não são, podem bloquear as organizações.

Para empresas menores e órgãos governamentais sem recursos ou influência, a participação nas negociações pode ser difícil. Leigh Dodds, líder do programa de infraestrutura de dados do Open Data Institute (ODI), disse que isso significa que o processo precisa ser aberto.

“\ [Padrões abertos ] são padrões que não são apenas licenciados abertamente, mas são desenvolvidos de forma aberta - isso significa que todos os tipos de organizações podem participar do processo de desenvolvimento e, em seguida, ser capazes de implementar o padrão livre e facilmente”, disse Dodds.

A negociação aberta sobre padrões, em que todas as organizações podem participar, é um meio de garantir que pequenas organizações e desenvolvedores individuais não sejam excluídos. Com o guia de padrões abertos para dados, o ODI escreveu um documento vivo, ajudando as organizações a navegar pelos padrões e contribuir para suas diretrizes. Aconselha a pesquisa - descobrir quais padrões existem para que eles não sejam replicados desnecessariamente.

“Sabemos muito bem que, se você tiver um portal de dados aberto, muito poucas pessoas vão realmente usar os dados"

Freqüentemente, a criação de padrões funciona melhor por meio de um processo de refluxo de consulta e negociação. Com o Open Referral, o Bloom construiu uma comunidade de tecnólogos que trabalham juntos para definir padrões. As negociações são realizadas online e todos podem contribuir para um conjunto padrão de documentos. O grupo Open North de Landry trabalha de forma semelhante com os governos locais em Ontário para criar um conjunto de padrões de dados abertos em um esforço para ajudá-los a liberar dados mais úteis com os quais os tecnólogos possam trabalhar.

E o que sai no final, depois que os padrões são definidos e as pessoas podem trocar dados? Para Bennett, pode ser difícil saber. “Uma das coisas deprimentes sobre trabalhar nesta área é que você tem muito pouca visibilidade do que - se é que algo - as pessoas estão fazendo com os dados”, disse ele.

Definir padrões que todos possam ver e ajudar a moldar costuma ser um trabalho difícil, mas necessário. Às vezes, aqueles que possuem dados são os menos capazes de ver o valor potencial deles: encontrar maneiras de colocá-los nas mãos certas só aumentará e melhorará o trabalho que deles resulta. - Anoush Darabi

Esta peça disse anteriormente que os padrões de Steve Bennett são amplamente usados em todo o sul da Austrália. Foi alterado para refletir o fato de que se aplicam a todos os conselhos na Austrália, e a maioria da aceitação foi em Victoria.

(Crédito da imagem: Unsplash / Marcus Spiske)