Web Scraping em Servidores do Governo Brasileiro

Hackathon é um termo na língua inglesa para designar um desafio no estilo de uma ”maratona de ideias” onde participantes trabalham em equipes para resolver um problema real dentro da empresa de maneira rápida e eficiente.

Todas as empresas orientadas para o futuro estão focadas em inovação, mas inovação não é algo que simplesmente acontece. Esta precisa ser perseguida com muito foco e tendo as pessoas certas tomando decisões baseadas em diversas variáveis ao longo do caminho. As pessoas podem ser tanto stakeholders internos como externos, que pelo expertise e visão criativa, conseguem aproveitar o poder intelectual das pessoas em torno deles – mantendo canais de comunicação abertos para que todos possam participar e cocriar obtendo a máxima eficiência na gestão de ideias.

Hackathon é uma espécie de maratona que reúne pessoas com diferentes competências, criando rapidamente ideias e soluções para diferentes problemas e desafios.

Missão e Desafio:

O Hackathon da Aduana Web tem como missão compartilhar com a comunidade nosso expertise no desenvolvimento de aranhas de web scraping na linguagem Ruby on Rails e definir um desafio:

• Desenvolver uma aranha genérica para web scraping em  servidores do governo brasileiro, baseada em conexão SSL com certificados padrão ICP-Brasil. Essa aranha será disponibilizada na web sob a licença Free Software com propriedade intelectual da Aduana Web e livre para replicação para fins não comerciais.
• Categorias de Free Software GNU: ( https://www.gnu.org/philosophy/categories.html );
• Licenças Padrão GNU: ( https://www.gnu.org/licenses/license-list.html )

Objetivo:

Finalizar o dia com o código de uma aranha genérica para envio e consulta de dados em servidores do governo brasileiro. Se não for possível, no mínimo gostaríamos de extrair um modelo técnico dessa aranha.

*Esse pequeno projeto, uma vez desenvolvido, pode ser muito útil para movimentos e soluções livres de dados abertos governamentais.

Metodologia:

Dividir os integrantes em no mínimo 3 equipes a fim de dividir esforços e gerar um ambiente colaborativo / competitivo. A equipe vencedora será a que mais colaborar com as demais no propósito de chegarmos ao desenvolvimento almejado.

Ambiente:

Espaço de reuniões do Techmall, o objetivo é criar um ambiente colaborativo de comunicação aberta com música intuitiva ao fundo, disponibilidade de internet rápida, comida e recursos educacionais online;

Habilidades necessárias:

• Desenvolvimento Ruby on Rails (preferencial);
• Desenvolvimento Python (opcional);
• Experiência em Web Scraping (preferencial);
  
• Experiência em Web Scraping em servidores do Governo Brasileiro (opcional).

Avaliação: 

A avaliação será em caráter colaborativo, objetivando promover o desenvolvimento da solução desejada ou minimamente do modelo de tal solução.

As equipes serão avaliadas quanto a:

• 1 - Percentual da solução final produzido;
• 2 - Contribuição com os demais times;
• 3 - Pró-atividade e concentração nas tarefas.

Reconhecimento:

Ao fim do Hackathon todos os participantes terão seus mini-currículos exibidos na página do Hackathon no site da Aduana Web e os vencedores serão marcados e reconhecidos em publicações nas mídias sociais da Aduana Web.

Agradecimento:

Todos os envolvidos receberão um brinde da Aduana Web como agradecimento, adesivos + canecas pros vencedores. Também serão publicados no blog da Aduana Web e nas mídias sociais um release de agradecimento geral.

Premiação:

A equipe vencedora vai ganhar um conjunto de carregadores de celular portáteis para cada um dos integrantes. Além disso os 2 participantes de maior destaque das demais equipes também vão ganhar o prêmio.

Horário: O Hackathon irá ser realizado entre 8h da manhã e 23h da noite.

Programação:

08:00 - 08:30 | Credenciamento e welcome coffee;

08:30 - 09:15 | Abertura –  Apresentação do problema e configurações dos acessos;

09:15 - 09:30 | Início do Hacking – Organização das equipes;

09:30 - 10:00 | Brainstorming de soluções;

10:00 - 11:30 | 1° Batch de ataque dos problemas;

11:30 - 12:00 | 1° Organização do desenvolvimento e descarte dos caminhos improdutivos;

12:00 - 13:00 | Almoço;

13:00 - 13:15 | 2° Ataque – Organização dos caminhos a seguir;

13:15 - 16:20 | 2° Batch de ataque dos problemas;

16:20 - 16:50 | Pausa para o café

16:50 - 17:15 | 2° Organização do desenvolvimento e descarte dos caminhos improdutivos

17:15 - 17:30 | 3°Ataque – Organização dos caminhos a seguir

17:30 - 22:00 | 3° e último batch de ataque dos problemas

22:00 - 22:30 | Jantar

22:30 - 23:00 |  Encerramento – Declaração dos vencedores

Apoio: BMG UpTech, TechMall

*Convidamos todos os participantes a se cadastrar na base de currículos da Aduana Web. Quem sabe no futuro podemos vir a trabalhar juntos?