33
O4 Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão O quarto paradigma: a ciência da análise de dados Bruno Ferrero 1 Gabriel Pato 1 1 Instituto de Matemática e Estatística Universidade de São Paulo 23 de Novembro de 2011 1 / 22

O quarto paradigma: a ciência da análise de dados · Dados e as ciências climáticos Dados e as ciências biológicas Conclusão 2/22. O 4 ParadigmaDados e as ciências climáticosDados

  • Upload
    vandang

  • View
    217

  • Download
    0

Embed Size (px)

Citation preview

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

O quarto paradigma: a ciência da análise de dados

Bruno Ferrero1 Gabriel Pato1

1Instituto de Matemática e Estatística

Universidade de São Paulo

23 de Novembro de 2011

1 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Roteiro

O 4◦ Paradigma

Dados e as ciências climáticos

Dados e as ciências biológicas

Conclusão

2 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

O quarto paradigma: e-Science

blog The Fourth Paradigm• ciência e quebra de paradigmas;

• teoricos;

• ciência empírica;

• simulações;

• e-Science;

3 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

O quarto paradigma: e-Science

blog The Fourth Paradigm• ciência e quebra de paradigmas;

• teoricos;

• ciência empírica;

• simulações;

• e-Science;

3 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

O quarto paradigma: e-Science

blog The Fourth Paradigm• ciência e quebra de paradigmas;

• teoricos;

• ciência empírica;

• simulações;

• e-Science;

3 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

O quarto paradigma: e-Science

blog The Fourth Paradigm• ciência e quebra de paradigmas;

• teoricos;

• ciência empírica;

• simulações;

• e-Science;

3 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

O quarto paradigma: e-Science

e-Science• uso intensivo de tecnicas computacionais;

• ex. novas tecnicas de visualização de dados;

• grande volume de dados ;

• grupos de pesquisadores (diversos coloaboradores);

• ferramenta X paradigma;

4 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Dados e o clima

• estudar o clima → analisar dado;

• duas fontes de dados:

• observacional;

• dados numéricos;• dado é caro!!;

5 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Dados climáticos

• estudar o clima → analisar dado;

• duas fontes de dados:

• observacional;

• dados numéricos;• dado climático observado é caro!!;• avanço da computação → mais dados numéricos;

6 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Dados climáticos

• estudar o clima → analisar dado;

• duas fontes de dados:

• observacional;

• dados numéricos;• dado climático observado é caro!!;• avanço da computação → mais dados numéricos;

6 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Dados climáticos

• estudar o clima → analisar dado;

• duas fontes de dados:

• observacional;

• dados numéricos;• dado climático observado é caro!!;• avanço da computação → mais dados numéricos;

6 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Dados climáticos

• estudar o clima → analisar dado;

• duas fontes de dados:

• observacional;

• dados numéricos;• dado climático observado é caro!!;• avanço da computação → mais dados numéricos;

6 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Simulação numérica do clima

• reproduzir a dinâmica do clima por meio de modelosmatemáticos;

• alto poder de processamento;• alta capacidade de armazenamento;• super computadores, ex. Earth Simulator ;• mais processamento → modelos mais complexos → simulação

mais próxima da realidade;

7 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Simulação numérica do climagera um enorme volume de dados

8 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

• 110 variáveis climáticas;• 360 x 180 x 30 resolução espacial (x , y , z);• 6 horas frequência temporal

Simulando um perído de 100 anos:

110× (4× 365× 100)× (360× 180× 30) = Muitodado!!

9 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

• 110 variáveis climáticas;• 360 x 180 x 30 resolução espacial (x , y , z);• 6 horas frequência temporal

Simulando um perído de 100 anos:

110× (4× 365× 100)× (360× 180× 30) = Muitodado!!

9 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

• 110 variáveis climáticas;• 360 x 180 x 30 resolução espacial (x , y , z);• 6 horas frequência temporal

Simulando um perído de 100 anos:

110× (4× 365× 100)× (360× 180× 30) = Muitodado!!

9 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

• 110 variáveis climáticas;• 360 x 180 x 30 resolução espacial (x , y , z);• 6 horas frequência temporal

Simulando um perído de 100 anos:

110× (4× 365× 100)× (360× 180× 30) = Muitodado!!

9 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

• 110 variáveis climáticas;• 360 x 180 x 30 resolução espacial (x , y , z);• 6 horas frequência temporal

Simulando um perído de 100 anos:

110× (4× 365× 100)× (360× 180× 30) = Muitodado!!

9 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Organização de dados

Características• portabilidade;

• auto descritivo;

• padronização;

10 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

netCDF

• software livre• auto descritivo;• portabilidade• binário com um cabeçalho ASCII;• convenção;• gridded data• trabalha com múltiplas dimensões, (x , y , z , time);

11 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Gridded data

12 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Exemplo

13 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Exemplo

14 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Painel Intergovernamental para as Mundanças

Climáticas - IPCC

• cenários de desenvolvimento para fazer projeções climáticas;• uso intensivo de modelos climáticos;• milhares de pesquisadores em todo o mundo;• avaliação colaborativa das simulações;

15 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Painel Intergovernamental para as Mundanças

Climáticas - IPCC

• cenários de desenvolvimento para fazer projeções climáticas;• uso intensivo de modelos climáticos;• milhares de pesquisadores em todo o mundo;• avaliação colaborativa das simulações;

15 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Dados e as ciências biológicas

...• Genoma;

• Proteoma;

• Metaboloma;

16 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Genoma e Proteoma

Tipos de dados gerados• sequência de nucleotídeos;

• sequência de aminoácidos;

• dobramento de proteínas;

17 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Genoma

• Sequenciamento genético;

• sequenciadores:

• Pyrosequencing → 40 milhões de pares de bases por hora;

• banco de dados:

• GenBank

• necessidade de tratamento/análise;

18 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

GenBank

Características• criação: 1982

• acesso livre

• atualmente, mais de 140 milhões de sequências

19 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Formatos de arquivos• ASN.1• GenBank• outros ...

20 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Conclusões• importância da organização de dados;

• ambiente de compartilhameno;

• levando a um sistema de produção colaborativa.

21 / 22

O 4◦ Paradigma Dados e as ciências climáticos Dados e as ciências biológicas Conclusão

Obrigado!

22 / 22