Brasil

Big Data e Inteligência Analítica

pt-br

Bases de Dados

Bases de Dados é uma disciplina que estuda a organização, armazenamento e recuperação de informações em sistemas computacionais. Durante as aulas, os alunos aprendem sobre modelos de dados, linguagens de consulta, técnicas de indexação e estratégias de otimização de consultas. A disciplina é importante para profissionais da área de tecnologia da informação, que precisam projetar, implementar e gerenciar sistemas de banco de dados em empresas e organizações. O conhecimento em Bases de Dados é fundamental para desenvolvedores de software, administradores de banco de dados e outros profissionais da área, que devem garantir a integridade, segurança e disponibilidade dos dados armazenados.

Exam

Text

AR avaliacao regular - Frameworks de Big Data

RESTRICTED

Exatas

Ciência da Computação

Graduate

Pontifícia Universidade Católica do Paraná

Lucas Wenceslau

Outros

Other

Com o crescente aumento na produção de dados, o termo Big Data passou a ser utilizado com maior frequência, tanto por profissionais da área de Tecn...

Com o crescente aumento na produção de dados, o termo Big Data passou a ser utilizado com maior frequência, tanto por profissionais da área de Tecnologia da Informação quanto por empresários que buscam obter maior lucratividade e auxílio na tomada de decisão através do processamento desses dados. Entretanto, como a quantidade de dados gerados é grande, as formas já utilizadas para o seu processamento já não são mais eficazes, de forma a ser necessário o desenvolvimento de frameworks de Big Data, pelos profissionais de TI, ganhando destaque, principalmente, os frameworks de código aberto.
Nesse sentido, sobre os métodos e as interfaces, julgue os itens a seguir.
I. A classe Partitioner tem a função de controlar a divisão das chaves que estão na saída do mapeamento intermediário.
II. A classe Reducer tem a função de classificar, dividir (reduzir) e ordenar os dados que constam na saída função OutputFormat ( ).
III. A classe Job é a representação do trabalho realizado pelo MapReduce, ou seja, a interface do Job possibilita ao usuário descrever o trabalho do MapReduce.
A) I, II e III.
B) II e III, apenas.
C) Alternativa Correta I e III, apenas.
D) II, apenas.
E) I, apenas.

General Studies

Desafios para Aprender: Compartilhando desafios para auxiliar no aprendizado de diversas disciplinas do ensino superior, médio e pós-graduação. Vamos juntos superar esses desafios e aprimorar nossos conhecimentos!

Desafios para Aprender

Com a manipulação de grandes volumes de dados, surgem diferentes desafios. Para enfrentá-los, é necessário saber como interpretar esses dados e com...

Com a manipulação de grandes volumes de dados, surgem diferentes desafios. Para enfrentá-los, é necessário saber como interpretar esses dados e como usar os resultados para tomada de decisão. Existem diferentes métodos que auxiliam nesses aspectos. Com a descoberta do conhecimento do ecossistema de big data, entre os possíveis recursos, ganha destaque o uso da visualização de dados.
Dado o exposto, considere a situação a seguir.
I. Utilizando o Google Trends, Hugo, além de visualizar os resultados, pode verificar consultas relacionadas.
II. Hugo pode utilizar, no Google Trends, o coeficiente de correlação de Pearson para apresentar a correlação entre dois termos de busca.
III. Com os dados apresentados no Google Trends, Hugo pode verificar tendências, ajudando na tomada de decisão da sua empresa.
A) Gabarito da questão I e III, apenas.
B) Marcada pelo aluno I, II e III.
C) II, apenas.
D) I e II, apenas.
E) III, apenas.

Para auxiliar na tomada de decisão, as empresas têm utilizado cada vez mais as informações geradas por dados que são coletados e processados por fr...

Para auxiliar na tomada de decisão, as empresas têm utilizado cada vez mais as informações geradas por dados que são coletados e processados por frameworks. Os frameworks que realizam o tratamento dos dados de forma contínua e em tempo real têm sido demandados, em especial, por empresas de streaming, uma vez que eles tornam possível sugerir recomendações aos usuários do serviço.
Nesse contexto, considere que Pedro, profissional de TI, foi contratado para implementar uma tecnologia de stream de Big Data em uma empresa. Diante das opções que ele apresentou ao empresário, ele foi questionado sobre as arquiteturas dos frameworks Apache Flink, Apache Storm e do Apache Spark Stream.
I. O motor do framework Spark Streaming foi desenvolvido considerando a ideia de tratamento de stream de dados nativo, ou próprio para streaming.
II. Os frameworks Apache Flink e o Apache Storm são fundamentados em uma arquitetura diferente, se comparada à arquitetura do framework Spark Streaming.
III. Os frameworks Apache Flink e o Apache Storm foram implementados sem referência nenhuma, ou seja, desenvolvidos do zero, com a finalidade de trabalhar com um motor de stream de dados com microlotes.
A) I, apenas.
B) II e III, apenas.
C) I, II e III.
D) Alternativa Correta II, apenas.
E) I e III, apenas.

Nos últimos anos, a expansão da internet e a facilidade de acesso a dispositivos móveis ocasionaram maior troca de informações, através de e-mails,...

Nos últimos anos, a expansão da internet e a facilidade de acesso a dispositivos móveis ocasionaram maior troca de informações, através de e-mails, redes sociais, entre outros, o que provocou um considerável aumento na produção de dados. Com isso, o particionamento de dados passou a ser utilizado como uma forma de auxílio para o gerenciamento dos dados armazenados nos servidores, de forma que o particionamento de dados é a forma de fragmentar ou particionar os dados em diferentes meios físicos.
Diante disso, considere a situação apresentada a seguir.
I. No conceito de volume, Ludy se motivou porque o volume é simplesmente a quantidade de dados incluída nas informações que estão sendo analisadas.
II. Quanto à velocidade, Ludy foi motivada porque esta se refere à capacidade de obter as informações (ou dados) de maneira rápida para que seja realizada a análise.
III. No que se refere ao conceito de variedade, Ludy se motivou porque a variedade é a quantidade de fontes diferentes das quais as informações (ou dados) podem ser originadas (redes sociais, aplicativos, sistemas sensoriais e outras).
A) II, apenas.
B) Alternativa Correta I, II e III.
C) II e III, apenas.
D) I, apenas.
E) I e III, apenas.

MapReduce é uma tarefa ou método que utiliza dois métodos para realizar o processamento de blocos de código. A função chamada map() executa uma fil...

MapReduce é uma tarefa ou método que utiliza dois métodos para realizar o processamento de blocos de código. A função chamada map() executa uma filtragem e classificação de dados. Essa etapa tem a responsabilidade de realizar essita de uma solução para processar um grande conjunto de dados, tendo optado por utilizar o MapReduce.
Considerando o MapReduce e a situação apresentada, avalie as asserções a seguir e a relação proposta entre elas.
I. Lubanco pode utilizar o paradigma de programação MapReduce, pois esse paradigma possibilita que o processamento seja realizado de maneira eficiente através das funções Map e Reduce em processamento distribuído e com paralelismo, possibilitando inúmeras vantagens.
II. O MapReduce permite o processamento de grandes quantidades de dados, distribuindo os dados em vários servidores organizados por uma máquina mestre e, também, o processamento das tarefas de forma paralela, gerenciando todo o processo e possibilitando, inclusive, a recuperação de eventuais falhas.
A) A asserção I é uma proposição verdadeira, e a II é uma proposição falsa.
B) A asserção I é uma proposição falsa, e a II é uma proposição verdadeira.
C) Alternativa Correta As asserções I e II são proposições verdadeiras, e a II é uma justificativa da I.
D) As asserções I e II são proposições verdadeiras, mas a II não é uma justificativa da I.
E) As asserções I e II são proposições falsas.

O HDFS é um sistema de arquivos distribuídos e tem seus principais comandos baseados em um formato Portable Operating System Interface (Posix); ess...

O HDFS é um sistema de arquivos distribuídos e tem seus principais comandos baseados em um formato Portable Operating System Interface (Posix); esses comandos são compatíveis com o sistema Unix. Quem já usa o Linux com certeza tem facilidade para utilizar os comandos do HDFS.
Diante disso, considere o caso a seguir.
I. O gestor disse a Paulo que a criação de contas no Hadoop é parte crucial de qualquer sistema operacional, e que no HDFS é possível usar os comandos hadoop fs -mkdir /user/username e hadoop fs -chown username:username /user/username.
II. O primeiro comando cria um diretório, e o segundo faz com que o proprietário do diretório seja o próprio dono, ou seja, se o diretório for Carlos, o dono do diretório será Carlos, e não o criador que executa os comandos.
A) As asserções I e II são proposições verdadeiras, mas a II não é uma justificativa da I.
B) A asserção I é uma proposição verdadeira, e a II é uma proposição falsa.
C) A asserção I é uma proposição falsa, e a II é uma proposição verdadeira.
D) As asserções I e II são proposições falsas.
E) Alternativa Correta As asserções I e II são proposições verdadeiras, e a II é uma justificativa da I.

Dentre as atuais necessidades na área de desenvolvimento tecnológico, está o armazenamento de dados. O aumento na produção de dados fez com que nov...

Dentre as atuais necessidades na área de desenvolvimento tecnológico, está o armazenamento de dados. O aumento na produção de dados fez com que novas ferramentas de armazenamento fossem pensadas e criadas por profissionais a fim de facilitar o acesso às informações.
Considerando quais podem ser as vantagens do armazenamento em nuvem para Lucas, julgue os itens a seguir.
I. Se Lucas precisar realizar a recuperação de desastres no armazenamento em nuvem, ele se dará com sistema automático.
II. Lucas poderá arcar com o custo do armazenamento em nuvem de forma fixa, ou seja, não haverá limite de consumo do espaço.
III. Lucas poderá receber suporte (instalação e manutenção) da empresa proprietária da nuvem e acesso a esse serviço de forma remota.
A) I, II e III.
B) III, apenas.
C) I e II, apenas.
D) II, apenas.
E) Alternativa Correta I e III, apenas.

Para o uso prático do HDFS, é necessário conhecer alguns conceitos e executar algumas configurações básicas. O armazenamento do HDFS sempre é feito...

Para o uso prático do HDFS, é necessário conhecer alguns conceitos e executar algumas configurações básicas. O armazenamento do HDFS sempre é feito em blocos.
Ao final de uma aula, Dalila resolveu perguntar ao professor sobre o tamanho dos blocos de HDFS. Ela queria saber se eles podiam ser comparados aos blocos dos clusters de sistemas não distribuídos.

Ao final de uma aula, Dalila resolveu perguntar ao professor sobre o tamanho dos blocos de HDFS. Ela queria saber se eles podiam ser comparados aos...

Ao final de uma aula, Dalila resolveu perguntar ao professor sobre o tamanho dos blocos de HDFS. Ela queria saber se eles podiam ser comparados aos blocos dos clusters de sistemas não distribuídos.
Tendo em vista qual pode ter sido a resposta do professor para Dalila, avalie as asserções a seguir e a relação proposta entre elas.
I. O professor disse a Dalila que o bloco HDFS inicia já 1.024 vezes maior do que os blocos de sistemas não distribuídos.
II. Os blocos HDFS podem partir de 64 MB, muito mais alto que os clusters de sistemas de arquivos não distribuídos, como NTFS e Ext4, que têm no máximo 64 kB.
A) As asserções I e II são proposições verdadeiras, mas a II não é uma justificativa da I.
B) As asserções I e II são proposições verdadeiras, e a II é uma justificativa da I.
C) A asserção I é uma proposição verdadeira, e a II é uma proposição falsa.
D) A asserção I é uma proposição falsa, e a II é uma proposição verdadeira.
E) As asserções I e II são proposições falsas.

Diariamente, milhares de bytes são produzidos em dados de diferentes fontes, tanto por pessoas como por empresas. Grande parte desses dados gerados...

Diariamente, milhares de bytes são produzidos em dados de diferentes fontes, tanto por pessoas como por empresas. Grande parte desses dados gerados será processada e servirá como base para auxiliar as empresas na tomada de decisão.
Acerca dos esclarecimentos do Joel ao seu colaborador, julgue os itens a seguir.
I. Joel exemplificou ao seu colaborador que um corpo do e-mail não é estrutura, ou seja, ele é um dado não estruturado.
II. Joel mencionou ao seu colaborador que os arquivos de textos, como relatórios e notas, também são considerados dados não estruturados.
III. Joel informou ao seu colaborador que as mídias digitais (áudios, fotos e vídeos) são dados não estruturados, porque o tipo de armazenamento das mídias digitais não permite que usuário visualize as informações desses dados antes de serem processados.
A) II e III, apenas.
B) I, II e III.
C) I, apenas.
D) I e II, apenas.
E) III, apenas.

Dados são parte da informação que, em conjunto, formam o conhecimento sobre determinado assunto. Logo, um dado sozinho pode não fazer muito sentido...

Dados são parte da informação que, em conjunto, formam o conhecimento sobre determinado assunto. Logo, um dado sozinho pode não fazer muito sentido, enquanto o conjunto de dados pode gerar uma informação.
Considerando que um consumidor é categorizado na categoria com menor distância de Manhattan, julgue os itens a seguir.
I. O consumidor A será categorizado na categoria X, pois a distância de Manhattan para essa categoria é 5.
II. O consumidor B será categorizado na categoria X, pois a distância de Manhattan para essa categoria é 6.
III. A distância de Manhattan do consumidor C para a categoria X é 6 e para a categoria Y é 4, dessa maneira, ele irá pertencer à categoria Y.
A) I, apenas.
B) I e III, apenas.
C) II e III, apenas.
D) I, II e III.
E) II, apenas.

MaterialAggregator/Subjects/Materials/Recent

MaterialAggregator/Subjects/Questions/New

AR avaliacao regular - Frameworks de Big Data

Conteudo restrito apenas para assinantes