Perguntas com a tag [hadoop]
Utilize esta tag quando a pergunta envolver computação distribuída(processamento, consultas, ingestão de dados) utilizando o ecossistema Hadoop.
14
perguntas
0
votos
0
respostas
45
visitas
SQL - Managed Table vs External Table
Trago uma questão de SQL menos técnica.
Eu uso a ferramenta Hive, do Hadoop, para manipular os dados com SQL. E gostaria de saber uma situação real em que devo aplicar uma managed table e uma ...
0
votos
1
resposta
117
visitas
Convert char para data - Hive
Preciso concatenar duas colunas que são char para transformar em data, mas com o código abaixo a parte do horário fica zerada.
As duas colunas possuem informações e não estão nulas ou em branco.
CAST(...
1
voto
1
resposta
246
visitas
Seek Time vs Transfer Rate
Estava lendo um pouco a respeito da ferramenta Hadoop para big data e me deparei com os termos Seek Time e Transfer Rate. Encontrei definições do tipo Seek Time é o delay para encontrar um arquivo/...
-1
votos
1
resposta
55
visitas
O que exatamente é o HDFS
Bom dia,
Estou estudando sobre Hadoop e uma dúvida me surgiu, por exemplo se fala muito do HDFS (Hadoop Distributed File System), que seria o armazenador de arquivos do Hadoop, minha dúvida é a ...
-4
votos
1
resposta
184
visitas
Com quais bancos de dados o Apache Atlas é compatível?
O apache Atlas tem compatibilidade com quais bancos de dados noSQL e SQL
estou fazendo um trabalho, e não consegui achar nada sobre
1
voto
2
respostas
138
visitas
Comportamentos diferentes entre beeline e hive-e
Na execução de comando usando a conexão via beeline sempre funciona, porém com o hive-e não funciona.
Assim funciona:
beeline -u jdbc:hive2://aaats879454co.sistema.br:10000/sistema tez.queue.name=...
5
votos
2
respostas
5mil
visitas
Hadoop é um Banco de dados? O que é Hadoop?
Afinal, o que é Hadoop? Hadoop é um banco de dados? Já ouvi muitas vezes "aquela empresa usa o banco de dados Hadoop". Mas quando comecei a estudar Big Data vi que na verdade as coisas não eram bem ...
0
votos
1
resposta
77
visitas
Como adiciono uma primary no hive versão 0.14.0.2.2.0.0-2041?
Como adiciono uma primary no hive versão 0.14.0.2.2.0.0-2041 ?
Tentativa
CREATE TABLE simple_rule (
simple_rule_id int(10) unsigned default '0' not null auto_increment,
...
0
votos
2
respostas
38
visitas
Criando um classe customizada do tipo WritableComparator
Estou criando uma aplicação para processar vídeo de maneira distribuída no hadoop utilizando o paradigma map-reduce. Eu tenho vários vídeos armazenados no cluster e desejo a partir deles criar um ...
0
votos
1
resposta
112
visitas
Erro ORA-01843 ao importar tabela no Sqoop
Estou enfrentando um erro do qual não consigo entender a origem.
Anteriormente eu havia importado uma tabela com o mesmo formato de dados, com 54 milhões de linhas para o HDFS do meu cluster Hadoop.
...
1
voto
1
resposta
157
visitas
Windows 10 , Spark error (bin/bin) não encontra arquivo winutils.exe
Instalei o Spark e o Hadoop no Windows 10, e estou com um erro no caminho do arquivo winutils.exe. Já coloquei na pasta adequada, já defini a variável de ambiente HADOOP_HOME como C:\hadoop\bin, ...
1
voto
1
resposta
178
visitas
Erro no Hadoop ao procurar classe Java
Estou tendo problemas para configurar o ambiente Hadoop.
Estou fazendo uma instalação do zero em uma máquina CentOS 6.7.
Ao tentar executar qualquer comando hadoop, como por exemplo:
hdfs namenode -...
8
votos
1
resposta
522
visitas
Como resolver o erro java.lang.NoClassDefFoundError ao executar o rhinit() no R
Estou integrando o Hadoop com R utilizando Rhipe e a minha configuração é a seguinte:
Ubuntu 14.
Hadoop 1.0.3
R 3.2.2
Rhipe 0.73.1
Ao iniciar no ambiente R o rhinit() aparece a seguinte mensagem:
...
1
voto
0
respostas
65
visitas
MapReduce. Não executa a função Reduce corretamente
Olá. Estou enfrentando dificuldades para trabalhar com MapReduce. Sempre que executo a aplicação não consigo resultado, pois aparentemente a função Map executa, porém a função Reduce permanece em 0%.
...