搭建大数据平台,jdk,mysqk,hadoop,hive,均可用正常。在esclipse中可以跑词频统计项目。 但是在hive中执行mapreduce任务(例如这样的语句 selece * from user order by id),一直卡顿,加载不
CVUQ$N(H0FIS0M3[$W]X3AG.png
RKTCWRUYL5MELK10SF7W1DT.png
出来
@~RS09SN7ZHW%NC5EO`FVQB.png
我用腾讯云的学生机在CentOS7的系统上搭建了Hadoop的伪分布式的环境,配置等都正常,datanode,namenode 等进程都正常开启,http的50070也都能正常访问,空间足够,然后用Windows的本地机用JavaAPI操作服务器的dfs,可以正常在dfs上创建目录,但就是在创建的目录下写入字符串到txt文件时出现
org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /hdfsapi/test/b.txt could only be replicated to 0 nodes instead of m
但是搭建了本地DNS,客户端(windows)创建后立马报NOT IMPLEMENTED,buffer_read_ipv4_address_at,是Windows不支持,但是我看教程搭建都是客户端是windows,不搭建本地DNS,直接设置权威服务器DNS,返回只有answer<1,会直接报DNS DNS didn't return an answer