1.今天的学习过程和小结:
1,idea+maven创建JAVA工程,利用JAVA API操作HDF完成以下功 能:
(1),创建hdfs目录 /idea
(2)创建文件 / idea/hello.txt
(3)查看HDFS上的文件内容/idea/hello.txt
(4)文件重命名 /idea/hello.txt- >/idea/h.txt
(5)上传文件到hdfs
(6)带进度条文件上传
(7)下载hdfs文件到本地
(8)查询/目录下所有的文件
(9)删除/idea/hello.txt文件。
2,idea+maven创建JAVA工程,实现wordcount统计单词个数。并将其打包成jar,运行。
3.学习倒排索引的原理,尝试进行运用
2.遇到的问题
namenode,datanode再次无缘无故丢失,未能找到原因,只能格式化namenode
配置maven环境变量时出现错误:java的环境变量没有配置
倒排索引的程序编写不熟练
3.思维导图