这篇文章主要介绍“ hdfs命令行和客户端的区别是什么”，在日常操作中，相信很多人在 hdfs命令行和客户端的区别是什么问题上存在疑惑，小编查阅了各式资料，整理出简单好用的操作方法，希望对大家解答” hdfs命令行和客户端的区别是什么”的疑惑有所帮助！接下来，请跟着小编一起来学习吧！
一直都没有发现，原理hdfs的命令行和客户端api的使用还是有很大差别的
现象：
将dfs.block.size设置成128M
现有28G的数据，理论上讲map的总数应该是224个，但是map数量却翻倍成448个
一直都找不出原因，使用hdfs命令行查看需要进行mapreduce的文件的block大小
然后通过hdfs fs -put 命令放进去的文件block大小就是128M
最后猜测应该是客户端API没有读到在构造Configuration对象时没有读到服务器上的*-site.xml导致的，将服务器上的*-site.xml放到客户端的根目录下实验了一下，果然OK了
到此，关于“ hdfs命令行和客户端的区别是什么”的学习就结束了，希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习，快去试试吧！若想继续学习更多相关知识，请继续关注亿速云网站，小编会继续努力为大家带来更多实用的文章！
免责声明：本站发布的内容（图片、视频和文字）以原创、转载和分享为主，文章观点不代表本网站立场，如果涉及侵权请联系站长邮箱：is@yisu.com进行举报，并提供相关证据，一经查实，将立刻删除涉嫌侵权内容。
