标签：dmd1 HDFS MPP 8a webhdfs 229 curl 8000
简介
GBase 8a集群支持从HDFS上加载数据和将数据导出到HDFS上，本文对HDFS相关问题的分析排查进行简单的介绍。
curl工具
使用curl工具可简便的验证HTTP协议的连通性，以判断HDFS服务器或客户端环境配置问题。
以下命令用于获取HDFS上文件或目录状态，通过-v可以获取详细的诊断信息。
#curl -ivL 'http://dmd1-229:50070/webhdfs/v1/data?user.name=gbase&op=GETFILESTATUS’
*About to connect() to dmd1-229 port 50070
*…
*{“FileStatus”:{…})
类似于主机名错误、端口号错误、文件不存在或文件没有读权限的问题，都可以用curl验证。
-
/etc/hosts未正确配置或主机名错误
#curl -ivL 'http://dmd1-15:50070/webhdfs/v1/data?user.name=gbase&op=GETFILESTATUS’
*getaddrinfo(3) failed for dmd1-15:50070
*Couldn’t resolve host ‘dmd-15’
*… -
端口号错误
#curl -ivL 'http://dmd1-229:8000/webhdfs/v1/data?user.name=gbase&op=GETFILESTATUS’
*About to connect() to dmd1-229 port 8000(#0)
*couldn’t connect to host
*… -
文件不存在
#curl -ivL 'http://dmd1-229:8000/webhdfs/v1/data/test/test.tbl?user.name=gbase&op=GETFILESTATUS’
*About to connect() to dmd1-229 port 8000(#0)
*…
*< HTTP/1.1 404 not Found
*… -
无读取权限
#curl -ivL 'http://dmd1-229:8000/webhdfs/v1/data/test/test.tbl?user.name=gbase&op=GETFILESTATUS’
*About to connect() to dmd1-229 port 8000(#0)
*…
*< HTTP/1.1 403 Forbidden
*…
更多WebHDFS命令格式可访问以下地址：
https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/WebHDFS.html
标签：dmd1,HDFS,MPP,8a,webhdfs,229,curl,8000 来源： https://blog.csdn.net/u012077267/article/details/121627760
本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享； 2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关； 3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关； 4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除； 5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。