...
| Code Block |
|---|
watch org.apache.hadoop.hdfs.server.namenode.DefaultAuthorizationProvider checkSubAccess '{params, returnObj}' '#cost>30000' -x 2 -n 1000 |
在 hdfs 上找到应的路径为 上找到对应的路径为 /**/*****.db。
同时在 hdfs-audit.log 中找到对应的调用：
...
最初我监控的是 org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getContentSummary，发现很多长时间函数调用，所以没有能够定位到具体的调用。
从另一个角度来说，平均 RPC 处理时间 这个数据其实并不太能可靠的反应 这个数据其实并不太能可靠的显示 namenode 的运行状况，单个类型的 rpc 调用的处理时长更能反应问题。调用的处理时长更能反映问题。
另外，checkPermission 的操作是在递归目录计数之前，而 hdfs audit 中的这一条日志在所有的操作完成之后才会输出，也就是日志中的时间会在阻塞发生之后很久，所以不能根据 checkPermission 的时间点定位到相关的操作。
...