查看任务列表yarn application -list 根据条件过滤列表yarn application -list appStates FINISHED/KILLED/RUNNING/FAILED 查看状态yarn applicaiton -status appli...

继续阅读

今天遇到一个问题,就是其他业务系统过来的时间戳类型为毫秒级如:1635830753393 通过postgresql 的to_timestamp函数后,发现时间错误了,得到的时间成为了 53807-06-01 07:29:52.999936经过排查发现时间戳位数问题,于是使用...

继续阅读

今天早上收到一个报警,测试服务器磁盘使用量100%,然后我着急忙慌的赶快去处理了。先看具体每个挂载磁盘使用量df -h 发现/opt 目录挂载磁盘满了。第一反应是估计是cdh里面的组件或者开发的拦截器之类的写log写满了,于是去opt目录下具体看是那个文件夹出了问题du -...

继续阅读

Me

大数据技术开发分享,hadoop学习