惊心动魄的Hadoop-6小时350T数据恢复

这次文章是记录一下数据恢复。 上周五在调试Spark数据的时候发现了一个问题，就是一直显示No lease的问题，我们的实时处理程序升级之后，处理的数据量在一个小时内暴增1T。我们的小时程序Spark，有的单个key数据重复导致value值增大，程序运行卡住，根据网上查的参数进行调整。 Hadoop 在调整前，将Hadoop进行关闭 . stop-all.sh 进行关闭 我们在第一步进行关闭的时候这里就出现问题。。。关闭hadoop.sh 出现异常，关闭失败。只好使用linux 上的kill 强制杀