spark web ui中的skipped的含义

spark web ui中的skipped的含义顾名思义,跳出的意思啦。例如如图:skipped的stages代表是已经执行过了。所以不需要再执行了。如何,你有一个testRdd。然后先做testRdd.Filter("xxx&quo


Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺

顾名思义,跳出的意思啦。

例如如图:

spark web ui中的skipped的含义

 

skipped的stages代表是已经执行过了。所以不需要再执行了。

 

如何,你有一个 testRdd。然后先做 testRdd.Filter(“xxx”).map(“xx”), 这个是transform

然后再分别做了count和reduce操作。  这两个都是action,第一次执行action时会执行transform,然后执行第二个action时,transform就会进行skipped

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/167092.html原文链接:https://javaforall.net

赞 (0)
全栈程序员-站长的头像全栈程序员-站长

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号