开启辅助访问
 找回密码
 注册帐号

扫一扫,访问微社区

首页   >   博客   >  世纪史诗  >  spark
世纪史诗 个人分类:spark 9 2017-1-12 17:58

statcounter StatCounter 这是用于统计的一个类,在 org.apache.spark.util 包中 如果是RDD 可以通过隐式转化 DoubleRDDFunctions 来获得一些额外的功能,就比如能产生这个对象的 .stats def stats(): StatCounter = self.withScope { self.mapPartitions(nums = Iterator(StatCounter(nums))).reduce((a ...

个人分类

标签

阅读排行

评论排行

返回顶部