首页
学习
活动
专区
工具
TVP
发布

小鹏的专栏

专栏作者
331
文章
392812
阅读量
56
订阅数
LP love tensorflow & spark
昨天看到一篇文章激发起了我很多兴趣点,文章的题目是 Spark Love Tensorflow,心想何止如此,LP love tensorflow & spark,之前谜之Love Tensorflow,花了三年的时候把它收入麾下,19年开始接触spark,同样激发出不少火花,同时学习了scala语言(人生太短,python吧),也想花二到三年的时间将spark拿下。
MachineLP
2020-03-21
1.4K0
spark学习笔记:spark sql
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
MachineLP
2019-09-19
6880
scala-sparkML学习笔记:serializable custom transformer with spark-scala
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
MachineLP
2019-08-31
6100
scala-sparkML学习笔记:Execption in thread "main" java.lang.
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
MachineLP
2019-08-31
3280
scala-sparkML学习笔记:模型评估
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
MachineLP
2019-08-31
1.1K0
pyspark-ml学习笔记:模型评估
问题是这样的,如果我们想基于pyspark开发一个分布式机器训练平台,那么肯定需要对模型进行评估,而pyspark本身自带模型评估的api很少,想进行扩展的话有几种方案:
MachineLP
2019-08-29
1.2K0
pyspark-ml学习笔记:逻辑回归、GBDT、xgboost参数介绍
逻辑回归、GBDT可以参考pyspark开发文档:http://spark.apache.org/docs/latest/api/python/pyspark.ml.html#pyspark.ml.classification.LogisticRegression 。
MachineLP
2019-08-29
3.2K0
pyspark-ml学习笔记:pyspark下使用xgboost进行分布式训练
问题是这样的,如果我们想基于pyspark开发一个分布式机器训练平台,而xgboost是不可或缺的模型,但是pyspark ml中没有对应的API,这时候我们需要想办法解决它。
MachineLP
2019-08-29
5.6K0
pyspark-ml学习笔记:如何在pyspark ml管道中添加自己的函数作为custom stage?
问题是这样的,有时候spark ml pipeline中的函数不够用,或者是我们自己定义的一些数据预处理的函数,这时候应该怎么扩展呢? 扩展后保持和pipeline相同的节奏,可以保存加载然后transform。
MachineLP
2019-08-29
3.1K0
pyspark-ml学习笔记:LogisticRegression
数据可以查看github:https://github.com/MachineLP/Spark-/tree/master/pyspark-ml
MachineLP
2019-08-01
1.8K0
spark杂记:Spark Basics
Spark 学习笔记可以follow这里:https://github.com/MachineLP/Spark-
MachineLP
2019-05-26
8660
spark杂记:movie recommendation using ALS
版权声明:本文为博主原创文章,未经博主允许不得转载。有问题可以加微信:lp9628(注明CSDN)。 https://blog.csdn.net/u014365862/article/details/88982729
MachineLP
2019-05-26
9170
spark杂记:Word Count
版权声明:本文为博主原创文章,未经博主允许不得转载。有问题可以加微信:lp9628(注明CSDN)。 https://blog.csdn.net/u014365862/article/details/88728261
MachineLP
2019-05-26
6750
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档