学习
实践
活动
工具
TVP
写文章

flavorfan

LV3
  • 《技思广益 · 腾讯技术人原创集》签约作者

举报
发表了文章

sqlite3在数据科学的使用

sqlite3是一种很好的数据科学工程实践中保存数据(包括原始数据和中间结果存储)的方法。相比于csv/tsv、pickle、parquet,sqlite3的使...

flavorfan
SQLite数据挖掘
发表了文章

Python ExitStack的优雅退出

我相信 Python 的 ExitStack 功能并没有得到应有的认可。我认为部分原因是它的文档位于(已经晦涩的)contextlib 模块的深处,因为正式的 ...

flavorfan
Python
发表了文章

开发者成长激励计划-开发笔记:基于IoT NTP实现实时时钟

设备的RTC大部分场景是有用的,但RTC芯片增加了成本,而实现NTP网络协议又增加了系统的复杂性。如果物联网系统能够提供NTP校时是性价比最高的方案。

flavorfan
TencentOS Tiny物联网开发平台物联网
发表了文章

开发者成长激励计划-开发笔记:最简步骤移植LVGL

参数项目”自修伴侣“需要LCD上显示时钟,考虑移植LVGL。查了一些资料LVGL生态还是不错,不过其强大也就意味的移植,应用开发不会简单;此外lvgl快速发展,...

flavorfan
TencentOS Tiny
发表了文章

开发者成长激励计划-基于TencentOS Tiny 自修伴侣

自修伴侣(self-study planner)是基于物联网操作系统TencentOS tiny和CH32V_EVB RISC-V开发套件开发一款物联网化的番茄...

flavorfan
TencentOS Tiny
发表了文章

推荐系统负采样的几种实现

作为推荐模型训练的重要组成部分,推荐系统的负采样对模型的训练效果有着重要的影响,也是重要研究分支。实际的推荐系统场景,大部分数据是隐式反馈信息。对于模型训练,一...

flavorfan
大数据推荐系统Python
发表了文章

超参数调优的几种框架

在拟合数据训练之前需要设置超参数,以获得更健壮和优化的模型。任何模型的目标都是实现最小化误差,超参数调优(Hyperparameter Tuning / Opt...

flavorfan
机器学习Python
发表了文章

tflite模型PC端与嵌入式交叉验证

TFLM(Tensorflow lite micro)验证嵌入式端模型运行,直截了当做法是:对比PC端和嵌入式端运行的tflite模型的输入输出。笔者就Tiny...

flavorfan
TencentOS TinyTensorFlow嵌入式机器学习智能硬件
发表了文章

使用Elasticsearch、Spark构建推荐系统 #2:深入分析

Elasticsearch-spark-based recommender系统方案的两个关键步骤:

flavorfan
sparkElasticsearchService推荐系统机器学习大数据
关注了用户

用户2936994

301 文章0 回答21 关注者
发表了文章

使用Elasticsearch、Spark构建推荐系统 #1:概述及环境构建

推荐系统是机器学习当前最著名、最广泛使用,且已经证明价值的落地案例。尽管有许多资源可用作训练推荐模型的基础,但解释如何实际部署这些模型来创建大型推荐系统的资源仍...

flavorfan
云数据仓库套件 Sparkling大数据推荐系统机器学习ElasticsearchService
发表了文章

AIoT应用创新大赛-基于TencentOS Tiny 实时手语交互方案

AIoT创新应用比赛是一个命题作文,AIoT = AI + IoT 是基本了解;要求使用RT1062和TencentOS-tiny是限制条件,也是IDEA创意的...

flavorfan
TencentOS Tiny
发表了文章

AIoT应用创新大赛-基于TFML的迁移学习实践

NXP eIQ平台提供了嵌入式平台集成化的机器学习应用部署能力,支持BYOD(Bring Your Own Data)和BYOM(Bring You Own M...

flavorfan
TencentOS Tiny
发表了文章

PySpark on HPC 续:批量处理的框架的工程实现

PySpark on HPC系列记录了我独自探索在HPC利用PySpark处理大数据业务数据的过程,由于这方面资料少或者搜索能力不足,没有找到需求匹配的框架,不...

flavorfan
spark大数据
发表了文章

PySpark on hpc 续: 合理分区处理及合并输出单一文件

在HPC上启动任务以local模式运行自定义spark,可以自由选择spark、python版本组合来处理数据;起多个任务并行处理独立分区数据,只要处理资源足够...

flavorfan
spark大数据Python
发表了文章

小工具:Git auto-commit & push

是否这样的场景:在公司开心的搬砖,临时其他事打断后没有继续,没有及时把代码更新到repo;回到家后,想继续开心的搬砖,但是丢失白天在公司的进度,勉为其难重新实现...

flavorfan
Git
发表了文章

pyspark on hpc

本地内部集群资源有限,简单的数据处理跑了3天。HPC上有很多计算资源,出于先吃锅里的再吃碗里的思想,琢磨先充分利用共有资源。简单调研下,也不是很复杂的事情。

flavorfan
spark高性能计算大数据
发表了文章

docker-compose快速搭建wordpress个人网站

先后用过wordpress、GHost搭建过个人博客,Wordpress让人诟病的是相比与GHost的轻量而庞大复杂框架,安装环境依赖复杂,配置繁琐,过程痛苦,...

flavorfan
WordPressDocker云服务器SSL 证书
发表了文章

Spark resampling

对时间序列的index进行resample是很常见的操作。比如,按日、周、月、季度统计用户新增、活跃、累计等,就需要对用户表进行resample操作。 pand...

flavorfan
云数据仓库套件 Sparkling
发表了文章

PySpark UD(A)F 的高效使用

Spark无疑是当今数据科学和大数据领域最流行的技术之一。尽管它是用Scala开发的,并在Java虚拟机(JVM)中运行,但它附带了Python绑定,也称为Py...

flavorfan
大数据spark

个人简介

个人成就

  • 影响力总排行第 263 名
  • 《技思广益 · 腾讯技术人原创集》签约作者
    • 《技思广益 · 腾讯技术人原创集》签约作者

  • 获得 228 次赞同
  • 文章被阅读 37.6K 次
  • 文章获得 5 次首页推荐

扫码关注腾讯云开发者

领取腾讯云代金券