GitStats所生成统计信息常用分为如下几类: 常规的统计:文件总数,行数,提交量,作者数。 活跃性:每天中每小时的、每周中每天的、每周中每小时的、每年中每月的、每年的提交量。...作者数:列举所有的作者(提交数,第一次提交日期,最近一次的提交日期),并按月和年来划分。 文件数:按日期划分,按扩展名名划分。 行数:按日期划分。...文件,在菜单栏中可以找到以下4点: 1、代码仓库信息 2、提交频率维度的数据统计 维度 描述 Commits by Year 全年统计汇总 Commits by year/month 每月统计汇总 Month...of Year 每月统计汇总 Hour of Week 每星期按时统计汇总 Day of Week 每星期按日统计汇总 Hour of Day 每天按时统计汇总 Weekly activity 每周统计汇总...,并自动生成数据图表的过程。
自从DeepSeek出现后,极大地提升了大家平时的工作效率,特别是对于一些想从事数据行业的小白,只需要掌握DeepSeek的提问技巧,SQL相关的问题也不再是个门槛。...复杂子查询 我使用的是MySQL数据库, 生成一个SQL:统计订单表中每个客户的订单总金额, 并筛选出金额大于平均值的客户。...时间范围查询 我使用的是MySQL数据库, 生成查询:统计2023年1月到6月期间, 每日的销售额,并按月份汇总。...时间序列分析 我使用的是MySQL数据库, 生成SQL:按周统计过去3个月的订单量趋势, 并对比同期增长率。...以上就是SQL中常见的几个DeepSeek提示词指令,大家可以收藏起来需要的时候直接查阅套用对应指令。
授权前应确认目录内文件均为待处理的数据文件,避免无关文件被误读取。 3.2 批量处理 当目录内有大量数据文件需要处理时,WorkBuddy 可一次性读取全部文件并按规则汇总。...Agent 自动识别数据结构、匹配字段并完成求和、平均等统计操作。 4.2 数据清洗 去除重复记录、修正格式错误、填充缺失值等清洗工作,由 Agent 自主完成。...企业版套餐详情 版本 按月购买 按年购买 Credits 额度 起购要求 SaaS 企业版(旗舰版) 198 元/人/月 2,376 元/人/年 2,000 Credits/人/月,每月刷新,团队内共享...例如每天早上 8 点自动读取前一日的数据文件并生成日报,或每月初自动汇总上月数据并生成月报。 6.2 事件触发 除定时触发外,自动化还支持事件触发。...例如当指定目录下出现新文件时自动触发数据处理任务,实现"文件到达即处理"的自动化工作流。
ETL数据抽取原理二、为什么建数仓最难的是数据打通和ETL任务开发?建数仓的过程,不是简单地买一套工具、建几张表那么轻松。真正的难点,往往出现在第一步——数据打通。...聚合计算:按月统计销售额、按地区汇总库存。Load(加载)将转换后的数据写入目标位置,可能是数据仓库(如 Hive、Snowflake)、应用系统(通过 API 写入)、或者报表分析平台。...、时间口径(例如全部按发票日期计)、税额计算方式加载到数仓的“销售收入事实表”中背景:财务系统、ERP、POS 销售系统分别记录收入,但由于入账时间、税率口径、币种换算等差异,直接汇总会出现差额。...全渠道销售分析从各渠道系统(电商 API、POS 系统、ERP)抽取销售明细与库存数据统一商品编码、计量单位、渠道标识,并对销售时间进行时区对齐汇总成统一的“销售事实表”和“库存维度表”背景:零售企业同时经营线上商城...建议:上线前召开跨部门指标定义会,把计算口径、统计周期、数据来源一次性敲定。数据质量控制要前置不要等到数据进了数仓才发现脏数据。
这道SQL就是延迟率报表的基础查询。 二、题目 现有一张外卖配送表 t2_delivery_order,记录了每笔外卖订单的预计送达时间和实际送达时间。请统计每月的配送延迟率。...计算每单的送达延迟分钟数 执行SQL select order_id, rider_id, estimated_arrive, actual_arrive,...按月统计延迟率 执行SQL select delivery_month, count(1)...坑3:延迟率统计的时间范围 如果只统计有 actual_arrive 的订单(已完成配送),会忽略"骑手取餐后超时未送达被取消"的订单,导致延迟率偏乐观。应确认数据范围是否包含取消/异常订单。...说明 unix_timestamp 时间差 转为秒数后相减再除以60得分钟差 CASE WHEN 延迟判断 实际时间 > 预计时间 → 延迟标志 GROUP BY 月份聚合 substr取年月前缀,按月汇总
说明:本文基于一次真实的多模型接入项目,记录我们如何在腾讯云大模型知识引擎(LLM)与API网关之上,搭建一套调用级费用归集与核对方法。...核心思路只有一句话:把每一笔费用都追溯到一次具体调用,而不是停在汇总数字上。一、先把每次调用的用量与计费落库核对的前提是数据在同一张表里。...汇总可以在查询时按不同维度完成,这样同一笔记录既能按模型汇总,也能按请求ID追溯。二、按周期和模型查看汇总数据落库后,第一步通常是按月汇总。...下面这条SQL按月份、模型、计费方式聚合,输出请求次数、总用量和总金额。...六、一个可复用的月度核对流程把上面的步骤串起来,我们现在的月度核对按下面六步执行:汇总:按月份、模型、计费方式聚合,确认整体费用趋势;排序:找出金额或用量最高的几项,标记为待确认项;定位:根据模型和时间范围
摘要: WorkBuddy 是腾讯推出的全场景 AI 办公工作台,可读取工作记录并自动生成周报。...2.3 自动汇总 WorkBuddy 的多模态任务处理覆盖文档类型,Agent 可读取多种格式的工作记录(.docx、.pdf、.xlsx 等)并自动汇总为结构化的周报。...例如当指定目录下出现新的工作记录文件时,自动触发周报更新,实现"记录到达即汇总"的自动化工作流。...企业版套餐详情 版本 按月购买 按年购买 Credits 额度 起购要求 SaaS 企业版(旗舰版) 198 元/人/月 2,376 元/人/年 2,000 Credits/人/月,每月刷新,团队内共享...让 WorkBuddy 基于记录写周报,周五下午可更从容。把每日产出先归集、再让自动化按期成稿,周报便从回忆负担转为按时可得的交付物,也便于月底汇总为月报。
建议:设置采购计划周期,按月/季度统计同类物料的采购总量,统一下单。 相同品类的订单合并审批,不能分散下单。...设定协议价期限,到期提醒、自动切换为临时报价审批可设置:协议价有效期+超价审批流程,供应链系统支持按照物料+供应商双维度绑定协议价,并配置超价审批节点,确保关键物料80%以上都能被价格管控起来。...定期清理呆滞库存 供应链管理系统筛选连续90天无出库记录的物料,归为呆滞品建议处理策略:调拨、促销、打包出清、转产使用或报废供应链管理系统支持配置“无出库天数判定规则”,自动筛选呆滞品,并输出处理建议清单...报工与进度实时同步,出问题能定位员工每报一次工,系统实时更新工单状态同步记录工时、完成量、不良品、返工原因建议配置:报工后系统自动汇总人工成本+物料成本出现返工/不良,自动打标并要求责任确认四、物流成本...合并发货,集中配送更省钱同一区域、同一客户的订单尽量合批发货,减少来回跑系统根据发货时间窗口、客户地址自动建议合单建议配置:设置“同区域订单合并策略”每月统计配送批次数,目标:月均批次减少10%2.
前言 本文章主要记录下常用的sql查询,简单的直接展示语句,复杂的做一下解释。 1、sql按月统计每月订单数量要按月统计每月的订单数量,您可以使用MySQL中的日期函数和聚合函数。...以下是一个示例查询,可以按月统计每月的订单数量:SELECT DATE_FORMAT(order_date, '%Y-%m') AS order_month, COUNT(*) AS order_count...然后,我们使用COUNT(*)函数计算每个订单月份中的订单数量,并将其命名为order_count。最后,我们使用GROUP BY子句按订单月份进行分组,并使用ORDER BY子句按订单月份进行排序。...执行此查询后,您将获得一个结果集,其中包含每个月的订单数量2、sql按升序排列SELECT column1, column2, ......FROM table_name WHERE column_name ILIKE pattern;下述查询将返回以 "john" 开头的所有客户记录,不区分大小写SELECT * FROM customers
例如「把销售额按月份汇总,算出每月的平均值和环比增长率」。WorkBuddy 的理解自然语言能力识别意图后,由 Agent 自主规划执行:先读取数据结构,再确定处理逻辑,最后交付处理后的结果。...三、数据处理的可控性 数据处理不是一次性黑箱,用户可在过程中介入与迭代。 3.1 自主规划执行 Agent 自动拆解任务、规划步骤并调用工具执行,交付可验收的结果。...这种可控性让「数据处理」更像一次协作,而非一次性黑箱输出。 四、适用的数据处理类型 根据官方应用场景描述,数据处理适用于结构清晰、目标明确的表格分析任务。...4.1 常见处理类型 单列或单表的统计汇总(求和、平均、计数等) 多表数据的合并与关联 按条件筛选与分类统计 数据格式转换与清洗 4.2 使用建议 把「想要什么结果」写清楚,比「该用什么函数」更重要。...企业版套餐详情 版本 按月购买 按年购买 Credits 额度 起购要求 SaaS 企业版(旗舰版) 198 元/人/月 2,376 元/人/年 2,000 Credits/人/月,每月刷新,团队内共享
以维度作为建模驱动,基于每个维度的业务含义,通过添加维度属性、关联维度等定义计算逻辑,完成属性定义的过程并建立一致的数据分析维表。...内容相对的窄:列数较少 3. 经常发生变化,每天会新增加很多。 1)事务型事实表 以每个事务或事件为单位,例如一个销售订单记录,一笔支付记录等,作为事实表里的一行数据。...2)周期型快照事实表 周期型快照事实表中不会保留所有数据,只保留固定时间间隔的数据,例如每天或者每月的销售额,或每月的账户余额等。 ...所谓派生指标,即由统计周期+修饰词+统计粒度+原子指标组合加工而成的指标 其中,统计周期:指的是想要统计的时间周期,比如天、周、月 修饰词:指的是业务的约束,通常出现在SQL的where条件中,...比如订单的下单渠道等等 统计粒度:指的是维度组合,通常出现在SQL的group by中,比如统计商品一级类目对应的销售额,那一级类目就是统计粒度 六、DWS层的设计原则 数据公用性 比如,汇总的聚集表能否与他人公用
从拿到原始 Excel 到产出带图表的汇总报表,全程只发了 4 句话指令,耗时约 3 分钟。文末附踩坑记录和指令模板,可直接照搬。...Excel步骤 2:清洗重复值与异常数据步骤 3:按月度汇总并生成图表步骤 4:输出新文件到桌面踩坑记录(这些坑我都踩过)指令模板(复制即用)总结:哪些场景最适合交给 WorkBuddy一、前言:为什么我用...后来我用 WorkBuddy 试了一次,发现它的核心价值在于——你不用关心用什么工具实现,只用描述"我要什么结果"。它本地有 Python 沙盒,能直接读你授权的文件夹,跑完把成品文件放回原处。...步骤 3:按月度汇总并生成图表这是最有成就感的一步:按月份汇总销售额和数量,生成一张柱状图(销售额)和一张折线图(数量),用中文标题和坐标轴,保存到桌面。...WorkBuddy 内部环境默认配置了中文字体,直接出图就是正常的——这点省了我不少事。坑 4:大文件读取慢10 万行以上的 Excel,首次读取会慢一些(10-20 秒)。
比如,看看以上2笔数据的所在日期附近,是否有其他用户也出现购买数量上的明显提升。 这可能是那段时间搞促销,或某明星出新专辑,有粉丝大量购买。...这里不再展开 ---- 再看看订单金额为0的情况: 共80笔消费金额为0的记录 ---- 啰嗦的汇总代码 数据分析中的数据处理操作,大部分集中在分组统计中,因为需要变换数据颗粒做统计运算。..."整体每月的销售额趋势": 眼瞎也能看出 97年4月的销售额出现大幅下降 销售额的下降有各种可能: 消费人数减少 消费金额减少(客单价) 一开始搞促销吸引大量顾客,促销后出现逆转 一个个来看看。..."那么每个月的消费人数走势如何呢": 注意数据颗粒是订单,统计人数时是不能直接对记录计数,如果同一个人在分组范围内出现多笔,应该视为一笔,因此需要对 user id 去重后再计数。...对象,其中的参数分别是列名与统计方法 调用如下: 注意此时我们需要解包操作,把其中定义的字典解开为参数传入 ---- 现在可以一次性定义需要用到的指标度量: 其次把指标计算也定义出来: 有些计算如果觉得不希望每次统计都重新计算
,手机打卡使用 GPS + 照片 + 签名二、功能清单(必须覆盖的模块)列出你要求的所有功能,并做一点补充:考勤工作台(个人/管理端)考勤报表(日报/月报/异常统计/部门汇总)考勤打卡(上班/下班/中间卡.../跨班次)加班产生的调休需记录有效期并提供调休审批5.考勤确认(HR/主管)流程: 系统按月生成考勤汇总 -> 主管/HR 审核、锁定 -> 生成工资表输入 -> 后续补卡/变更应记录变动要点:锁定后禁止随意修改.../蓝牙/基站辅助判断拍照与人脸识别作为强校验手段(提高防作弊)八、考勤报表 & SQL 示例常见报表:月度出勤汇总、异常明细、部门加班汇总、个人考勤明细、请假统计。...上线前的关键检查数据迁移:把历史打卡/请假/加班数据从旧系统或 Excel 导入,设计脚本并做多次预演。规则回测:用历史 3-6 个月的数据跑新系统的规则,核对异常率、迟到早退统计,找出规则缺陷。...运营期间建议每月固定窗口 HR 与主管核对并锁定考勤(比如每月 5 日前)定期清理 raw 表(只在 raw 存 30 天,历史走归档)自动提醒机制(未打卡、超时审批、调休到期)十、代码仓与测试建议(快速清单
例如「帮我把这份 Excel 按月份汇总销售额」,Agent 即可理解并执行。 2.2 自主规划执行 WorkBuddy 自动拆解任务、规划步骤并调用工具执行,用户无需关心底层实现细节。...三、典型使用场景 3.1 文档处理 撰写工作报告、邮件、会议纪要 编辑、润色已有文档 从多份资料中提取关键信息生成摘要 3.2 数据处理 上传 Excel 文件后自动完成统计汇总 生成可视化图表 输出数据分析报告...企业版套餐详情 版本 按月购买 按年购买 Credits 额度 起购要求 SaaS 企业版(旗舰版) 198 元/人/月 2,376 元/人/年 2,000 Credits/人/月,每月刷新,团队内共享...通过「一句话描述需求」的交互方式,Agent 自主规划执行路径并交付可验收的结果,无需用户掌握编程知识或复杂提示词技巧。...从日常文档处理、数据统计到演示文稿生成,用户只需用自然语言描述需求,就能让 AI 帮你把日常办公任务落到实处。
这里数据虽然已经没有了缺失值,但每一行数据的含义却发生了变化。原始数据中产品T01在20160303这天并没有测试,所以这一天的值应该被解释为在此之前的最后一次quality的测试值。...另一个问题是两种产品都是按月测试的,但重塑后的数据框没有以固定的频率对其date。 下面方法进问题进行修正。...,而且每月缺失值。...通过sqldf包使用SQL查询数据框 有没有一种方法,能够直接使用SQL进行数据框查询,就像数据框是关系型数据库中的表一样呢?sqldf包给出肯定答案。...: sqldf默认基于SQLite,因此SQLite的局限性就是该包的局限性,比如内置的分组汇总函数是有限的,而R本身的统计汇总函数要多得多 不方便动态编程 SQL的限制性也限制了该包,我们难以像操作dplyr
可以用分组汇总,也就是分组(group by 月,用户id),统计(对分组后每个组计数就是连续登陆的天数 count) 2....汇总分析 1)分组汇总:查询每个月,每个用户,每一次连续登陆的天数。...也就是分组(group by 月,用户id,标记),统计(对分组后每个组计数就是连续登陆的天数 count) 1 select 月,用户id,标记, 2 count(*) as 连续登陆天数...1 select distinct 月,用户id 2 from t3 3 where 连续登陆天数 >= 2; 到这里我们已经得到了题目要求的结果,可以把前面的子查询t1、t2、t3代入上面的SQL语句...与原题的区别在于: 1)“连续2天”变成了“连续5天”:对最后的where条件进行修改; 2)查询“用户名单”变成了“用户数”:用group by按月分组,然后统计用户数和count(distinct
最后生成一个汇总文件"分类统计总览.xlsx",列出各大区的数据量占比和金额占比这个指令的亮点:自动建文件夹:不用你自己先建好目录结构按维度拆分:按任意列的值自动分类,不限于4个,100个客户类型也能分自动添加统计摘要...:每个分文件自带小计信息,领导看了都夸你细心附带汇总总览:大局观也有了,一份指令搞定两层需求进阶变体——按时间段拆分:按"日期"列拆分,按月分组,每个月一个文件技巧3:跨表关联匹配——VLOOKUP的终极替代方案痛点财务人员最常用的...清洗完成后告诉我:原始行数、清洗后行数、删除了空行数、去重数量保存到桌面"清洗后数据.xlsx",同时在桌面生成一个"清洗报告.txt"记录处理详情这个指令的含金量:7种清洗规则一次执行:不用分7次操作...痛点每月月末的固定流程:从ERP系统导出原始数据清洗整理分类汇总做透视表和图表填入报告模板转PDF发给领导月月重复,月月加班。...设一次,以后每月自动出报告。这才是真正的效率提升。
原始的意思是重采样,可分为上采样与下采样,而我们通常情况下使用的都是下采样,也就是从高频的数据中按照一定规则计算出更低频的数据,就像我们一开始说的对每日数据按月汇总那样。 ...', parse_dates=['date']) # 以月为统计窗口计算每月股票最高收盘价 ( AAPL .set_index('date') # 设置date为index ....显示为当季第一天 A 年,显示为当年最后一天 AS 年,显示为当年第一天 D 日 H 小时T T或min 分钟 S 秒 L或 ms 毫秒 且这些规则都可以在前面添加数字实现倍数效果: # 以6个月为统计窗口计算每月股票平均收盘价且显示为当月第一天...它通过参数freq传入等价于resample()中rule的参数,并利用参数key指定对应的时间类型列名称,但是可以帮助我们创建分组规则后传入groupby()中: # 分别对苹果与微软每月平均收盘价进行统计...图6 且在此种混合分组模式下,我们可以非常方便的配合apply、transform等操作,这里就不再赘述。 ---- 以上就是本文的全部内容,欢迎在评论区与我进行讨论~
SQL核心难点梳理与实战经典案例解析 一、前言 在后端开发、数据分析、运维管理以及数仓建设等各类技术场景中,SQL都是使用率最高的数据操作语言。...2.2 分组聚合函数使用误区 GROUP BY分组搭配SUM、COUNT、AVG、MAX、MIN等聚合函数,常用于数据统计、业绩汇总、数量盘点等场景。...三、SQL实战经典业务案例 3.1 左连接实现用户订单关联查询 业务场景:查询所有注册用户信息,附带用户下单记录,无下单记录的用户也需正常展示。...3.2 分组聚合统计月度订单交易额 业务场景:按月份统计全年订单成交总金额、订单总数量,筛选出成交总额大于10000元的月份数据。...实现思路:通过DATE_FORMAT函数格式化时间完成按月分组,SUM统计交易额,COUNT统计订单数,使用HAVING筛选分组后聚合数据。