作者 CDA 数据分析师 前言 2017年7月29日,由CDA数据分析师主办,以“跨界互联 数据未来”为主题的CDAS 2017第四届中国数据分析师行业峰会在北京中国大饭店隆重举行。 7月29日当天,除了引人眼球的主会场以外,当天同步开放11个分论坛,我们将逐一推送每个分论坛的盛况,以及演讲嘉宾速记稿整理,给每一个CDA成员奉上干货。 CDAS 2017中国数据分析师行业峰会下午的大数据与金融分论坛中,来自IBM、诸葛io、民生银行等六位专家与教授,分享了大数据在金融领域的实践和应用 人工智能助
英明,携程数据研发专家,负责支付离线数据仓库建设及BI业务需求,对并行计算、大数据处理及建模等有浓厚兴趣。
8月18日上午,由清华大学研究生院和软件学院共同开设的大数据能力提升项目实践模块必修课——《大数据实践课》在线上进行了期末答辩和成果展示。 授课教师、软件学院闻立杰副教授首先对实践课近八周以来的项目进展情况进行了整体回顾,肯定了同学们在期中答辩时的表现,同时感谢各合作单位和企业导师们提供的真实数据、系统、算力以及对同学们耐心细致的指导,最后预祝同学们答辩顺利。 本次课程的12个实践项目均为企业提供的真实项目,涉及电力、石化、建筑、医疗等行业,来自土木水利学院、环境学院、经管学院等24个院系的同学们依次以小
随着人工智能技术的广泛深入应用,给信息安全行业带来全新的挑战,但同时也带来前所未有的发展机遇。数据泄漏给企业造成的损害日益严重,加强企业数据资产的管理与保护已经刻不容缓。1月12日,由中国信息通信研究院、电子科技大学、企业数据安全技术联盟(筹)联合主办的“2018中国企业和个人数据安全技术大会”在北京国家会议中心隆重召开。来自全国各地的500余位信息化主管部门领导、权威院士、知名专家学者以及国内企业代表汇聚一堂,安恒信息参与协办本次会议,公司高级副总裁、首席安全官刘志乐就数据安全技术实践主题分享了精彩的演讲
| 导语 在会员服务的极简公式:收入=付费用户数*客单价,上面玩来玩去也绕不开客单价的问题。今天就近期的有效实战经验来分享下调整会员定价提高客单价的几个关键作者:swanshi腾讯高级产品 一、准备调价策略—新价格框架搭建 1.1为什么要调价? 如果你产品的会员服务价格已经运行了很久,看起来一起都自然而然,但很可能还不在最佳定价上! 为什么?来看看下面但分析图谱: 上图是一个我在做定价实验时的回收数据,通过不同定价策略,购买用户数量和实际收益会有对应变化 当价格最低的时候,付费人数因价格冲动
点击关注公众号,Java干货及时送达 来源:https://github.com/superhj1987/pragmatic-java-engineer/blob/master/book/chapter1-servertech/server-basic.md 使用Java后端技术的目的就是构建业务应用,为用户提供在线或者离线服务。因此,一个业务应用需要哪些技术、依赖哪些基础设施就决定了需要掌握的后端技术有哪些。 纵观整个互联网技术体系再结合公司的目前状况,笔者认为必不可少或者非常关键的后端基础技术/设施如
使用Java后端技术的目的就是构建业务应用,为用户提供在线或者离线服务。因此,一个业务应用需要哪些技术、依赖哪些基础设施就决定了需要掌握的后端技术有哪些。纵观整个互联网技术体系再结合公司的目前状况,笔者认为必不可少或者非常关键的后端基础技术/设施如下图所示:
上个周末,中国人剁手又剁出了新高度:1682亿元。火爆的背后,你知道双11的剁手大军们如何集结、又是如何做出购买决策的吗?不同类型的消费者,表现出怎样的购买倾向?11月15日的数据侠线上实验室活动中,CBNData高级数据分析师王舒借助阿里大数据,为我们解读了双11期间不同消费者的群体特征及其购买倾向。温馨提示:文末有彩蛋!
这里的后端基础设施主要指的是应用在线上稳定运行需要依赖的关键组件或者服务。开发或者搭建好以上的后端基础设施,一般情况下是能够支撑很长一段时间内的业务的。此外,对于一个完整的架构来说,还有很多应用感知不到的系统基础服务,如负载均衡、自动化部署、系统安全等,并没有包含在本章的描述范围内。
10月12日,由中央网信办网络安全协调局及公安部网络安全保卫局指导,中国计算机学会主办的第32次中国计算机安全学术交流会在苏州隆重举行。本次交流会以“协作·共赢·开创”为主题,中国工程院院士沈昌祥、公
2015年12月10-12日,由中国计算机学会(CCF)主办,CCF大数据专家委员会承办,中国科学院计算技术研究所、北京中科天玑科技有限公司与CSDN共同协办,以“数据安全、深度分析、行业应用”为主题的 2015中国大数据技术大会 (Big Data Technology Conference 2015,BDTC 2015)在北京新云南皇冠假日酒店盛大开幕。 2015中国大数据技术大会第三天的大数据分析及生态系统分论坛中,来自Hortonworks、IBM、京东、百度、eBay、银联智惠和南京大学的七位专家
11月10日,2017第五届中国(广州)国际智慧城市论坛暨云计算大数据物联网应用大会在广州萝岗会议中心隆重开幕,本次大会以“云合物联、数聚力量、智引创新、产城融合”为主题。安恒信息高级副总裁兼首席安全
概要 为什么要做监控 线上发布了服务,怎么知道它一切正常,比如发布5台服务器,如何直观了解是否有请求进来,访问一切正常。 当年有一次将线上的库配置到了Beta,这么低级的错误,排错花了一个通宵,十几个人。 某个核心服务挂了,导致大量报错,如何确定到底是哪里出了问题。 SOA带来的问题,调用XX服务出问题,很慢,是否可以衡量? 由于业务系统数量大,每天都会产生大量的系统日志和业务日志,单流式业务的一台服务器产生的日志达400M 想直接查看内容打开可能几分钟,而且内容之多根本无法查看,给开发和运维带来诸多不便,
Elastic 监控管理解决方案是基于 Elastic Stack 的一站式解决方案。该解决方案具有完备的日志、指标、APM 和可用性采集能力,可以在大规模和云原生的环境下完成基于服务质量目标的管理。
11.11光棍节已经过去,12.12促销又要到来,回望双十一的疯狂与激情,哪些人在买小米、哪些人在买华为,哪些人在买林志玲,哪些人在买杜蕾斯,都将是有趣的话题。11月27日,在京东举办的《京东技术解密》新书发布会上,笔者获得了不少11.11京东商城的趣闻大数据,京东网友的性福指数羞答答出炉,卖出80万块香皂、900万卷手纸,大北京的区县性福对比让我惊讶异常。 《京东技术解密》这本书讲述了京东技术团队从30人到4000人的发展历程,详细介绍了京东在海量订单处理、庞大却高效的供应链管理、大型技术团队管理等方面干
Growth Hacking这个词在过去一两年开始迅速从硅谷传播到国内,也诞生了一系列专注于企业数据分析业务的明星初创公司,如GrowingIO,神策数据,诸葛IO等。Growth Hacking简单的来说就是用数据驱动的方式来指导产品的迭代改进,以实现用户的快速增长,可以看看上面几家数据分析公司披露的客户就知道它有多流行了: GrowingIO客户:有赞,豆瓣,36Kr等 神策数据客户:秒拍,AcFun,爱鲜蜂,pp租车等 诸葛IO客户:Enjoy,罗辑思维等 我司的一个主要产品是面向中小诊所的运营S
Elastic 监控管理解决方案是基于 Elastic Stack 的一站式解决方案。该解决方案具有完备的日志、指标、APM 和可用性采集能力,可以在大规模和云原生的环境下完成基于服务质量目标的管理。 12月23日,特邀 Elastic 社区布道师——刘征老师为大家带来《 Elasticsearch 应用监控管理平台搭建实战》直播,保姆级实操教学干货满满,带大家轻松掌握 ES 监控管理平台搭建技能~ 本实战工作坊基于多层架构的宠物商店为示例应用,手把手地引导参与者搭建可观测性管理平台,体验分层次的收集整合、
日志是记录系统中各种问题信息的关键,也是一种常见的海量数据。日志平台为集团所有业务系统提供日志采集、消费、分析、存储、索引和查询的一站式日志服务。主要为了解决日志分散不方便查看、日志搜索操作复杂且效率低、业务异常无法及时发现等等问题。
文章来源于36大数据 信息流、物流和资金流三大平台是电子商务的三个最为重要的平台。而电子商务信息系统最核心的能力是大数据能力,包括大数据处理、数据分析和数据挖掘能力。无论是电商平台(如淘宝)还是在电
采集页面被浏览器加载展现的记录,这是最原始的互联网日志采集需求,也是一切互联网数据分析得以展开的基 础和前提。
“数据孤岛是大数据行业发展面临的最大问题,贵阳提出‘块数据’理论,对于打通数据壁垒,开展数据挖掘与分析意义重大。”近日,在接受数据观记者专访时,360公司大数据中心副总经理傅志华这样认为。 傅志华说,在“互联网+”的浪潮中,大数据在促进企业运营方面发挥着越来越重要的作用。作为西部欠发达地区的省会城市,贵阳全城免费WiFi的建设和块数据理论的提出,都是打破数据孤岛的有益探索。 块数据理论对于打通“数据孤岛”意义重大 数据孤岛是大数据行业发展面临的最大问题。一方面,各行业、企业和政府都在竭尽所能地采
原文:http://www.enmotech.com/web/detail/1/735/1.html (复制链接,打开浏览器即可查看)
作者:飒然Hang 原文:www.rowkey.me/blog/2016/08/27/server-basic-tech-stack/ (点击文末阅读原文即可前往) 本文更新于2016.12.06,
2017首届粤港澳大湾区新型智慧城市高峰论坛于11月2日在美丽的花城广州召开。本次会议由中国信息协会主办,广州信息协会承办,中国信息协会副会长朱玉,国家工信部杨东日,广州市工信委总工程师胡志刚等领导发
Seren,智行资深研发经理,负责业务系统架构升级和优化,跟踪行业趋势和技术发展方向,
众志成城,共抗疫情。腾讯安全联合腾讯云大学、腾讯课堂启动「网安夜校」,为大家提供限时优惠的网络安全课程。欢迎网络安全从业者和信息安全专业学生报名参加学习,快速充电提升自我。
本文介绍了大数据分析平台在电网公司中的应用场景、分析模型和主要功能,通过具体案例展示了如何通过大数据分析技术提升电网公司的业务效率和智能化水平。
墨墨导读:本文跟大家分享有赞在当前日志系统的建设、演进以及优化的经历,这里先抛砖引玉,欢迎大家一起交流讨论。
简言之,Power BI 内网穿透精灵,帮助数据建模师在企业内为全部用户提供数据服务,而不需依赖任何 IT。
常见的数据清洗,预处理,数据分类,数据筛选,分类汇总,以及数据透视等操作,用SQL一样可以实现(除了可视化,需要放到Excel里呈现)。SQL不仅可以从数据库中读取数据,还能通过不同的SQL函数语句直接返回所需要的结果,从而大大提高了自己在客户端应用程序中计算的效率。
「Why-What-How」在讲解概念和执行上是个不错的思维模型,本文依例按此框架来拆分「数据分析」。相信很多朋友已经有了较丰富的分析经验,这里权且从个人的角度进行梳理,以资参考。为了帮助大家更好地理解本文,先贴出一张思维脑图:
人民网北京9月24日电 (冯亚涛)中秋、“十一黄金周”即将到来,一大波游客正准备前往各地旅游。业内人士分析,黄金周旅游规模或创历史新高。根据各大在线旅行社的大数据分析,今年长假会出现两个出行高峰;丽江、三亚、北京、厦门等地预计为最受欢迎的国内旅游目的地。有出行计划的游客尽量提前预订门票,避峰出行。 双节将出现两个出行高峰 10月1日为峰值 携程旅行网的数据显示,今年黄金周旅游将呈现三大特点:约50%的游客选择拼假出游,最长休假16天;黄金周转战海外,出境游人数超国内游;中秋国庆档期相撞,今年长假罕见出现了两
为培养高素质大数据分析与应用型人才,提升企业服务地方产业转型升级的能力。12月12日上午,商丘学院副校长单伟龙,商学院院长于世良,副院长袁凯,经济系主任孙双利与CDA数据分析师副总经理刘进,CDA北方区院校事业部总监任重开于商丘学院进行签约授牌仪式。
多年以来电子商务业务快速发展,尤其是移动客户端发展迅猛,移动互联网时代的到来让原本就方便快捷的网上购物变得更加便利,而淘宝作为国内最大的电商交易平台更是具有巨大的流量优势。
如果公司使用有一个多版本的项目,由于特殊需求,数据库必须放在他们本地,但是公司又需要汇总整个的数据做数据分析,这样就要实时更新每一服务器上的数据库来保证他们的数据为最新的并且要提取他们数据到总部来做数据分析。以前在这上面浪费大量的人力物力,贵公司出一款实时同步数据以及占用资源低,并且支持多个数据库互相同步的的解决方案。所以满心欢喜的来试用本产品。
入侵排查中,如何攻击溯源是一个很关键的环节,是一个收尾阶段,如何做到自动化攻击溯源,则更是技术能力的体现点。
“大数据”仿佛一下子闯进人们的生活。“可能就像电影《黑客帝国》一样,每一个元素,包括每一个房间,每一张床,每一张机票的check-in,每一部汽车的位置,每个景点的刷卡进入……一个系统就够了。”去哪儿
互联网、电商的快速发展,造就了“双11”、“618”这样的网购狂欢。消费者的消费行为也慢慢从线下扩展到线上,这带来的一个结果是:以往难以被收集的消费数据开始更多地被线上商家留存。这些数据有什么用?该如何用?在近期的数据侠线上实验室中,大数据服务提供商“网聚宝”品牌数据部首席数据分析师宋剑豪为我们带来了一场“接地气”的零售数据典型分析方法分享。干货满满,本文为其分享实录。
目录 一、认识数据——产品经理与数据分析 1.1 数据的客观性 1.2 面对数据的智慧 1.3 数据分析中的误区 二、获取数据——产品分析指标和工具 2.1 网站数据指标 2.2 移动应用类数据指标 2.3 电商类数据指标 2.4 UGC类数据指标 三、分析数据——产品数据分析框架 3.1 基本分析方法 3.2 数据分析框架——AARRR 3.3 数据分析框架——逻辑分层拆解与漏斗分析 3.4 数据
数据分析,大数据应用的一个主要场景,通过数据分析指标监控企业运营状态,及时调整运营和产品策略。大数据平台上运行的绝大多数大数据计算都是关于数据分析的,各种统计、关联分析、汇总报告,都需要大数据平台。
很多旁友在刚接触数据分析的时候,缺乏数据思维的支持,做起分析来感觉找不准方向,很难通过分析挖掘出数据的价值。因此,我今天给刚入行的新人们分享一种通用的数据分析思维,在很多种分析场景都可以借鉴使用。
清华的小伙伴们看过来,听说校内有一个能力提升项目备受各院系师生推崇,因为它: 群星璀璨——项目吸引了25个院系的名师加盟; 人气超高——历年报名同学累计超3000人,几乎涵盖校内所有院系; 校企联动——知名企业深度参与,提供各种资源和实践机会; 没错,它就是清华大学大数据能力提升项目~ 通过项目学习,同学们将进阶为具有跨学科交叉应用能力的复合型人才!非信息类同学将更具数据思维和跨学科交叉能力,信息类同学将更具产品营销思维和业务管理能力! 2022年秋,大数据能力提升项目全新升级为“3+X”培养方案,
日志分析在入侵检测中的应用越来越广泛,合适的使用日志,使日志产生巨大的价值,本文旨在探讨如何让日志的价值在安全领域发挥作用。
北京时间9月13号凌晨,全球最大的肾脏交易中心又开始了新一轮肾买卖计划。没错,你们翘首以待的iphone新产品又来了。 然而,产品特点和价格是否合理,以及卖一个肾够不够这个话题不是本文要讨论的问题,
hackread 资讯网站消息,两台配置错误的 ElasticSearch 服务器共暴露了约 3.59(35 9019902)亿条记录,这些记录在 SnowPlow Analytics 开发的数据分析软件帮助下收集而来。
实时报表分析是近年来很多公司采用的报表统计方案之一,其中最主要的应用就是实时大屏展示。利用流式计算实时得出结果直接被推送到前端应用,实时显示出重要指标的变换情况。最典型的案例便是淘宝双十一活动,每年双十一购物节,除疯狂购物外,最引人注目的就是双十一大屏不停跳跃的成交总额。在整个计算链路中包括从天猫交易下单购买到数据采集,数据计算,数据校验,最终落到双十一大屏上展示的全链路时间压缩在5秒以内,顶峰计算性能高达数三十万笔订单/秒,通过多条链路流计算备份确保万无一失。
先列举几个案例: (1)请估计一下2020年八月份在北京卖出有多少双鞋子? 显然,这是一个很开放的问题,并不像在学校里的题目都有标准答案,是需要经过自己的思考、定义和分析的。
领取专属 10元无门槛券
手把手带您无忧上云