首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

李卓豪:网易数帆数据中台逻辑数据湖的实践

内容分为五部分: 关于网易数帆 为什么做逻辑数据湖 怎么做逻辑数据湖 未来规划 精彩问答 01 关于网易数帆 网易数帆是从网易杭州研究院孵化出来的。网易杭研的重要职责是公共技术的研究和产品孵化。...2018年支持网易严选、考拉、音乐、新闻数据中台构建。通过在商业化过程对市场需求的摸索实践,终于在2019年形成了“全链路数据中台”解决方案,致力于将“数据生产力”的理念能力落实到解决方案中。...纵观网易大数据的发展历史,可以看到这个过程中贯穿了数据理念的变化。有数从公共数据平台逐渐转变为具备有业务属性的数据中台,最后逐步向“数据生产力”理念靠拢。...同时在落地过程中,形成了技术业务双循环的模式。双循环中涉及三个角色,两种驱动力。三方分别是内部用户、外部用户、数据中台;业务场景、技术前瞻是推动双循环的驱动力。...这两种驱动缺一不可:大数据技术和应用发展日新月异,数据中台的业务支撑能力特别依赖于底层的技术能力和前瞻性。 02 为什么做逻辑数据湖 1.

1.4K10

千帆课堂丨HR秘籍:如何5分钟搞定员工信息录入

仅仅40位员工的信息就花了整整一个下午来处理各种信息的录入、核查,接下来还有100+员工,这可如何是好。...但是在灵活用工招聘、新员工入职、员工保险信息登记、抗疫信息收集等多个场景中,经常需要把身份证图片信息整理到对应表格的情况。 【身份证信息快速录入有什么好办法?】...维格表+千帆场景连接器帮到你,通过千帆场景连接器预设的“身份证识别自动更新至维格表“,简单的几步操作,即可轻松完成批量的身份证信息快速录入啦!...参考样式如下: 登录腾讯千帆场景连接器的官网(pc端)https://ssp.cloud.tencent.com,在方案模版中心搜索选择“身份证识别自动更新至维格表“。...不管你有更多的场景和需求需要打通,还是作为应用方希望能和千帆合作,都欢迎加入我们的用户体验群哦~分享你的好场景、体验&需求,都有机会成为腾讯千帆场景连接器产品体验官,赢取腾讯虎年公仔哦!

1.2K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    如何设计数据中台

    数据中台设计方法论 数据中台建设方针:横向规划,各个击破。 横向规划即在数据中台规划初期,需要打通企业各个业务系,打破数据孤岛现象。其实就是我们建设数据仓库的阶段。...数据中台建设过程中涉及到大数据平台建设、数据仓库建设、模型算法、数据治理、数据服务等一系列工程,不可能一蹴而就,我们需要梳理业务场景,看他们需要什么样的服务先找一个业务场景,搭建起数据中台的服务能力,然后依次迭代...[在这里插入图片描述] 模型建设 模型建设是数据中台的重要部分,可以说数据中台的成败在于模型建设的好坏。模型分为我们常指的数据仓库的分析模型和我们的一些通用算法模型。...讨论 关于数据中台的建设,最初是阿里提出来的,但是这之前,很多企业其实已经有了类似的想法,也实施了部分。对于大型集团企业,中台方法论很实用。打破了集团各版块的数据孤岛,形成了统一的数据服务能力。...但是慢慢的很多人提出了,对于中小企业,中台方法论是不是太繁琐了,对于他们来说是负担,中小企业需要的也许是更快捷的迭代形式的数据服务。 那么关于中台建设,你怎么看呢?你的企业会选择中台吗?

    1.5K60

    从《中台战略》到《中台实践》,云徙科技如何拆解中台建设方法论?

    与此同时,关于中台的探索也正在由稚嫩走向成熟,典型标志就是以云徙科技为代表的中台企业,将中台建设方法论不断迭代更新。...中台前路其修远兮,企业如何求索?...“数字化转型的工具,就是数字中台。”包志刚指出。 互联网时代,“快”是核心竞争力,中台很大程度上就是将快速创新能力引入到千行百业,云徙科技深谙其道,在短短数年内,对于中台的实践也经历了几番变化。...随着中台认可度的提高,中台企业“百家争鸣”,每家做法都不同,业务中台、数据中台、技术中台、财务中台等中台层出不穷,但仍然没有解决中台的效率问题。...实际上,中台的规模化应用并不简单,业务中台建设工程量大,包括需求调研、分析、测试、生产环节、配置元素模块等等;此外,在B端的企业服务领域,不同行业存在不同需求,同一行业不同客户的痛点也千差万别;要用好中台

    53920

    体验文心千帆:开启智能大模型时代的新征程

    于是,我迫不及待地申请了文心千帆的测试服务,在本篇文章中,我将给大家带来我对文心千帆的使用感受以及对其中强大功能的介绍。...文心千帆的申请和使用感受 1.1 注册流程简单 申请文心千帆测试服务非常简单,作为对人工智能技术充满好奇的我,第一时间前往官方申请地址申请资格。...申请流程十分简单,只需填写一些基本信息,选择测试版本和使用目的,然后提交申请即可。不久后,我便收到了测试资格,并立刻开始了我的文心千帆之旅。...经过一天的等待,我的申请通过了,我收到了文心千帆平台的测试账号和相关凭证。接着,我下载了百度提供的SDK和API文档,开始了对文心千帆大模型平台的测试和开发工作。...1.2 试用初体验 首先我在后台创建了应用:海拥-AI 然后来到文心千帆的操作台,先尝试了大模型服务中的"在线测试"。我让它用python帮我写一个猜数字的游戏,响应速度很快。

    77940

    如何围绕MLSQL构建数据中台

    MLSQL 目前开源的部分包括三个组件: Console, 也就是Web控制台 Cluster, 方便管理和代理后端多个MLSQL Engine实例 Engine, 相当于MLSQL的JVM(脚本解释器...不过仅仅靠这三个项目是远远难以达到中台水平的。那还欠缺什么呢?...MLSQL Console中内置了一个简易的权限控制服务,MLSQL Engine会调用该控制服务来觉得哪些表的访问是否被合法授权。...调度系统 调度系统一般而言需要和MLSQL Console(或者你的Web控制台)进行深度整合。譬如我在debug完一个脚本后,我应该能够在Console里直接设置依赖/定时任务。...总结 通过MLSQL Engine强大的可扩展能力,MLSQL语言的简单和灵活性,再配合上面的几个系统辅助,一个横跨分析师,算法,研发,数仓,各业务线中的产品,研发,运营的数据中台就此可慢慢成形。

    43720

    【新】千帆神笔aPaaS_低代码应用开发_如何实现企业应用可视化开发- 腾讯云

    千帆神笔 aPaaS 是一款专注于企业级应用可视化开发管理的低代码开发平台。...image.png 应用场景 共建行业标准,共筑业务中台: 携手优质伙伴,共同打造行业应用模版,共享商业成功。 助力国内 SaaS 市场良性发展,解决企业定制化困境,让更多的行业实现数字化升级。...单击同意以上授权并添加按钮,授权同意添加千帆神笔 aPaaS应用。...image.png 操作场景(对接企业微信生态应用服务-增长点) 用户可以在企业微信上直接安装千帆神笔 aPaaS 第三方应用标准版,千帆神笔 aPaaS 也支持直接把应用发到企业微信自建应用工作台,使用的是企业微信代开发模式...企微应用快速代开发模式应用:(推荐开发者系统学习开发流程,快速上线业务应用,目前非常多企业应用快速增长中) image.png 千帆神笔 aPaaS 千帆神笔 aPaaS 是一款专注于企业级应用可视化开发管理的低代码开发平台

    1.9K31

    千帆 iPaaS x 事件总线,快速完成企业微信消息推送

    传统方式痛点 在云计算技术不断发展的今天,越来越多的团队倾向于使用云上服务完成业务系统的搭建,如何及时收到云上业务的通知推送成了许多团队面临的问题。...千帆 iPaaS x 事件总线触发云函数,简化接入方案 千帆 iPaaS 作为一种新型的云集成服务,将企业内外部间不同的系统或业务连接到一个统一的平台中,实现 SaaS 服务之间的连接。...场景案例 在云点播场景中,对云点播中的视频发起的上传、删除、视频处理等操作,都可以被称为一个事件,云点播在事件结束时,会立即通知 App 服务操作的执行结果,即事件通知。...投递目标配置,选择刚刚创建的千帆 iPaaS 集成流,EventBridge 将自动为您创建云函数,完成事件的接收与到千帆 iPaaS 的投递。...GitHub: github.com/serverless 官网: cloud.tencent.com/product/serverless-catalog 点击「阅读原文」,申请使用 千帆 iPaaS

    94020

    干货 | 如何基于DataWorks构建数据中台?

    阿里妹导读:为了应对众多业务部门千变万化的数据需求和高时效性的要求,阿里巴巴首次提出了数据中台的概念,经过众多项目的实践已经沉淀出了标准化的流程和方法论。如何构建一个数据中台?...原盒马在线数据平台研发负责人欢伯向大家分享新零售企业如何基于DataWorks构建数据中台的经验心得,从商业模式及业务的设计,到数据中台的架构设计与产品选型,再到数据中台构建的最佳实践,最后利用数据中台去反哺业务...当确定了这些业务形态后,我们再来聊数据中台如何去支撑这些业务,通过数据的打通来完成整个商业模式的闭环。 二 新零售企业产品技术架构设计 ?...DataWorks数据开发平台 前面更多讲述数据中台建设的一些思想、设计、架构、目标及要求,接下来我和大家聊一下如何使用DataWorks构建数据中台以及使用DataWorks平台的一些心得。...数据中台如何支撑业务 之前讲的都是基于DataWorks来构建新零售数据中台,最早我们提到数据中台一定要服务业务,现在我也介绍一下数据中台如何为业务服务的一些方式。

    1.1K11

    事件总线携手千帆 iPaaS,共同构建云上事件处理生态

    千帆 iPaaS 支持各种集成场景,企业可以通过控制台快速简单接入,通过配置、开发、部署、执行、管理和监控来实现业务的互通互联,有效降低用户系统集成难度和周期。...同时事件总线支持自定义事件的处理及筛选,您可以在事件总线中设置事件规则、自定义事件匹配或相关过滤逻辑。 01....消息推送 业务场景中往往会有告警推送、消息通知等需求,如腾讯会议的邀请推送、云上业务的监控告警等,也可以通过千帆 iPaaS 与事件总线一起实现。...如何创建 SaaS 连接器 具体操作步骤,请参考访问:https://cloud.tencent.com/document/product/1359/58599 ?...目前千帆 iPaas 企业集成服务处于内测阶段,可访问下方链接提交内测申请:https://cloud.tencent.com/apply/p/5tgx7ibxzl ? 识别下方 ?

    1K70

    中台之上(十二):如何快速设计业务架构?

    客户向某宝提出建立购买我司贵金属的合约申请,某宝将相关信息及客户在某宝的 PID(客户在某宝的身份标识)传给我司,由于一个客户可能有多个 PID,因此需要分别为其建立账户,该过程的处理,由我司与某宝新增的渠道负责信息传输...方案最终只是在原有的业务模型中增加了部分步骤和规则,就一个抽象业务模型而言,不需要再增加活动、任务这些较大的元素了。 模型化的业务架构工具对企业级需求分析的加速作用。...中台和组件化一样,都是通向快速响应的方式,单就快速响应而言不能简单比较孰优孰劣,基于企业级业务架构的组件化设计,其实优势还是在于有效连接战略与开发,实现上下贯通的一体化设计,这方面不是单纯追求中台的技术实现可以获得的

    71510

    腾讯云 EdgeOne:Open Edge AI 网关功能介绍

    百度千帆、阿里通义千问和字节豆包等大模型服务商。...LLM 服务商 已支持 Open AI、Minimax、Moonshot AI 、Gemini AI 、腾讯混元、百度千帆、阿里通义千问和字节豆包。 三、 操作指南 1....开通 Open Edge 腾讯云控制台 进入到 边缘安全加速平台 EO  在左侧菜单栏,单击 Open Edge,如您之前未申请开通,则需先申请开通使用权限,请点击 立即开通  注意:因当前执行分批限量用户测试... Endpoint AI 网关后端的对应的 Endpoint 即为大语言模型(LLM)服务商,当前已支持 Open AI、Minimax、Moonshot AI 、Gemini AI 、腾讯混元、百度千帆...如何快速创建并配置 AI 网关? 请参见操作指南。 3. AI 网关是否可支持更多LLM 服务商? 如当前 LLM 服务商不满足您的诉求,您可反馈给产品方进行评估。

    3K50

    企业级数据中台如何做?

    数字化转型如何做才能成功? 这是近5年笔者在进行数字化转型咨询及指导项目实施过程中,与金融、保险、证券、制造、交通、能源、零售等行业的企业高管第一次见面时被问得最多的问题。...在过去的20多年间,笔者参与过企业流程再造(BPR)、企业资源计划(ERP)以及其他各种企业系统的定制化开发项目,为数百家企业做过数据中台建设、数字化转型和各类IT实施项目的规划咨询,逐渐意识到传统方法已经不再适用于现代企业数字化转型的需求...精益数据方法从业务问题出发,帮助企业打造轻量级、高响应力的精益数据战略,构建运营式、主动式、迭代式、智能化、场景化、轻量化的数据治理体系,急用先行,建设业务价值凸显的精益数据中台,保证数字化转型工作持续...——陈方博士 前厦门象屿集团总裁 ▼ 本书围绕精益数据方法,全方位阐述了数据驱动数字化转型的战略、方法、产品、中台、 组织文化等内容,并融入了大量的实战案例和作者的深入思考,涵盖范围广、内容扎实、论 述精辟...——陈运文 达观数据董事长 ▼ 市场上众说纷纭的数字化转型方法中,有很多只是套上了数字化和中台的壳子,实质上 依然是传统的信息化规划和 ERP 建设方法,以至于我长期困惑于数字化和信息化的本质区 别到底是什么

    1.6K20

    【神笔应用连接器】9月产品能力月报

    01 深度融合企微 1、神笔应用连接器(即:千帆aPaaS)应用支持绑定企业微信代开发模板,实现定向交付和模板中心上架。...1.1 服务商可以在企业微信管理后台设置企业微信代开发模版; 1.2 服务商在神笔应用连接器(即:千帆aPaaS)平台绑定代开发模板和应用; 1.3 服务商可以选择将应用分享给租户,若上架到神笔应用连接器...(即:千帆aPaaS)模板中心,则模板中心详情会展示对应二维码; 2、用户可以在神笔应用连接器(即:千帆aPaaS)扫码直接安装代开发应用到企业微信工作台,同时在企业微信和神笔应用连接器官网使用。...目前该项代开发应用模式对安装了企业微信神笔应用连接器(即:千帆aPaaS)的租户开放,腾讯云租户待上线状态,敬请期待!...---- 识别下方 二维码,添加管理员企微,申请进入「产品交流体验群」

    93120

    神笔应用连接器深度融合企业微信

    针对以上问题,企业可以通过神笔应用连接器(即:千帆aPaaS)图形化业务建模、页面设计、流程编排创建全新应用,同时也可以将多个SaaS应用按业务逻辑和审批流程进行自定义连接。...企业在应用开发完成后可一键发布到企业微信工作台,更高效的服务客户。 01 全面接入企业微信代开发模式 ·什么是企业微信代开发?...神笔应用连接器也在不断深入挖掘餐饮、教育、交通等行业子场景,如供应链管理、校园管理、宿舍管理等,在实践交付中深化行业业务理解,沉淀更多应用和解决方案,推动企业数字化转型。...未来,腾讯千帆也将会继续携手企业微信,以企业微信为端,通过千帆的企业应用连接器连接各类SaaS应用,构建优质的一体化产品,同时依托企业微信连接微信生态的优势,帮助企业更高效的连接客户和服务用户。...---- 企业微信管理员扫码 安装神笔应用连接器 识别下方 二维码,添加管理员企业微信 申请进入「产品交流体验群」

    1.1K20

    如何利用AI优化知识中台的用户体验

    随着人工智能(AI)技术的飞速发展,将AI融入知识中台的设计与优化中,已成为提升用户体验、增强用户满意度与参与度的重要途径。...本文将从用户界面优化、智能交互设计、个性化推荐及持续学习优化四个方面,探讨AI如何助力知识中台的用户体验升级。...一、用户界面优化:智能布局与动态调整AI技术能够分析用户行为数据,理解用户偏好与习惯,从而自动调整知识中台的界面布局。...此外,AI还能自动收集用户反馈,形成闭环反馈机制,帮助知识中台团队不断优化内容质量、调整教学策略,确保学习体验的持续改进。结语总之,AI技术的引入为知识中台的用户体验优化提供了强大的技术支持。...未来,随着AI技术的不断成熟与普及,知识中台的用户体验将迎来更加广阔的发展前景。

    15910

    游族网络运维总监:如何运维千台以上游戏云服务器

    本次分享主题为“如何运维千台以上游戏云服务器”。重点是云时代的运维,包括游戏上云部署整体方案、游戏服务器批量运维管理,并对企业选择RDS还是自建MySQL数据库给出了自己建议。...ALLINONE模式或者非集群模式的游戏业务场景下,会存在多达好几千个MySQL实例,若是要按常规的MySQL备份方案来实施,管理难度和成本都要翻好倍。...整个迁移过程分为以下几步: 第一步提前准备资源,在阿里云提前申请好资源,初始化环境并把VPC与自有机房的网络打通,实现内网互通为数据同步做好准备; 第二步提前同步数据,使用Xtrabackup备份在线把...在迁移到云的过程中,阿里云的技术支持起到了关键作用,线上线下及时沟通,以及特定技术的定制,保证了整个迁移过程的顺利进行。 如何去选择合适的数据库?...在游戏迁移过程中,遇到了很多困难,其中一点是选择自建MySQL还是RDS。

    8.7K80

    架构师如何理解中台方法论

    架构师必须具备结构化思维,那么如何理解最近很火的中台战略呢,2019年是中台元年,中台是否真的是解决企业级业务架构的良方,还是毒药,这个需要架构师具备高瞻远瞩的技术和业务视角,才能充分理解中台方法论。...中台是企业级共享服务平台,中台也是能力的枢纽和对能力的共享;中台不是微服务,因为中台不仅是一种技术架构,还是企业进行数字化转型的整体参考架构;以服务的方式提供共享能力的平台就是中台。 中台的作用?...中台应该包含哪些内容?什么能力应该在中台里面,中台与企业现有的ERP、CRM是是什么关系?如果建设了中台,中台应该怎么发挥作用,而不是让企业陷入建设另一套IT系统的老路?...笔者认为,中台要发挥作用,应该从业务触达的优先级来建设中台。中台是从多个相似的前台业务应用共享的需求中产生的,所以最先要落地的中台是业务中台。...中台与平台的区别 中台是企业级的共享能力平台,中台是大平台,但是平台并不是中台,每个业务部门都会有平台,但是中台对于一个企业来说只有一个。

    1.1K30

    腾讯云 Serverless x 千帆 aPaaS,携手共助企业创建应用连接

    什么是腾讯千帆 aPaaS? 腾讯千帆 aPaaS 是一款专注于企业级应用可持续开发管理的可视化、高效能云上开发平台。...腾讯千帆 aPaaS 通过这种思路让开发者能够有工具、有开发框架进行开发,帮 SaaS 企业在做定制化开发时大幅降低人力投入,提高效率。 ? 02. Serverless 云函数功能支持 1....SCF 版本管理支持应用管理 千帆 aPaaS 应用自定义代码扩展部分的部署、删除、版本发布,通过函数的部署、删除、版本发布实现,SCF 提供函数操作相关 API。...千帆 aPaaS 当前提供设计态和运行态两种环境,用户在设计态进行应用开发,开发调试完成后部署到运行态,由千帆 aPaaS 应用自定义代码扩展部分通过函数版本管理功能实现应用设计态到运行态的部署。...SCF 命名空间支持多环境管 SCF 命名空间可支持千帆 aPaaS 平台更多环境扩展和管理。 03. 千帆 aPaaS 内测申请 千帆aPaaS 现已开放内测,扫描下方二维码,申请内测体验。 ?

    1.4K40
    领券