首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

FATE × KubeFATE技术实践沙龙-北京站精彩回顾(下)

5月29日,由VMware中国研发中心和微众银行联合主办的FATE× KubeFATE技术实践沙龙-北京站顺利举办,来自VMware、微众银行、建信金科、光大科技、中国银联、星云Clustar、爱动科技等多位技术专家现场分享了联邦学习相关应用与实践案例...继续来看看  06 光大科技数据工程师李钰在主题演讲“金融控股集团联邦学习技术实践”中和大家分享了在数据强监管下,金融控股集团面临的数据协同挑战及解决方案,联邦学习基础平台构建思路以及利用联邦学习技术在跨机构数据挖掘和联合建模领域中针对客户拉通...中国银联研究员周雍恺博士在“企业级联邦学习平台建设的探索与思考”演讲中,就企业级联邦学习平台的建设过程中,所面临的问题,需要解决哪些挑战等问题,以银联在联邦学习的相关探索,从系统部署、应用实践以及生态建设的角度...演讲视频回放 08 星云Clustar联邦学习架构师柴迪在“基因领域的联邦学习落地”演讲中,和大家一起分享了星云Clustar在联邦学习领域的探索,分享了基因领域联邦学习落地的难题与解决方案。

33320

FATE × KubeFATE技术实践沙龙-北京站精彩回顾(上)

5月29日,由VMware中国研发中心和微众银行联合主办的FATE× KubeFATE技术实践沙龙-北京站顺利举办,来自VMware、微众银行、建信金科、光大科技、中国银联、星云Clustar、爱动科技等多位技术专家现场分享了联邦学习相关应用与实践案例...01 VMware中国研发中心总经理、“VMware创新网络”联合发起人任道远致开场辞,并发表“VMware创新网络介绍”主题演讲, 介绍了VMware创新网络重点关注的技术领域:云原生、物联网/边缘计算...演讲视频回放 04 VMware云架构师,CTO 大使王蔚东在“联邦学习在云端”主题演讲中介绍到VMware正在加快向混合云服务的转型,VMware Cloud Director能够为联邦学习提供多租户隔离...中国银联研究员周雍恺博士在“企业级联邦学习平台建设的探索与思考”演讲中,就企业级联邦学习平台的建设过程中,所面临的问题,需要解决哪些挑战等问题,以银联在联邦学习的相关探索,从系统部署、应用实践以及生态建设的角度...08 星云Clustar联邦学习架构师柴迪在“基因领域的联邦学习落地”演讲中,和大家一起分享了星云Clustar在联邦学习领域的探索,分享了基因领域联邦学习落地的难题与解决方案。

43020
您找到你想要的搜索结果了吗?
是的
没有找到

​联邦学习下的安全矩阵分解 | 2021 WAIC 论文分享

本届大会继续秉持「智联世界」的理念,以「众智成城」为主题,集聚全球范围内的人工智能创新思想、技术、应用、人才和资本,推动全球科技的创新协同。...8日下午,星云Clustar受邀出席同期举办的「2021 WAIC· 隐私计算学术交流会」,并进行了基于联邦学习的安全矩阵分解框架的论文分享。...本文第一作者为香港科技大学计算机博士在读、星云Clustar算法工程师柴迪;北京大学助理教授、博士导师、星云Clustar首席AI科学家王乐业(按姓氏拼音排序);第二作者为香港科技大学教授、星云Clustar...以下是由星云Clustar团队带来的《Secure Federated Matrix Factorization 》论文解读:本文围绕6个角度来讲述这篇论文,研究意义、先行概念、分布式矩阵分解、联邦矩阵分解...这样看来,我们的任务目标就实现了,但是让我们再思考一个问题,传输gradient就真的能保障用户隐私了吗

51030

群雄并起,隐私计算创业人的前路在哪里?——七位大咖论道 |GAIR 2021

到了今年,我们发现非常多的行业都有了隐私计算需求,因为隐私计算技术能够从数据开放角度和数据应用角度两方面,重构原有数据要素流通的方式。...星云Clustar希望以高性能的算力加速为行业赋能。 第三,坚持做新的科技创新。这些投入可能短期内看不到效益,但是从长期角度来说,一是形成技术壁垒,二是能在充分竞争的市场上找到一些别的出路。...姚明认为,隐私计算的开源,不管从科研角度还是从实验角度,对整个行业都有着极大的促进和帮助作用。...星云Clustar张骏雪补充道,开源也是推动隐私计算互联互通的重要可行路径之一。星云Clustar作为FATE开源社会的技术委员会单位,未来也会在FATE社区中积极推动互联互通的协议、标准等草案。...1、种瓜或许得豆 黄依群表示,瑞莱智慧和星云Clustar都是基石资本天使基金投的项目。星云Clustar是2019年投的,当时还没有隐私计算这个明确的主题

32930

我们是如何用 K8S 搞定1000个应用的测试环境

到今天为止,信也科技的研发团队已经全部使用星云系统作为开发测试环境了。星云是一套基于 K8S 的环境管理系统,它主要用于管理多个平行的测试环境。它维护这些测试环境,使它们可以稳定工作。...资源冲突,只有一套完整环境,资源成为了瓶颈,如果我们多复制几套环境 问题不就解决了吗? 但是问题来了,复制几套环境,如何复制这个环境呢?复制的资源成本和维护成本怎么控制?...架构及原理 星云的设计和实现 从用户的角度看大概是这样的。环境之间是完全隔绝的。 首先我们需要让每个环境正常的运行起来,相互之间不影响,如何实现这一切呢?...星云把规则推送到网关服务器上。这样通过网关和 Dns 的配合,星云系统完成控制层面的操作,网关和 DNS 执行数据流层面的操作。...每个环境的网关的规则是星云系统自动生成的,星云系统知道所有环境实例的状态,所以星云是这样写网关规则的,如果一个环境里有某个应用的实例,那么网关就把请求指向本环境实例,如果没有此实例,则把这个应用的目标指向

1.5K40

我们如何用 K8S 搞定 1000 个应用的测试环境

前言 到今天为止,信也科技的研发团队已经全部使用星云系统作为开发测试环境了。星云是一套基于 K8S 的环境管理系统,它主要用于管理多个平行的测试环境。它维护这些测试环境,使它们可以稳定工作。...资源冲突,只有一套完整环境,资源成为了瓶颈,如果我们多复制几套环境 问题不就解决了吗? 但是问题来了,复制几套环境,如何复制这个环境呢?复制的资源成本和维护成本怎么控制?...架构及原理 星云的设计和实现 从用户的角度看大概是这样的。环境之间是完全隔绝的。 ? 首先我们需要让每个环境正常的运行起来,相互之间不影响,如何实现这一切呢?...星云把规则推送到网关服务器上。这样通过网关和 Dns 的配合,星云系统完成控制层面的操作,网关和 DNS 执行数据流层面的操作。 ?...每个环境的网关的规则是星云系统自动生成的,星云系统知道所有环境实例的状态,所以星云是这样写网关规则的,如果一个环境里有某个应用的实例,那么网关就把请求指向本环境实例,如果没有此实例,则把这个应用的目标指向

1.9K20

2017首届江苏虚拟现实发展大会倒计时,一大波大咖带着干货即将“来袭”

9月8日,2017首届江苏虚拟现实发展大会将正式拉开序幕,在经过一段时间的紧张筹备后,这次由江苏省工程师学会主办、镁客网协办的虚拟现实发展大会可以说是“群星云集”,既有学术界非常有名望的院士、教授,也有技术大牛以及行业内一些优秀的创新者...VR+智能制造、技术的变迁和发展 8日当天,这次虚拟现实发展大会的重磅嘉宾——谭建荣院士将发表主题为《虚拟现实技术在智能制造中的应用》的演讲,站在学术的角度,给大家呈现VR技术在智能制造场景中的落地和应用...VR降价开始,今年的硬件生态格局在悄然间发生了很大的变化,而关于硬件和体验舒适度之间的平衡也是很多技术公司在不断尝试探索的,在这次虚拟现实发展大会上,专注于无线VR解决方案的传送科技创始人姜英才会带来主题为...在最后的圆桌对话中,毅达资本投资副总监王登泉、华捷艾米联合创始人沈瑄、中科招商业务副董事王小杨、英伟达茅勇以及新浪VR市场总监李鹤,将分别从投资人、创业公司、上游技术厂商以及媒体的角度围绕《VR/AR技术落地和行业应用创新...如此高逼格的大会怎么能少了它…… 在头脑风暴的主题演讲之外,现场还设置了一些特别的VR/AR体验, 可能是AR版本的《敦刻尔克》海报体验, 或者是这样的骑行旅游, 又或者 …… 想知道到底有啥新奇的体验

61580

AI助力数据驱动是否会改变NWP?(二)

主题会议评介 贾朋群 魏晓敏 3 会议成果:4个方面最新进展的审视 本次会议的主要目的,除了学术交流之外,还要通过与会专家讨论,针对关键主题,得到会议相对统一的认识。...或许因为专注于高性能计算方面的报告不足,会议忽略了主题5。基于会议共识报告得到的4个主题共识(表1),反映了会议的建设性意见和真知灼见。...为此,从2019年开始,关于AI技术开发的讲座、培训和研讨,成为ECMWF的业务常态,到2020年与ESA联合召开AI年会,就是为了跨越这道坎,让相关的业务研发人员更多地从AI角度思考和处理问题。...4)卫星云观测或最先受益于AI。如图14所示,卫星云探测中识别云块在地表上的阴影这一看似简单问题,却困扰了很长时间。...在爱沙尼亚注册的一家小企业Kappa公司借助AI技术,改进了哨兵卫星云识别码,在北欧获得突破后,即将给出基于AI的全球KappaMask Sentinel-2 云掩码解决方案,大大提升遥感云精度。

17510

云攻防课程系列(一):云计算基础与整体安全

概述 近日,绿盟科技星云实验室与北京豪密科技有限公司联合推出了一项云攻防技术培训课程。...然后,文章从云化风险分析、云安全概念模型以及范围和职责等角度出发,帮助读者深入了解云计算整体安全。最后,笔者对云安全能力发展趋势进行展望并介绍了星云实验室的一些主要工作。 二....由于数据的重要性加上云用户对数据的掌控权丢失,那么如何让用户放心地使用云,就必须解决云计算本身面临的各种安全问题。云计算的风险包括通用风险与具体场景的特有风险。...星云实验室提出了高效、沉淀、自动化的理念,从以攻促防的角度结合自研云原生攻防靶场Metarget,实现了攻击技术演进推动防守升级,加速攻击研究、培养对抗技能,加速防御能力验证三个主要目的,靶场方面,Metarget...从机构的角度,对自身相关的云上风险进行管理和缓解,则是非常必要和可行的。

41830

3分钟白话RocketMQ系列—— 如何发送消息

定时/延迟消息从发送方式角度来说,不算一种独立的消息类型。 Q2:RocketMQ怎么知道一条消息要发送给谁? 一般我们要发送一条消息给RocketMQ,需要创建这样一个消息体。...生产者每30秒获取一次主题的路由信息。这意味着消息生产者不会立即知道有新的 Broker 加入或者被移除。...从发送模式角度来说,RocketMQ有三种「消息发送模式」: 同步发送:调用发送消息方法后,同步阻塞,直到返回SendResult。...单向发送:无重试机制,存在丢失消息的风险。 注意:单向发送模式异常时RocketMQ-client默认不重试 总结 有哪些消息类型:普通消息、有序消息、事务消息 发给谁?...: 失败重试机制 3分钟到了吗?应该对RocketMQ如何生产消息有全面了解了吧。 如果还想了解更多,欢迎关注下一期内容。

47130

BCCon:区块链生态技术大会2018启动,聚焦区块链技术落地场景

时间:2018年8月18日-19日 地点:北京· 国际会议中心 大会主题:全球区块链生态技术大会 当前票价:2160元( 6折最低价抢购中) 报名方式:无论你是想要报名参会,还是想登台演讲展现自己,都可以跳转到官网链接...刘海峰,STB Chain Foundation主席,工信部MIC区块链专委会理事长,微软资深MVP 陈 浩,元界CTO,主导元界项目的开发 巨建华, BlueHelix 创始人,前火币网CTO 钟馥百,星云链联合创始人...张文君,猎豹移动区块链中心技术负责人 6大主题,聚焦前沿 核心技术 以比特币为代表的区块链应用的核心技术,包括分布式账本、共识算法、P2P网络等,这些技术如何演进和创新?...大会亮点重重,配得上你宝贵的时间 从技术角度出发,不讨论发币,只分享技术 从社区角度出发,希望引导社区向正确的方向前进 从内容角度出发,专题系统全面,演讲有层次有深度 从听众角度出发,重经验,谈实践,少概念

90140

3分钟白话RocketMQ系列—— 如何保证消息不丢失

Q2: 如何保证「消息存储」不丢失? 先想想什么情况下,消息存储会丢失呢? 场景1,消息保存到内存中,还没来得及刷盘到磁盘,机器宕机或者重启,导致内存中消息丢失。...注意,同步刷盘 和 同步复制 虽然能够保证消息不丢失,但是会严重降低性能,生产实践中需要根据实际情况综合评估。 Q3: 如何保证「消息消费」不丢失? 先想想什么情况下,消息存储会丢失呢?...因为各种原因消费失败,但是还是提交了消费位点,这条消息从业务角度来说就“丢失”了。 那怎么解决这个问题? 跟消息生产一样,其实思路是比较直接的,就是 「消息确认机制」和「失败重试机制」。...重试消息会被存入名为 "%RETRY%+消费组名称" 的Topic中,原始主题Topic会存入属性中。然后会基于定时任务机制,在到期时将任务再次拉取出来。...)、失败重试机制、死信队列机制 3分钟到了吗

45520

敏捷开发模式下的利刃:探索性测试(ET)--测试用例如何设计?

测试人员使用探索式测试从客户的角度评估软件的实际工作方式。它更注重的是「思考」和「学习」,不断的发现新的问题。...探索式测试是以用户的角度来测试,它为传统的结构化测试(即从底层开始测试)做了补充,以保护频繁迭代的用户体验。...制定探索式测程(Session):测程表(Session Sheet)、时间盒(Time Box)、主题(Charter)。...然后,我们根据项目的时间确定本次测试的主题和范围,创建一次探索式测试计划,如下图: ? 执行探索式测试计划,在测试的过程中按照旅行者测试方法的思路来创建用例: ?...星云测试 http://www.teststars.cc 奇林软件 http://www.kylinpet.com 联合通测 http://www.quicktesting.net

1.6K10

直击镁客网VR论坛现场,众大佬公布行业布局和战略

为了追本溯源了解VR从哪里来,将去往何处,2016年4月21日,镁客网在上海世博展览馆4号馆论坛专区举行“知本论”VR主题论坛“嬗变——虚拟现实的春天”。...论本”三大模块,与会嘉宾涵盖了VR整个产业链的各个环节,从芯片、VR系统方案提供商、硬件、软件,到VR游戏、VR视频、VR云平台、VR行业应用、交互技术解决方案和VR社交等,大家齐聚一堂,从各自领域的角度深入探讨对...镁客网“知本论”VR主题论坛现场 ?...全志科技和Nibiru睿悦信息VR一体机TURNKEY方案战略发布 镁客网创始人张培青先生在发布会后以主题为《嬗变——虚拟现实的春天》开场辞宣布了论坛的正式开幕。 论源——VR新时代,我们在等你!...黑科技展示 同时,现场还特设VR和智能硬件体验区,由得图网提供的DETU F4最新一代专业全景相机、七鑫易维提供的具有眼球追踪技术的VR眼控模组、映墨科技提供的星云Nebula VR眼镜、全影火柴提供的

46230

【犀牛鸟·学问】CCF-腾讯犀牛鸟基金线上学术报告—大数据空间下的图性能度量与评估(201902)

报告时间:2019年6月19日20:00-21:30 (因特殊原因,本次报告临时调整到周三) 报告形式:QQ群线上直播 (报名形式参见下文) 分享主题一 知识亦有结构——学术大数据空间中的...有鉴于此,我们相继从定性和定量两个角度出发,首次对知识载体之间形成的复杂结构进行了抽取和度量。...,分析其背后成因;继而,从定量角度上,我们基于所抽取的脉络树,首次引入了“知识熵”的概念来度量脉络树中的节点学术价值,并给出了知识熵的计算方法,将其扩展到了互知识熵和条件知识熵等内容。...上述机理和方法进一步应用在12个代表性学术文章、3篇经典学术专著以及nature、science刊物发表文章及其引文所分别构成的学术网络星云图中。...分享主题二 Alchemy:一个新的评估图网络性能的数据库 嘉宾介绍 陈广勇 腾讯量子实验室 腾讯量子实验室高级研究员。

76230

《吃透 MQ 系列》之打通 Kafka 的任督二脉

在 Kafka 集群中,每台机器都存储了一些 Partition,一旦某台机器宕机,上面的数据不就丢失了吗?...此时,你一定会想到对消息进行持久化存储,但是持久化只能解决一部分问题,它只能确保机器重启后,历史数据不丢失。但在机器恢复之前,这部分数据将一直无法访问。这对于高并发系统来说,是无法忍受的。...现在,我假设 Kafka 集群中有 4 台服务器,主题 A 和主题 B 都有两个 Partition,且每个 Partition 各有两个副本,那最终的多副本架构将如下图所示: ?...写在最后 本文以 Partition 为切入点,从宏观角度解析了 Kafka 的整体架构,再简单总结下本文的内容: 1、Kafka 通过巧妙的模型设计,将自己退化成一个海量消息的存储系统。...下篇文章将从微观角度切入,深入分析 Kafka 的设计原理,我们下期见!

47450

3分钟白话RocketMQ系列—— 如何存储消息

从实际物理存储的角度来看,每个主题Topic下的每个队列Queue对应一个ConsumeQueue文件。 生产者端的消息是顺序写入CommitLog,消费者端是顺序读取ConsumeQueue。...怎么保证存储消息不丢失? 刷盘机制 Broker在把消息写入日志文件的过程中,如果在刚收到消息时,Broker异常宕机了,那么内存中尚未写入磁盘的消息就会丢失了。...然而,如果Broker在持久化到磁盘之前发生故障,消息将会丢失。...## 刷盘策略配置 flushDiskType = ASYNC_FLUSH 注意,写入PageCache后,应用服务宕机消息不丢失,只有机器断电或宕机会有少量消息丢失。...和FileChannel、缓冲区增强 + 异步刷盘 策略 如何清理过期消息:按存储时长清理消息 3分钟到了吗

34010

你懂RocketMQ 的架构原理吗?

再换个角度想,对于面试MQ来说,其实我们需要深入的了解一个中间件来与面试官聊,其他的中间件了解基本原理就可以了(后文会讲解)。 所以接下来我们就以RocketMQ为敲门砖,一点一点了解MQ的奥秘。...没关系,RocketMQ是支持集群化部署的,部署多台机器,每台机器承受十万的并发不就可以了吗。 ?...MQ收到大量消息后,这些消息是不能实时消费掉的,所以就会存在消息的积压,同时为了保证消息不丢失,所以持久化是很必要的。 而对于海量的消息,单独一台机器是存储不下的。...退一步来讲,就算能够存储的下,一旦这台机器坏掉,数据就丢失了,无法保证消息的可靠性。 其实对于消息数据的持久化,和高并发的解决方案是类似的,看下图: ?...了解了这些概念后我们再重新讨论我们的主题,RocketMQ挂掉了怎么办 Rocket对此的解决方案是Broker主从架构以及多副本策略,上边介绍Broker的时候我们也说了,它是有主从的,我们看下图:

1K40

金木水火土,哪个不一样?

不同的理论、不同的角度能得到不同的解释框架。 在企业的用户研究中,尤其是定性研究中,同样一个主题的访谈,会因调研目的、访谈对象、访谈内容、访谈角度、分析角度、组织角度、表达方式等等而得到不同的框架。...我们在看市面上的各类研究报告时,也会发现,同一个主题有很多不同的模型结构(比如年轻人主题)。 那么,什么是好的框架,什么是坏的框架?我们如何评判一个框架?在分析时又追求什么样的目标?...做法——要达到这个标准,研究者要有深刻的洞察能力和开放的探索欲:从研究的切入角度,到研究的分析组织角度,都不能停止思考和深挖,避免停在信息表层,这种探索过程也是定性的魅力之一。...,需求更适合描述和解释现象:粉丝做公益植树、与身边人争执、在微博里声援,背后都是在维护偶像的形象,如果以行为把他们区分开未免丢失了深层的共性。...---- 看完今天的文章, 也别忘了QQ潮玩展正在火热开票中, QTX 2021,你准备好了吗? 点击马上购票 PS: ISUX 开通微信粉丝群啦!

77920

星云棋布,步步为“赢”,IDC的“合纵连横”

大数据产业创新服务媒体 ——聚焦数据 · 改变商业 近日,IDC在北京举办了主题为“星云棋布,步步为‘赢’”的2023 IDC中国生态峰会。...整体来看,IDC对大模型和AIGC的思考和判断是站在全产业链的角度出发的,涵盖了底层技术可能面临的更新迭代,以及未来应用场景的需求和发展方向等等。...周震刚从成单的角度看,国内企业出海的业务,更多的是以国内企业在海外做业务为主,真正的去国外拓展海外当地企业的业务和需求,其实还也有一些难点。...霍锦洁进一步解释,就像会议的主题星云棋布,步步为‘赢’”一样,云是整个IT行业的“重心”,生态大会中涉及的行业、企业非常多,就像星星一样,分布在不同行业、领域的不同角落,整个产业和生态都想知道未来IT

13110
领券