腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(5548)
视频
沙龙
4
回答
有哪些编程语言是用于机电
一体化
的?
、
有没有专为机电
一体化
编程而设计的语言?我知道LabView,这是一种
数据
流
语言,但不确定它的主要
平台
。 除了c/c++之外,你能向我推荐一些语言吗?用于机电
一体化
(机器人、传感器编程等)主题的任何语言。
浏览 0
提问于2012-11-27
得票数 1
回答已采纳
3
回答
当使用Spark结构化
流
时,如何才能获得当前批处理的聚合结果,如Spark
流
?
、
、
星火结构
流
( SSS )和星火
流
(SS)的一个很大的区别是SSS可以利用状态。它可以存储以前
批
的聚合结果,并将当前结果与先前的结果一起应用。因此,它可以从输入流的一开始就得到真正的聚合结果。在
平台
和框架方面,我们不能回到党卫军。以word计数应用为例,在火花结构
流
指南:中给出了该应用程序。当有一个"cat cat“在一个
批
,我的预期输出是cat|2。 当下一
批
浏览 0
提问于2018-01-23
得票数 3
回答已采纳
1
回答
为什么Apache气流不是
数据
流
解决方案?
、
、
、
我知道批处理依赖于
数据
的收集,
流
处理依赖于连续的
数据
。 请简单地解释一下,为什么Apache气流不是
数据
流
解决方案,而是批量处理。
浏览 3
提问于2022-04-18
得票数 1
1
回答
将火花流连接到
流
集输入
、
、
我想知道是否有可能提供输入来激发来自StreamSets的
流
。我注意到在StreamSets连接器目的地中不支持火花
流
。 我将探讨是否有其他方法将它们连接到一个示例POC。
浏览 3
提问于2016-07-06
得票数 3
回答已采纳
1
回答
火花结构化
流
避免延迟和检查点: startingOffsets最新版本不工作吗?
、
、
、
(分钟)似乎火花结构化
流
并没有很好地使用startingOffsets属性的最新。我不想读旧消息,只有重要的当前的!
浏览 3
提问于2021-10-01
得票数 1
1
回答
基于sk-学习模型的大查询预测
、
、
我已经创建了一个模型和版本在人工智能
平台
上使用相同的模型。它正在为在线预测工作。现在,我希望执行批处理预测,并将
数据
存储到大查询中,比如每次执行预测时它都会更新大查询表。 有人能建议我怎么做吗?
浏览 1
提问于2019-07-15
得票数 0
回答已采纳
1
回答
具有周期性更新静态
数据
集的结构化
流
、
、
流
和静态
数据
集的合并是结构化
流
的一个很好的特点。但是每一
批
数据
集都会从
数据
源中刷新。由于这些源并不总是动态的,因此在指定的时间段(或
批
数)缓存静态
数据
集将是一种性能增益。在指定的批处理期间/
批
数之后,
数据
集将从源重新加载,否则将从缓存中检索。 在星火
流
中,我使用缓存的
数据
集来管理它,并在指定数量的批处理运行后取消它的持久化,但是由于某种原因,这不再适用于结构化
流<
浏览 1
提问于2017-12-13
得票数 9
1
回答
是否有一个变量来识别火花
流
中的每一
批
数据
?
、
在火花
流
中,
数据
按
批
间隔进行处理。is first batch of data10s~15s is third batch of data是否有一个变量来识别火花
流
中的每一
批
数据
如果有这样的变量:我可以获得batchID的值来识别哪一
批
数据
,也可以通过batchID (如:window(……).filter(_.batchId == 1) )过滤<
浏览 6
提问于2016-02-02
得票数 3
回答已采纳
1
回答
tensorflow验证监视器
流
auc
、
在tensorflow验证监视器
流
auc中,它对流意味着什么?案例1:每次调用验证监视器时,都会重置auc状态,因为在每个验证步骤中,对10个
批
进行
流
处理。案例2: auc状态没有重置,因此
流
auc是从验证监视器的第一次调用中计算出来的。即,第一输出( 100步)从10
批
计算,第二验证输出(
浏览 5
提问于2017-06-09
得票数 1
回答已采纳
1
回答
火花
流
-我如何通知消费者一旦生产者完成?
、
、
、
一旦notify Consumer将所有
数据
发布到Kafka topic,Producer是否有可能有什么有效的方法来解决这个问题吗?更新: 每隔十五分钟,生产者就会得到
数据
,并开始将
数据
发布到Kafk
浏览 0
提问于2016-11-12
得票数 2
回答已采纳
1
回答
火花结构化
流
作业如何处理
流
-静态DataFrame连接?
、
、
、
我有一个火花结构化
流
作业,它从cassandra和deltalake读取映射表,并加入流df。我想了解这里的确切机制。星火是否击中了这些
数据
来源(卡桑德拉和德尔塔雷克)的每一个周期的微
批
?
浏览 2
提问于2020-12-02
得票数 1
回答已采纳
1
回答
Azure服务织物路由
、
、
、
我想得到一些建议,用于设计Azure中的IoT消息路由。我的当前方法是使用服务结构应用程序接收来自IoT集线器的所有消息,解析protobuf消息,根据其类型(protobuf内的属性)将消息发送到特定于类型的Azure事件中心。现在,应用程序从“自己的”事件中心获取消息并处理消息。 我不确定这是不是最好的方法。我不喜欢这样的事实,每种类型的消息都有一个事件中心。服务总线主题可能不是一个选项,因为我有很多消息(~30k /秒)。我真的需要一个事件中心来使这个
浏览 0
提问于2017-05-23
得票数 2
回答已采纳
1
回答
箭
流
端到端是免费的吗?
我对箭
流
很困惑。描述Arrow的许多来源都只是转述了 然而,据我所知, 对的描述,我的理
浏览 1
提问于2019-12-13
得票数 1
回答已采纳
1
回答
火花:如何附加到缓存的rdd?
、
、
每一
批
流
数据
都缓存不同的值。 如何通过将下一
批
中的下一个不同值添加到已经缓存的RDD中来构建缓存?
浏览 1
提问于2015-12-03
得票数 0
2
回答
外部批处理的火花访问
数据
帧(结构化
流
)
我想要在火花
流
的foreach批处理中创建和更新一个
数据
帧,并在下面的foreach批处理迭代器之外访问它,这就是我在火花结构化
流
中试图做的事情。是否可以从外部访问为火花结构化
流
中的每一
批
创建或更新的
数据
帧?= None) {} 我甚至不能访问临时表,这些表是从外部为每个
批
创建的。即使是在foreach
批
内更新的
数据
框
浏览 1
提问于2021-03-25
得票数 0
回答已采纳
1
回答
当
数据
库API不支持
流
时,如何处理大型
数据
集的内存问题?
我正在我们的应用程序框架中通过REST公开
数据
,并且需要处理这样的情况:潜在的数百万对象可以被查询而不受限制/抵消。
数据
库API不支持
流
,这种情况在不久的将来也不会改变。不利的一面是
数据
损坏的风险很小。我们的框架支持自引用,例如,有人会检索Person类型的所有对象。人id 500是指人id 1500。检索
批
1-1000,而person 500指的是person 1500.这些
数据
被流走了。然后删除具有id 1500的人,并且更新id 500的人的参考。已检索
批</em
浏览 1
提问于2015-01-19
得票数 0
回答已采纳
1
回答
处理spark结构化
流
中传入的运动
流
中的空批次
、
、
我们正在从kinesis读取
数据
,并使用spark结构
流
将其输出到文件中。当stream.these中没有
数据
时,kinesis实现正在生成空
批
吗?空
批
正在创建空文件作为输出?
浏览 24
提问于2019-02-27
得票数 0
回答已采纳
2
回答
如何避免Lambda体系结构中的代码冗余?
、
、
数据
被从文件或RDMBS中摄取 服务层将创建视图,这些视图将
流
和批处理的聚合
数据
结合在一起
浏览 2
提问于2018-09-18
得票数 1
0
回答
spark
流
比较两个批处理和筛选
数据
、
我想使用火花
流
比较两
批
和过滤
数据
第一
批
:aaa 0bbb 0第二
批
:aaa1ddd 0key type相邻的两个批次,最后一个批次的
数据
(类型为0)必须是前一个批次
浏览 3
提问于2017-06-07
得票数 2
0
回答
spark streaming是否必须完成前一
批
数据
的处理,然后才能处理下一
批
数据
,对吗?
、
我设置火花
流
时间间隔为5s。如果当前的5s接收了非常非常多的
数据
,而spark streaming不能在5s内完成,但下一
批
数据
即将到来。 spark streaming是否会同时处理下一
批
数据
?
浏览 10
提问于2016-07-02
得票数 3
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
数据编织Data Fabric:批流一体的数据智能融合平台
数据编织Data Fabric:批流一体的数据智能融合平台
DataPipeline在大数据平台的数据流实践
这软件,让人直呼:流批!
批流融合实时平台在好未来的应用实践
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券