腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Logstash:
处理
大
消息
、
、
、
我正在尝试使用Logstash使用文件输入、json过滤器和elasticsearch输出来解析一条
大
消息
。在99%的情况下,这种方法工作得很好,但是当我的一条日志
消息
太大时,我会得到JSON解析错误,因为初始
消息
被分解成两个部分无效的JSON流。此类
消息
的大小约为40,000+字符长。此外,大多数
数据
都在一个数组中,所以虽然我可以使用脚本()更新Elasticsearch记录的数组,但我不能在Logstash中这样做。
数据
记录如下所示: { "variabl
浏览 8
提问于2015-05-02
得票数 5
1
回答
SimpleMessageListenerContainer
大
容量
消息
处理
、
、
、
、
我有一个传入的
数据
流,作为单独的
消息
发送到RabbitMQ。 我想将这些信息发送到需要一批
消息
的服务中。当我有一批1000条
消息
或5秒过期时,我需要将请求发送到服务。我确实看过方法doReceiveAndExecute(BlockingQueueConsumer consumer)和"receiveTimeout",但是由于这个变量在事务循环中,所以我可以在每次
消息
中等待我目前有一个通道感知监听器,它将
消息
批
处理
到一个
大
容量
浏览 2
提问于2015-12-24
得票数 2
回答已采纳
1
回答
在中插入没有值的
大
容量
、
如何从应用程序中查看哪些
数据
库接受?
浏览 0
提问于2013-03-13
得票数 7
2
回答
消息
分组可以做
消息
分段做的事情吗?
、
、
、
、
我正在开发一个用java编写的微服务,它将
消息
放到一个队列中。由于我使用的是JMS,因此无法使用
消息
分段来
处理
大
消息
。我想知道,
消息
分组是否也允许我
处理
大
消息
?所谓
大
消息
,我指的是比MaxMsgLength更大的
消息
。
浏览 2
提问于2021-01-29
得票数 0
2
回答
协议缓冲区
处理
非常
大
的字符串
消息
?
、
我们在一个特定的属性中有非常
大
的
消息
,就像这样 optional string datavalue=1;上面的
数据
值是非常
大
的文本
消息
。但是,我注意到当我将此
消息
发送到wire (通过REST)时,需要更长的时间才能得到响应。总是比XStream长两倍。我认为这可能来自于序列化时间。从谷歌文档来看,它说Protocol buffers不是为
处理
非常
大
的
消息
而设计的,尽管它可以
处理</e
浏览 0
提问于2010-07-30
得票数 1
1
回答
处理
大
训练
数据
我写这封信是为了询问如何将一个
大
的训练
数据
提供给张量流模型的原理。我的培训
数据
托管在csv文件中,基本上是使用下面的代码将
数据
加载到队列中。, batch_size=batch_size, capacity=512, min_after_dequeue=256, num_threads=8) Exp#1:一个140克
大
小的文件我认为在#2中,将
数据
加载到队列是一个瓶颈,但我已经使用了8个线程来加载
数据
。虽然训练
数据
中的示例有224
浏览 4
提问于2016-05-25
得票数 1
1
回答
Erlang如何
处理
非常
大
的
消息
?
我使用ODBC从
数据
库中查询表:Q = "SELECT * FROM TestDescription WHERE NProduct = " ++此函数将返回一个包含所有
数据
库
数据
的元组。将此
消息
发送到另一个进程:它可以很好地
处理
少量的行数,但是如果行数非常
大
,比如说大于一百万行,情况会怎样呢?erlang还能使用它吗?
浏览 0
提问于2012-03-16
得票数 3
回答已采纳
1
回答
如何在spring message listener中
处理
大量
消息
、
通过spring message listener在1小时内
处理
大
容量(320万条
消息
)的最佳方式是什么?在监听
消息
的同时如何
处理
异常?在此期间如何写入
数据
库?
浏览 1
提问于2015-10-25
得票数 0
1
回答
以GB为单位的
消息
大小的Kafka性能
我知道当
消息
大小从字节到几MB时,kafka在
处理
更大的
消息
时表现得更好。但是,当
消息
大小从千字节到千兆字节时,上述相关性是否成立?基本上,我有一个生产者吐出
大
消息
的用例-我不能将
大
消息
分解成小
消息
,因为我需要自动
处理
它。
浏览 4
提问于2014-12-05
得票数 1
1
回答
处理
大
时间序列
数据
、
、
、
我目前正在
处理
一些与熊猫有关的大型时间序列
数据
,我有一个速度慢得令人无法忍受的功能,我相信它可以做得更快。index partId colour timeProduced \ ...4 '026531|355
浏览 0
提问于2018-04-09
得票数 2
回答已采纳
3
回答
TSQL
大
容量插入行错误导致C#异常
、
、
、
、
我正在
处理
非常
大
的分隔文件。这些文件已经过预
处理
,以确保字段和行分隔符有效。偶尔会
处理
不符合TSQL约束的行(通常是
数据
类型问题)。在这种情况下,‘修复’输入
数据
不是一个选项。
大
容量插入在SSMS中完成,严重级别为16的错误
消息
记录到每个失败行的“
消息
”窗口中。尝试通过C# SqlCommand类执行此代码会在生成第一条严重级别为16的错误
消息
时引发异常,从而导致批
处理
失败。有没有一种方法可以通过C
浏览 2
提问于2012-07-20
得票数 3
1
回答
为什么收到一封Mandrill邮件要花这么长时间(有时)?
、
、
、
我使用Mandrill通过SMTP发送电子邮件,然而,有时它可能需要很长的时间,如在30-60分钟,然后我收到我的电子邮件。这似乎主要是当我发送到gmail和雅虎,但这可能只是一个巧合。
浏览 1
提问于2015-03-07
得票数 0
回答已采纳
1
回答
通过WCF发送二进制
数据
:二进制与MTOM编码
、
、
、
、
我在WCF以及通过WCF发送二进制
数据
方面的知识有限,所以这个问题可能有些初级。我想知道用BinaryMessageEncodingBindingElement和MtomMessageEncodingBindingElement发送
数据
的区别。还有一个小问题:带附件的
消息
和MTOM
消息
是一回事吗?
浏览 0
提问于2011-07-27
得票数 2
回答已采纳
1
回答
Flutter - myBackgroundMessageHandler从不在推送通知中调用
、
、
、
我正在使用带有firebase的库在flutter中进行推送通知。文档中说,myBackgroundMessageHandler是在应用程序在后台调用的。但这并没有发生。_fcm.configure() static Future<Map<S
浏览 0
提问于2020-11-12
得票数 2
1
回答
我们可以在Mule 4中使用SQS中的大有效载荷支持发送
消息
批
处理
吗?
、
、
、
在Mule 4应用程序中,我们能否在SQS发送
消息
批
处理
中使用
大
的有效负载支持?当我通过给出s3桶的详细信息来使用
大
的有效负载支持时,我仍然得到BatchRequestTooLongException。相同的配置在SQS发送
消息
中工作,但不
处理
发送批
处理
消息
。
浏览 12
提问于2021-12-28
得票数 0
1
回答
数据
库性能:表中的更多列如何影响设计/开发/性能
、
、
、
、
我有一个程序可以捕获许多不同类型的结构化
消息
。我需要将
消息
保存到
数据
库中。论坛对设计和性能的看法是:(b)对每种
消息
类型使用一个表,因此对于新
消息
类型,将向
数据
库添加一个新表。在性能方面,我指的是搜索所有
消息
(即搜索一个表与跨连接表进行
浏览 0
提问于2014-08-01
得票数 0
回答已采纳
1
回答
使用Apache轮询来自ActiveMQ Artemis的字节/大型
消息
、
、
在Camel路由的末尾,
消息
存储在Artemis队列中。运行在同一应用程序中的遗留组件定期使用ConsumerTemplate从其中提取它们。这对于带有纯文本体的Camel
消息
很好,但在使用字节数组主体时会导致错误:似乎Artemis将任何带有字节体的
消息
作为来
处理
。但是,在调试时,MessageListenerContainer似乎只在使用来自Camel路由中JMS端点的
消息
时使用。使用者端的messageConverter和mapJmsMessage:没有效果,它们在会话已经关闭时执行 生产者端的
浏览 4
提问于2020-01-08
得票数 0
1
回答
处理
大事务和小事务的单一分布式系统
、
、
生产者向此主题发布两种类型的
消息
。大型
消息
,需要更多的时间来
处理
,然后
处理
较小或快速的
消息
。小
消息
的体积
大
(80%)。使用者接收这些
消息
并将这些
消息
发送到我们的
处理
系统。我们的
处理
系统将一组微服务部署在Kubernetes环境中,作为pods (它提供了扩展选项)。 我必须得到的总
处理
时间为200毫秒每事务和系统
处理
速度(与缩放)到10000 tps。现在有什么更
浏览 8
提问于2022-10-27
得票数 0
1
回答
用于混合类型(json和大
数据
对象)的类型转换
、
我想在前端web应用程序和
数据
处理
管道之间代理混合内容
消息
。特别是,我需要发送一个
数据
三元组,包括: 我在1处查看Spring文档,了解可能的输入/输出转换。但是,我希望避免将这么
大
的
数据
编码给json。但是,除了将
消息
三重分
浏览 1
提问于2015-07-10
得票数 0
2
回答
symfony信使能以“
大
容量”
处理
消息
吗?
、
、
我想知道,因为我在symfony或其他资源上找不到任何东西,如果php的symfony/信使可以用任何异步传输来“批量”
处理
消息
的话。我知道RabbitMQ有一个功能,可以从队列中获取n条
消息
,并在一次运行中
处理
所有
消息
。更新 我知道批量
消息
不是(异步)
消息
概念的一部分。每个
消息
都应该单
浏览 2
提问于2020-05-19
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
平塘搭建智慧旅游平台 大数据促大旅游
大促突围:京东到家基于Canal的数据异构设计
数据处理:大物实验的终极神器
返利网数据研究院:受“618大促”影响,消费热情重新燃起
数据分析,10大数据可视化设计细节处理!
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券