腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
设计
google-cloud-platform
、
google-cloud-dataflow
我们需要您对以下场景的
数据流
设计提供指导。 需求:我们需要构建一个
数据流
作业来读取
数据流
MS
数据
库并写入Bigquery。我们需要
数据流
作业作为输入“表名列表”(源表和目标表名称)来读取和写入
数据
。问题:在每天的日程安排中,
数据流
是否可以将表列表(即50个表名)作为输入,并将
数据
从源复制到目标,还是将其设计为50个独立的
数据流
作业。
数据流
是否会自动调整员工数量-而不会降低源MS服务器?关键信息:源: MS
数据
浏览 4
提问于2021-12-13
得票数 -1
1
回答
云
数据流
中读取拼图文件的自定义源
google-cloud-platform
、
google-cloud-dataflow
、
parquet
、
apache-beam
、
dataflow
我需要读取用
java
编写的
数据流
中的拼图文件,并上传到bigquery上。有没有人可以帮我
写
一些代码或文档,告诉我如何编写自定义源或任何其他方法来读取云
数据流
中的拼图文件。
浏览 0
提问于2018-04-04
得票数 0
1
回答
如何在Android Renderscript中编写卷积乘法?
android
、
convolution
、
renderscript
我需要用RenderScript
写
一个卷积乘法,因为最终的应用程序将在安卓上运行。
数据流
将是一个图像。更具体地说,我不能使用forEach功能编写核心逻辑,虽然我可以用
Java
语言
写
,但速度太慢了!
浏览 1
提问于2012-04-10
得票数 5
1
回答
扫描主页以获取更新并下载
talend
在我的工作中,我需要由我们的客户安装一个软件。我的问题是,是否也有一些方法,例如,让一个程序,每小时登录页面,并检查是否有新的版本。如果有新的,我想下载它。我正在使用talend open studio做很多工作,也许我可以在那里构建应用程序来做到这一点。
浏览 0
提问于2015-10-14
得票数 0
2
回答
如何调度gcloud dataflowsql命令
google-cloud-dataflow
、
gcloud
、
schedule
、
dataflow
、
google-cloud-scheduler
我想安排我的
数据流
sql作业。这是我的gcloud命令 gcloud
数据流
sql查询'My SELECT查询‘--作业名称dfsql-2d7a0189-177fc4f9444 -us区域-east4 4-bigquery-
写
处理
写
-截断-bigquery-project dev-dp-myproject -bigquery-
数据
集mydataset -bigquery-table服务-帐户-电子邮件
数据流
-运行@myserviceaccount.iam.gserviceacco
浏览 2
提问于2021-03-05
得票数 1
2
回答
SSIS :创建具有不同行格式的平面文件
sql-server
、
ssis
、
etl
、
ssis-2012
、
bids
文件有表头、中间
数据
行、表尾行。输入将来自不同的表,我计划
写
3个独立的查询/sp来获得标题,中间行和脚注行记录。
浏览 4
提问于2017-04-08
得票数 4
1
回答
如何在
Java
上创建
数据流
图
java
、
eclipse
、
plugins
我是一名工程专业的学生,我学习了
数据流
图。我已经做了
java
文件的解析器。我找不到工具和插头 我寻找
数据流
图起诉
java
程序插件或开源代码使用eclipse。
浏览 4
提问于2012-05-06
得票数 3
1
回答
是否可以通过SSIS脚本转换传递列?
sql-server
、
ssis
、
etl
我有一个包含100+列的源代码。我需要通过一个脚本组件转换来传递这些内容,它只修改了几个列。 有没有一种简单的方法可以让我没有修改的任何列简单地通过转换? 目前,我必须将它们全部传入,并将它们分配给输出,而不做任何更改。这是100个专栏的大量工作,如果可能的话,我宁愿不要这样做! 仅供参考:没有唯一的键,所以我不能使用多播拆分记录,并在脚本组件之后合并它们。
浏览 7
提问于2019-02-21
得票数 2
回答已采纳
1
回答
不能将shell指向本地spring云
数据流
服务器?
spring
、
spring-cloud-dataflow
服务器-未知:>
数据流
配置服务器http://localhost:9393 无法联系位于‘http://localhost:9393’的
数据流
服务器:'
java
.lang.IllegalArgumentException服务器-未知:>
数据流
配置服务器'http://localhost:9393‘ 无法联系位于‘http://localhost:9393’的
数据流
服务器: '
j
浏览 21
提问于2019-10-09
得票数 0
回答已采纳
1
回答
通过云功能订阅google发布/订阅消息,而不是使用
数据流
google-cloud-functions
、
google-cloud-dataflow
、
google-cloud-sql
、
google-cloud-pubsub
我需要将这些
数据
实时放到cloudsql和bigquery中。
数据
正在以稳定的速度到来,关键是它们都不会丢失或延迟。将它们多次写入destination不是问题。
数据
库中所有
数据
的大小约为1 1GB。 使用主题触发的google云功能与google dataflow相比解决此问题的优缺点是什么?
浏览 26
提问于2020-02-27
得票数 0
回答已采纳
2
回答
Java
源代码的
数据流
图创建器
java
、
reverse-engineering
我正在寻找
Java
源代码的
数据流
图创建器。请给我推荐同样的工具。
浏览 9
提问于2010-10-28
得票数 1
回答已采纳
3
回答
java
-非常快速地写入文件
java
、
file
我得到了一个快速的
数据流
(对象),我想把它写到一个文件中。
Java
中有缓冲的文件对象吗? 我应该自己管理它并使用writeLines()吗?
浏览 1
提问于2011-05-23
得票数 2
回答已采纳
1
回答
加快Google Cloud Dataflow发布/订阅的读取频率
google-cloud-dataflow
我有一个从PubSub读取
数据
的
Java
数据流
作业。
数据流
读取一条消息大约需要5秒。 我怎么才能加快速度呢?我假设
数据流
是从PubSub中提取的,而不是PubSub将消息推送到
数据流
中。
浏览 0
提问于2019-08-10
得票数 0
1
回答
NiFi:使用
Java
API在不中断或停机的情况下修改流程
apache-nifi
有没有办法使用
Java
API动态修改NiFi流?用例是将处理器添加到活动
数据流
(
数据流
经该
数据流
)。新处理器应在流程开始时添加,而不会造成应用程序中断或停机。如果
Java
API不可用,请随时建议替代方案。我已经看过了。谢谢。
浏览 3
提问于2018-07-25
得票数 0
2
回答
在
java
中有没有好的
数据流
并发库?
java
、
clojure
、
dataflow
我目前正在研究并发的
数据流
模型,就像在Clojure和Groovy GPars中一样。有没有我可以从中受益的纯
Java
编写的库?我知道我可以导入或委托到Clojure或
Java
,但如果可能的话,我想要一个好的和专用的
java
API。
浏览 5
提问于2012-11-07
得票数 4
回答已采纳
5
回答
通过“嘈杂”的
数据流
发送和接收
数据
java
、
algorithm
我的
Java
程序将其
数据
保存到一个二进制文件中,并且(非常)偶尔该文件会因为硬件故障而损坏。通常,在几兆字节大小的文件中,只有几个字节受到影响。为了解决这个问题,我可以
写
两次
数据
,但这似乎有点过分了--我更喜欢将文件大小的增长限制在20%左右。 在我看来,这类似于在“嘈杂”的
数据流
上发送信息的问题。是否有
Java
库或算法可以将冗余信息写入输出流,以便在引入噪声时接收器可以恢复?
浏览 1
提问于2009-12-14
得票数 3
回答已采纳
1
回答
如何使用ssis将
数据
从表加载到维度
ssis
、
etl
我想从表中加载
数据
到维度,我不知道使用什么(控件),我是一个初学者,我所需要的只是一个视频教程,可以帮助这种情况。这对我来说似乎很难,因为维度与太多的表相关,将
数据
从自然表加载到维度表需要对
数据
进行转换,我还想知道如何转换
数据
…… 我使用的是adventureworks和adventureworksDW
数据
源,我想将
数据
加载到
浏览 2
提问于2011-12-10
得票数 0
1
回答
PySpark HDFS
数据流
读/
写
python
、
apache-spark
、
hadoop
、
pyspark
、
hdfs
我不想用Spark DFs做这件事,而是用
数据流
做HDFS交互。到目前为止,我的代码如下:sc = SparkContext() in_stream.close() 这段代码的第一个问题是,我不确定如何通过缓冲区从输入流中读取
数据
浏览 20
提问于2019-11-16
得票数 0
回答已采纳
2
回答
数据流
-
写
BigQuery -元组字典
python
、
apache-beam
、
dataflow
我试图在beam管道上执行最后一次转换(使用Google作为运行程序,但要测试DirectRunner),并且很难理解如何将行从元组更改为字典。我尝试使用一个自定义类来执行ParDo函数,该类将tuple转换为dict。我添加到TupToDict函数中的调试输出如下,所以我认为它应该能工作吗?任何帮助都很感激..。(我脱发后秃顶了。)为了测试我改变了方向。我也有'xxxxx‘的项目信息,等等。(u'A3VZVMI3JWCFPD', 5.0)avg_rating= 5.0 {
浏览 3
提问于2020-01-30
得票数 0
回答已采纳
5
回答
在
Java
中使用对象
数据流
还是原始
数据流
更有效?
java
、
object
、
io
、
stream
在
Java
中执行I/O操作时,是使用像ObjectInputStream这样的对象
数据流
还是使用像DataInputStream这样的原始
数据流
更有效(就计算资源而言 如果使用对象
数据流
更有效,那么当我们考虑到与创建对象相关的开销(尽可能少)时,对象
数据流
是否仍然更有效?
浏览 0
提问于2011-01-16
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
在你的 Java 程序里调用 Kafka 发起数据流
Java8 Stream 数据流,大数据量下的性能效率怎么样?
TCP交互数据流
单向数据流和双向数据绑定
AI续写Java多线程
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
云直播
实时音视频
活动推荐
运营活动
广告
关闭
领券