腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
视频
沙龙
1
回答
如何优化存储数据,以便在谷歌云上使用PySpark
apache-spark
、
pyspark
、
parquet
我将使用PySpark运行一些东西(回归、ML等)。在相当大的结构化数值数据集(>1TB)上。目前,谷歌云存储上的数据是CSV格式的。是否将数据转换为其他格式(Parquet等)?在csv中加速阅读火花,还是阅读速度大致相同?
浏览 2
提问于2017-06-27
得票数 0
回答已采纳
1
回答
腾讯云高级架构师认证考试模拟题有没有?
认证考试
腾讯云高级架构师认证考试模拟题有没有?题型是什么样的?
浏览 1036
提问于2020-06-17
2
回答
使用Terraform创建Google表
google-cloud-platform
、
terraform
、
google-cloud-sql
、
terraform-provider-gcp
、
infrastructure-as-code
我正在尝试使用terraform创建Google云sql表。 但是,似乎只有google实例和sql数据库可以通过terraform创建,并且使用cloudshell我们可以创建sql表。 但是,我尝试使用terraform创建表,无论是直接使用terraform脚本中的sql脚本,还是仅仅引用terraform脚本中的sql脚本,其中thse sql脚本将存储在某处,例如云存储。 任何关于同样的线索/建议都会很有帮助。 提前谢谢。
浏览 12
提问于2021-12-27
得票数 1
1
回答
你好,我们有些视频想通过小程序给用户播放看,请帮忙推荐个方案?
云点播
、
对象存储
、
微信
、
小程序
、
小程序·云开发
你好,我们有些视频想通过小程序给用户播放看,请帮忙推荐个方案,视频存储在哪里?流量怎么走?小程序的云开发的存储能不能用?
浏览 196
提问于2020-12-27
1
回答
每天将数据从大查询加载到Postgre云sql数据库
google-cloud-platform
、
google-bigquery
、
google-cloud-sql
我有一些表要从大查询加载到数据库。我需要每天都这样做,并在云sql中创建一些存储过程。每天从大型查询加载表到云sql的最佳方法是什么?传输数据和将云sql保持在24/7上的成本意味着什么?感谢你的帮助。 谢谢你,J。
浏览 4
提问于2021-06-09
得票数 1
回答已采纳
1
回答
在Google中加载数据的最快方法应该是什么?
google-cloud-platform
、
google-bigquery
我想在谷歌云bigQuery中加载大容量的数据。 我手头的所有选项(使用UI和API)是什么,最快的方法是什么? 蒂娅!
浏览 0
提问于2018-07-13
得票数 1
回答已采纳
1
回答
恢复存储在s3桶中的mongodb数据库,而不加载到本地机器
mongodb
、
amazon-web-services
、
amazon-s3
我在一个s3桶(tar文件)中备份了一个mongodb,并且我希望将它恢复/导入到mongodb云地图实例中,而不让数据通过我的本地机器,因为它是一个非常大的文件,这可能吗?
浏览 6
提问于2022-11-12
得票数 0
2
回答
CPU和内存在云中是有限的,那么可伸缩性在哪里呢?
vps
、
cloud
、
scalability
我不明白云,CPU是有限的,内存也是有限的,可伸缩性在哪里?它不是和VPS一样,带宽成本更高吗? 那么云计算提供了什么扩展优势呢?
浏览 0
提问于2011-03-04
得票数 4
回答已采纳
2
回答
腾讯云向量数据库支持百川7b大模型吗?
腾讯云
、
模型
、
向量数据库
你好,腾讯云向量数据库支持百川7b大模型吗?我们可以把处理放在腾讯云向量数据库处理后,接入百川7b大模型吗?
浏览 68
提问于2024-03-20
1
回答
如何快速将大量数据写入txt文件
c++
、
performance
、
stream
、
streamwriter
最近,我尝试使用Visual Studio2010中的C++将点云数据写入.txt文件。一开始我使用ostream输出数据,但我发现写入数据时速度很慢。 我的代码: std::ofstream outfile; outfile.open(filename.c_str()); for(int index = 0;index < pointcloud.size();index++){ outfile<<pointcloud[index].x<<pointcloud[index].y<<pointcloud[index].z <<poin
浏览 23
提问于2017-03-08
得票数 0
2
回答
用于统计分析的服务器架构
cloud-computing
、
architecture
目前,我正准备就如何设计一个处理云上统计数据计算的系统作出决定。 我想知道我应该使用什么样的服务器结构来轻松地使用云来扩展计算。 更具体地说,我想知道,为了计算统计数据,我是否应该只使用云或混合(专用服务器和云服务器)。 我目前正在构建的服务将为我的客户分析移动数据。 客户端越大,DB越大,计算越多。 如果您知道最适合这种场景的最佳服务器设计模式,我将非常感激。
浏览 0
提问于2011-07-13
得票数 0
回答已采纳
2
回答
Google BigQuery,如何将数据从google云存储加载到BigQuery
google-bigquery
、
google-cloud-storage
我切换到大查询,因为高性能。但是不知道如何将数据从上传到大型查询数据库。还有一些问题..。我可以直接访问我的数据库从谷歌云存储,同时使用大查询。我要先把它转换成某种格式吗?如何继续更新大查询数据库到我的谷歌云存储数据库。 提前谢谢。
浏览 9
提问于2016-02-25
得票数 1
回答已采纳
1
回答
同态加密能在云中实现程序完整性(验证)吗?
homomorphic-encryption
据我所知,同态加密可以用来保密数据,同时仍然允许对数据进行计算。从另一个问题中,我发现还可以通过重新计算结果来验证计算的完整性(我的意思是可以验证返回值确实是所请求的计算的结果)。 我对一个不可能重新计算的场景感兴趣。例如,原始数据可能不再可用,或者原始数据非常大,重新计算成本太高。是否有其他方法来验证结果是否与所需的计算相对应? 也就是说,假设我想在云中使用同态加密来执行r = a + b + c操作。一旦云返回结果r,如何验证r是a + b + c的结果,而不是a + b或其他计算的结果?
浏览 0
提问于2018-08-06
得票数 3
回答已采纳
2
回答
哪个谷歌云存储最适合我的数据
google-app-engine
、
google-cloud-datastore
、
google-cloud-platform
、
google-cloud-storage
、
google-cloud-sql
我正计划将我的整个系统迁移到google云平台。目前,我正在运行mysql、apache、nodejs和角js的组合。随着数据呈指数增长,Mysql的速度越来越慢。系统处理大数据分析。我需要具有最短查询时间的IO密集型数据库。目前,我已经构建了mysql数据库,并且根据应用程序的要求,我需要非常频繁地查询数据以获取分析数据和原始数据。Google建议我使用Cloud,但是没有任何服务方面的经验,我对此并不确定。 请为我的应用程序推荐最合适的google,包括云扳手、云sql、云数据存储、大查询和云大表。 如有任何建议,将不胜感激。 PS:我正在考虑使用google计算引擎。
浏览 4
提问于2017-08-11
得票数 1
回答已采纳
3
回答
如何从oracle数据库中提取数据并保存到Google云平台
oracle
、
google-cloud-platform
需要从oracle数据库中提取数据并存储在Google云平台中。数据大小约为10 TB。有没有可能通过Spark?数据必须每月传输一次。在GCP中存储和处理的数据如下: Oracle数据库到云存储(不必做CSV导出),然后它将是干净的,并准备在Dataprep中,这将通过数据流进一步处理,最后它将被存储在Big Query下(从大查询数据科学家将使用数据来创建他们的模型)。 在此过程中不能使用第三方工具。任何开源工具都是允许的。 我正在考虑从spark中提取数据(通过将DataProc用于spark作业),并将其存储在GCP (任何一个云存储或大表或大查询)中。通过云sql -这是不可能的,因
浏览 2
提问于2019-11-17
得票数 0
1
回答
大numpy矩阵作为数据流侧输入
google-cloud-dataflow
、
apache-beam
我试图用Python编写一个Dataflow管道,它需要一个大的numpy矩阵作为侧输入。矩阵保存在云存储中。理想情况下,每个Dataflow工作人员将直接从云存储加载矩阵。 我的理解是如果我说matrix = np.load(LOCAL_PATH_TO_MATRIX),然后 p | "computation" >> beam.Map(computation, matrix) 矩阵从我的笔记本电脑发送给每个数据流工作者。 我如何才能指示每个工作人员直接从云存储加载矩阵呢?是否有用于“二元水滴”的光束源?
浏览 3
提问于2017-05-13
得票数 1
回答已采纳
1
回答
使用Python而不使用pyodbc将数据大容量装载到SQL Server的最佳方法
python
、
sql-server
我想将数据从我们的云环境(pivotal cloud foundry)加载到SQL Server中。数据从API获取并保存在内存中,我们使用tds将数据插入到SQL Server中,但在文档中我看到的使用批量加载的唯一方法是加载文件。我不能使用pyodbc,因为我们在云环境中没有odbc连接。 如何从字典中直接进行大容量插入? pytds不直接提供大容量加载,仅从文件提供大容量加载
浏览 0
提问于2019-12-06
得票数 0
1
回答
将大查询中的日期格式从DD-MM-YYYY转换为YYYY-MM-DD,使用'text files on cloud storage to big query‘数据流模板GCP
google-cloud-platform
、
google-dataflow
我是GCP新手,需要一些帮助来解决我的问题。 我正在创建CSV文件,json文件和java脚本文件,并上传到GCP存储桶中。创建“云存储上的文本文件到大查询”数据流模板以将数据填充到bigquery中。 我需要一些帮助转换的日期格式从DD-MM-YYYY到YYYY-MM-DD在大查询中使用‘文本文件在云存储到大查询’数据流模板在GCP中。
浏览 12
提问于2021-06-12
得票数 0
1
回答
直接读取实时数据库与使用云函数
firebase
、
firebase-realtime-database
、
google-cloud-functions
我一直在读这篇关于直接读取实时数据库与调用返回数据库数据的云函数的文章。 如果我返回一个相当大的数据块,例如一个包含来自云函数的代表50个用户评论的数据的json对象,这算不算出站数据(Egress)数据?如果是这样的话,每月每gb的费用是0.12美元吗? 注释是这样存储的,并带有一个增量键。 comments: [0 -> {text: “Adsadsads”}, 1 -> {text: “dadsacxdg”}, etc.] 此外,我已经了解到,您可以使用客户端sdks调用goOffline()和goOnline()来停止并发连接。关闭和打开数据库连接是否有任何成本,或者只是
浏览 9
提问于2020-10-04
得票数 1
回答已采纳
1
回答
google云功能需要大型(3Gb)参考数据文件来计算结果。
google-cloud-functions
我想编写一个运行生物信息学工具的google云运行函数。该工具将一个大的3Gb参考数据文件作为只读输入() +一个小的第二个文件,根据用户输入的不同而变化。 我应该尝试将引用数据文件构建到我的坞映像中,还是有更好的方法?
浏览 4
提问于2020-06-21
得票数 0
回答已采纳
1
回答
腾讯云如何制作3D架构图标?有什么网站支持的?
云服务器
、
云直播
、
网站
、
金融
、
企业
想制作类似阿里云等三维图标架构,目前腾讯云只支持2维图标,希望可以出3D图标架构,方便技术同学部署,画出来~
浏览 384
提问于2021-11-02
1
回答
我还有半年免费使用云服务器,现在参加208元抢购云服务器,时间是从半年免费使用完后开始计算的吗?
云服务器
请描述您的问题 标题:2017腾讯云11.11大促 给你实实在在的优惠 地址:https://cloud.tencent.com/act/double11 浏览器信息 Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36
浏览 246
提问于2017-11-02
1
回答
从excel升级到实际数据库
database-design
、
csv
、
excel
刚开始我的第一次实习,我可以得到一些指导来接近这个项目给我。简单地说,所需要做的就是创建一个数据库,然后从excel电子表格中传输数据,然后通过FTP自动将数据输入到新的数据库。我对SQL和基本数据库任务很满意,但我不确定为一家小公司创建一个新数据库的过程。 不幸的是,我在上述公司没有任何DBA资源,也没有在组织层面上管理数据库的经验。考虑到DB每天都会自动接收数据,我不能将其托管在本地计算机上,而是宁愿使用云服务或prem w/ remote访问来承载它,对吗? 你将如何处理这项任务?
浏览 0
提问于2022-07-08
得票数 1
1
回答
这个月套餐是按周期算还是按使用时间算?
费用中心
请描述您的问题 标题:年底大酬宾-腾讯云 地址:https://cloud.tencent.com/act/bargin?fromSource=gwzcw.634679.634679.634679#cvm_hot 浏览器信息 Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/62.0.3202.94 Safari/537.36
浏览 186
提问于2017-12-11
3
回答
基于云的计算机视觉
networking
、
video
、
vision
有什么方法可以在云上进行计算机视觉吗?这个想法就像人们登录一个网站,然后摄像头被激活,视频数据通过互联网发送到服务器。服务器对这些数据进行处理,并将处理后的数据实时或至少每秒10帧传回给用户。 这可行吗?在网络方面,我们需要什么样的技能?我知道视频流是其中的一个组成部分。另外,我们如何设置服务器?分布式系统是否可以在有限的时间内考虑非常大的计算?
浏览 0
提问于2011-03-04
得票数 4
1
回答
使用云函数(替代函数?)从云存储将数据加载到BigQuery中。
google-cloud-platform
、
google-bigquery
、
google-cloud-storage
、
google-cloud-functions
、
etl
我目前正在使用云函数将数据从云存储中的csv文件加载到BigQuery。 然而,云函数有一个超时限制,我希望这些文件在会引起问题的地方变得足够大。 此外,插入大查询仅限于10mb/insert_rows。 我还能用什么代替云函数来实现这个功能呢?需要在文件放入云存储时触发。
浏览 2
提问于2019-04-13
得票数 1
回答已采纳
1
回答
按今天日期查询Google Big Query Table
google-cloud-platform
、
google-bigquery
我有关于谷歌大查询表的查询。我们目前正在寻找根据当天上传到云存储中的文件来查询大查询表。 含义: 我必须根据每天的数据将数据加载到大型查询表中,并将其加载到云存储中。 当我查询时: select * from BQT where load_date =<TODAY's DATE> 我们可以在不将日期字段添加到文件中的情况下实现这一点吗?
浏览 17
提问于2021-01-12
得票数 1
回答已采纳
2
回答
通过1111活动买了一个云主机,年限选错了,想升级成3年,怎么弄?
费用中心
、
云服务器
请描述您的问题 标题:2017腾讯云11.11大促 给你实实在在的优惠 地址:https://cloud.tencent.com/act/double11/expand 浏览器信息 Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.113 Safari/537.36
浏览 241
提问于2017-11-02
1
回答
300元的云服务器续费是什么价格?
云服务器
请描述您的问题 标题:2017腾讯云11.11大促 给你实实在在的优惠 地址:https://cloud.tencent.com/act/double11?fromSource=gwzcw.577304.577304.577304 浏览器信息 Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 UBrowser/6.2.3637.802 Safari/537.36
浏览 387
提问于2017-11-03
4
回答
对于云计算该做什么有什么想法吗?
azure
、
cloud
我有一个大学项目,在这个项目中,我应该为Azure找到并实现一个合适的开发主题。在Azure中,有Web角色和工作角色,我想找到一些东西,这对和这两个角色都带来了相当大的负担。 (web角色用于通过网页为用户服务,工作人员角色用于后台处理数据,这些数据将通过web角色显示) 其中一个目标是通过测量来显示云的巨大计算能力。我的问题是,我不知道任何复杂的算法会使CPU出汗。那么,对于实现来说不是太复杂,但足够复杂到可以计算的东西是什么呢? 任何想法都值得赞赏!
浏览 1
提问于2010-02-13
得票数 1
2
回答
是否有可能以每秒60次的速度从点数据构建热图?
c++
、
opengl
、
visualization
、
simulation
、
heatmap
我正在为云(实际的云)做一个模拟,其中的云被三维点模拟,然后投射到一个2D热图中,大约640x480个单位大。点数约为50k,这是我在没有模拟中断的情况下所能做的最小的,但我似乎找不到任何方法以任何速度(通常需要3-5秒的运行时间)来执行此操作。 我想我的问题是,一台普通电脑能做到这一点是否可行?我通常低估了现在计算机的速度,但在这种情况下,我可能高估了它们。我还没有优化仿真,但如果它是不可能的,这将是最好的了解和节省麻烦现在。 如果有可能的话,是否有任何技术可以证明对使从点数据到热图的转换足够快到每秒更新60次?它实际上只是查看点数据并在转换后写入2D数组的结果,所以我认为它主要是绑定到内存
浏览 4
提问于2015-06-16
得票数 9
回答已采纳
1
回答
Android :将数据从android应用推送到云空间
android
、
android-c2dm
我在评估一项家庭作业。我需要做一个最终需要将数据推送到云中的应用程序。实际上,数据可能相当大。我查看了Google Android C2DM 。 但我意识到它是用来将小通知从云推送到应用程序的。它可以用来将相当大的数据从应用程序发送到云端吗?或者,是否有合适的替代方案可以使用? 因此,我的问题是,如何实现一种将大量数据从android应用程序发送到云的方法。
浏览 8
提问于2013-03-13
得票数 0
2
回答
云服务器做活动的,后期可以升级带宽吗?
云服务器
请描述您的问题 标题:年底大酬宾-腾讯云 地址:https://cloud.tencent.com/act/bargin?fromSource=gwzcw.634704.634704.634704#cvm_hot 浏览器信息 Mozilla/5.0 (Windows NT 6.3; Win64; x64; rv:57.0) Gecko/20100101 Firefox/57.0
浏览 511
提问于2017-12-11
1
回答
软件架构师做什么而工程师不做呢?
architecture
、
software-design
我看到一群人在分配他们在特定公司中的角色时提到了“软件架构师,解决方案架构师”这个术语。而且,通常情况下,这个职位总是出现在个人资料的顶端,很明显,这个人在开发领域有一个非常有趣的背景。 一天前,我看到了一条关于软件工程师和架构师实践中的差异的非常丰富的线索。 不考虑资历:(初级、正式、高级、工作人员)等。在你的经历中,这两位专业人士的表现主要有什么不同? 你知道软件架构师吗?如果是的话,他们会做什么不同的工作,或者工程师不知道?
浏览 0
提问于2022-08-12
得票数 -3
2
回答
当开始云计算项目时,混沌猴子应该是第一个应用程序吗?
architecture
、
cloud-computing
在阅读了Jeff的文章"和混沌猴一起工作“并考虑了"分布式计算的谬误”的含义后,我怀疑开发人员创建基于云的应用程序的首要任务是否应该是创建一个混沌猴子。实际上,考虑到即使整个数据中心都可能在云中丢失,混沌大猩猩也可能是模拟大停电的必要工具。 Netflix显然是这么认为的,但我想知道他们的结论是否被其他人分享了。 因此,正如标题所说,当开始云计算项目时,混沌猴子应该是第一个应用程序吗?
浏览 0
提问于2011-05-20
得票数 1
回答已采纳
2
回答
Google、集群或无群集上的Apache星火
apache-spark
、
google-cloud-platform
、
google-cloud-storage
、
google-cloud-dataproc
我想使用Apache来操纵Google中的大量数据。 我按照文档划分了一个包含5个节点的cluster集群。一切都完美无缺。 但是我的数据是在上,我了解到我可以使用Spark直接查询它,这是Google推荐的。 在这种情况下,是否有必要拆分整个集群?星火在谷歌云存储上的效率和HDFS一样高吗? 如果不是,那就更容易用木星和星火旋转一个大VM,并使用它来运行存储在GCS上的数据上的作业。
浏览 2
提问于2018-08-13
得票数 0
回答已采纳
1
回答
通过Firestore将BigQuery中的数据公开给移动/网络应用程序
google-cloud-firestore
、
google-bigquery
、
google-cloud-functions
、
google-cloud-bigtable
我正在寻找一种简单的方法(当然,具有良好的性能)来向web应用程序公开我的BigQuery表中的数据。 当前正在运行的解决方案是使用一个云函数和Firestore (在本机模式下)在BigQuery中公开数据。该实现类似于-,一旦数据被写入最终的大查询表,我们就触发云函数(每次提交500条记录)来更新最后一个消防站表中的数据。- 而且,为了避免与云函数相关的超时问题,我们将整个数据集分成几个批次,每个云函数实例只处理一批记录。 但是在运行后不久,我们就遇到了写入方面的可伸缩性问题,因为我们是按顺序触发云函数实例的。 提高性能的一个简单方法可能是从云函数内部进行并行写入,但同样地,根据消防局文档
浏览 2
提问于2021-03-30
得票数 0
1
回答
谷歌云项目下载收费
google-cloud-storage
、
google-cloud-platform
我正在收取服务云存储/BandwidthDownloadAmerica的费用,如下所述: 不过,我的google云存储桶位置、大查询数据集位置和我正在下载的机器都是“EU”。按照我的观点,从存储到机器的下载应该被认为是侵入。 我的过程包括: 1.从大查询数据集导出到云存储桶.2.将文件片段组合成单个文件。3.下载合成文件。 我相信在收费中所提及的收费如下: com.google.cloud/services/cloud-storage/BandwidthDownloadAmerica下载美国EMEA 是第三步 有没有什么可能错过的环境。 我的项目配置设置为默认。 欢迎任何指导。因为我们
浏览 2
提问于2016-10-13
得票数 0
1
回答
AWS:按需运行计算重进程(Windows可执行文件)
windows
、
amazon-web-services
、
azure
、
aws-lambda
、
batch-processing
我需要运行一个基于HTTP请求的Windows可执行文件。这个过程计算量很大,因此需要很大的处理能力。到目前为止,我正在使用AWS ec2实例来运行这些执行。C5.2xsize,windows EC2实例。 这些要求并不频繁,但必须毫不拖延地予以处理。 这里的问题是 我们浪费了相当多的钱,只是为了让那些突然出现的requests.There运行这个沉重的实例,对于这个可执行文件,不是Linux替代的. 有可能提高效率吗?只支付执行费用,而不是空闲时间。对架构的改变有什么建议吗?即使在其他云平台上,我们也能工作。注意:我不知道在这种情况下AWS、Lambda或批处理是否可行。
浏览 0
提问于2020-05-14
得票数 0
1
回答
我们可以在大查询中上传文本文件吗?
google-bigquery
、
google-cloud-storage
关于大查询,我有几个问题: 1.我们能在google云平台上上传文本文件并检索所需的数据吗?如果是的话怎么可能。2.我的主要目标是将大量数据上传到云平台,分析数据,并在需要时检索所需的信息。数据可以是结构化的,也可以是非结构化的。
浏览 8
提问于2016-07-21
得票数 0
2
回答
使用压缩AVRO从BigQuery中导出表
google-bigquery
、
google-cloud-storage
我尝试了大查询导出到云存储功能,以节省一些钱。需要的是以AVRO压缩格式导出,以保持模式,并能够在需要时在Big Query上再次导入它们。因为Big Query使用未压缩的大小收取数据费用,而我的数据是高度冗余的,所以压缩后的数据应该减少到原来的20倍。 在UI界面上,导出到AVRO时没有压缩选项。所以我假设这将是默认的,但事实并非如此。它导出AVRO没有压缩,这对我来说没有任何意义,因为文件将是相同的表大小,并将成本相同的东西保存在大查询和云存储。 没有任何关于这方面的信息。 谁知道是否有其他方法,而不是导出和加载到集群上,以转换为压缩的AVRO,并再次保存无云存储?
浏览 5
提问于2018-07-24
得票数 1
1
回答
如何将数据从Bigquery存储到云存储
google-cloud-platform
、
google-bigquery
如何将数据从大查询存储到云存储? 这是我的数据和我为数据设置的阈值。 SELECT milliVolt FROM `zeta-pivot` where milliVolt < 3300 limit 1000
浏览 1
提问于2021-11-29
得票数 0
2
回答
CVM是什么?
云服务器
请描述您的问题 标题:年底大酬宾-腾讯云 地址:https://cloud.tencent.com/act/bargin?utm_source=portal&utm_medium=banner&utm_campaign=bargin&utm_term=1204 浏览器信息 Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36
浏览 1270
提问于2017-12-29
4
回答
MongoDB是存储大量文本文件的好选择吗?
mongodb
我目前正在构建一个系统(用GCP)来存储关于不同主题的不同大小(1kb~100 of )的大量文本文件。一个文件集可能超过10 be。 例如: dataset_about_some_subject/ - file1.txt - file2.txt ... dataset_about_another_subject/ - file1.txt - file2.txt ... 这些文件用于NLP,在预处理后,由于预处理后的数据是单独保存的,因此不会经常访问.因此,在MongoDB中保存所有文件似乎是不必要的。 我在考虑 将所有文件保存到云存储中, 将MongoDB的名称和路径等文件信息保存
浏览 7
提问于2020-07-01
得票数 0
回答已采纳
4
回答
什么是私有云?
cloud
私有云这个术语与不同网站中的所有定义相当混淆。不同的人对什么是私有云有不同的看法。 1)顺便提一下,越来越多的it公司也开始使用“私有云”一词来指在公司自己的数据中心内建立云计算基础设施--即“内部云”。这样的开发根本不是真正的云计算,可能被视为维持现状的最后一次尝试。根据任何合理的定义,“私有云”必须是一种云计算安排,其中有关硬件由供应商的共享数据中心拥有和存放“”。 2)“云”只是“在别人的电脑上”的一个时髦术语。(顺便说一句,这也是一种非常方便的方法,可以用来决定是否将一些东西转移到云中。)如果您在拥有专门用于提供此服务的数据中心的其他人所拥有的计算机上运行进程,那就是云。虚拟化并不是
浏览 8
提问于2014-10-08
得票数 1
回答已采纳
2
回答
高成本的云提供商和低成本的云提供商之间有什么区别?
amazon-web-services
、
cloud
我需要决定,对于一个小型客户端和一个小预算(每月大约500美元),适当的云提供商需要一些计算实例来保存一个web服务器、一个数据库和一个Apache服务器。我想知道,像DigitalOcean这样的公司,与甲骨文、Azure、AWS、谷歌相比,以极低的价格提供计算实例。 当涉及到基础设施的时候,为什么公司选择这些大公司而不是更便宜的选择?这么高的价格和低的价格有什么大的区别?
浏览 0
提问于2020-01-05
得票数 2
回答已采纳
1
回答
云存储审计数据的好选择是什么?(连续书写,很少被查询)
aws
、
cloud
从StackOverflow的交叉柱,我预计它可能会关闭,因为S.O是如此挑剔.https://stackoverflow.com/questions/63432484/what-are-good-options-for-cloud-storage-of-audit-data-written-continuously-ra 我正在研究一些想要存储大量“审计记录”样式数据的东西。比如“用户创建了一个东西”,“用户删除了一个东西”,“用户有27个东西”。我们想把它存储在云中(AWS或者可能是Azure)。理想情况下,我希望使用云本地服务,这样我就不必担心诸如扩展服务器实例、分片等等。 这类数据大多
浏览 0
提问于2020-08-16
得票数 -2
回答已采纳
1
回答
Firestore的大容量写入限制是什么?
node.js
、
firebase
、
google-cloud-firestore
、
firebase-admin
我正在尝试为我正在开发的一个web应用程序实现一个大容量导入功能,并且想知道是否有多少"add's“可以由云函数使用admin来执行。 具体来说,我想知道firebase云函数和admin SDK是否能够这样做: for(var i = 0; i < 20000; i++) { admin.firestore().collection("someLocation").add({ time: admin.firestore.FieldValue.serverTimestamp() }) } 当我对来自客户端的实时数据库做类似的
浏览 0
提问于2018-04-20
得票数 1
回答已采纳
1
回答
使用大查询或大表查询聚合值的用例?
google-bigquery
、
bigtable
、
google-cloud-bigtable
我用它来设计30 TB文本文件的存储,作为在Google云上部署数据管道的一部分。我的输入数据是CSV格式,我希望尽量减少为多个用户查询聚合值的成本,这些用户将使用多个引擎在云存储中查询数据。对于这个用例,下面哪个选项更好呢? 使用云存储进行存储,并链接大查询中的永久表以进行查询,或使用Cloud表进行存储,并在计算引擎上安装HBaseShell来查询大表数据。 基于下面对这个特定用途的分析,我发现下面的云存储可以通过BigQuery查询。此外,Bigtable支持CSV导入和查询。BigQuery限制还提到,根据文档,在CSV、JSON和Avro的所有输入文件中,每个加载作业的最大大小为15
浏览 0
提问于2019-01-24
得票数 0
回答已采纳
3
回答
Apache对许多小的、快速的计算和一些大型的、非交互式的计算都有好处吗?
architecture
、
cloud
、
cluster-computing
、
apache-spark
、
platform
我正在评估Apache,看看它是否适合于以下需求 云计算环境。 商品五金。 分布式DB (例如HBase),可能有几兆字节的数据。 大量同时进行的小计算,需要快速完成(在几秒钟内)。小的意思是1到100 MBs的数据. 一些不需要快速完成的大型计算(小时很好)。大是指10-1000 GB的数据. 很少,非常大的计算不需要快速完成(天很好)。非常大意味着10-100 TBs的数据. 所有计算都是相互独立的。 一些计算中输入的实时数据流。 参与机器学习。 在阅读了一些关于星火的文章之后,我看到了下面的advantages 运作良好的商品硬件和HBas
浏览 2
提问于2014-07-12
得票数 12
回答已采纳
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
云计算售前解决方案架构师
云计算架构师需要学习内容,云计算总体架构及技术体系
云计算三大特性保障数据安全
《工业4.0大革命》:大数据、云计算
是大数据拥抱云计算还是云计算拥抱大数据
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券