腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
对
多个
MongoDB
集合
的
抓取
写入
、
、
、
、
我尝试用pymongo和scrapy将不同
的
项目存储在不同
的
mongodb
集合
中。我应该如何创建一个管道: 1)当爬行器打开时启动pymongo连接
的
字典,2)通过名称处理和识别项,3)将项插入到给定请求中
的
一个
集合
中。 我甚至不确定是否可以在scrapy中
写入
多个
集合
。
浏览 7
提问于2017-02-22
得票数 1
回答已采纳
1
回答
当
MongoDB
预测内存中
的
数据时,读取锁吗?
、
、
在版本2.2中更改:在
MongoDB
2.2中,收益率
的
使用得到了极大
的
扩展。包括“页面错误
的
屈服”。
MongoDB
跟踪内存内容,并在执行读取之前预测数据是否可用。如果
MongoDB
预测数据不在内存中,则读取操作将产生锁,而
MongoDB
则将数据加载到内存中。一旦数据在内存中可用,读取将重新获取锁以完成操作。 假设写操作获取锁。如何在
MongoDB
从同一
集合
读取数据时执行
写入
(更改某个
集合</em
浏览 1
提问于2014-03-12
得票数 0
回答已采纳
4
回答
事务
mongodb
、
、
、
我需要使用'all或nothing'进程
写入
两个不同
的
mongodb
集合
。我在后端使用NodeJs。据我所知,当涉及到单个
集合
时,
MongoDb
提供原子性,但当我们需要
写入
多个
集合
时,它不会提供原子性。因此,我想知道一种在nodejs/
mongodb
中模拟事务
的
方法,以避免在一个
集合
失败时
写入
另一个
集合
,如果第二个进
浏览 9
提问于2016-08-01
得票数 2
回答已采纳
1
回答
如何在
MongoDB
中管理并发性?
、
我是
MongoDB
数据库
的
新手,对于我
的
一个应用程序,我计划将它
的
一部分迁移到
MongoDB
。我们需要处理乐观并发。
MongoDB
的
最佳实践是什么?对于需要并发
的
应用程序,
MongoDB
是正确
的
选择吗?
浏览 2
提问于2016-07-19
得票数 11
回答已采纳
2
回答
MongoDB
性能:单个
集合
与
多个
并发读/写
集合
、
、
、
、
我正在利用web服务器上
的
本地数据库来同步外部API中
的
某些数据。本地数据库将用于服务web应用程序。我正在同步
的
数据对于访问web应用程序
的
每个用户来说都是不同
的
。由于同步作业是在用户从web页面访问数据时定期但持续地
写入
DB
的
,所以我想知道在这里什么才能给我最好
的
性能。 由于同步作业一直在
写入
DB,所以我相信
集合
在完成之前是被锁定
的
。我认为在这里拥有
多个
集合
会
浏览 3
提问于2020-04-30
得票数 0
回答已采纳
1
回答
Mongodb
-将Bulk.find.remove()锁定
集合
、
、
我计划在一个非常大
的
集合
上运行Bulk.find.remove()。(1.2TB)。 它会阻止插入或更新其他记录(这些记录不是上述find
的
一部分)吗?
浏览 0
提问于2019-10-09
得票数 3
回答已采纳
2
回答
允许(或扩展) IO连接器以便读取以前
的
PCollection项是否可行?
、
问题可能没有我想要
的
那么清楚,但首先解释一下我在这里想要达到
的
目标是很复杂
的
。 .apply("Write to
MongoDB
", MongoDbIOString but doesn't admit reading from the p
浏览 2
提问于2021-03-25
得票数 0
回答已采纳
1
回答
从单个
MongoDB
队列获取信息
的
多个
工作人员
、
、
、
、
我正在用Python构建一个web爬虫,使用
MongoDB
来存储一个队列,其中包含所有要爬行
的
URL。我将有几个独立
的
工人,将
抓取
URL。每当工作人员完成URL
抓取
时,它将在
MongoDB
集合
"queue“中发出请求,以获得要爬行
的
新URL。我
的
问题是,既然会有
多个
爬虫,我如何确保两个爬虫器不会同时查询数据库并获得相同
的
URL来
抓取
? 非常感谢你
的
帮助
浏览 0
提问于2014-03-29
得票数 0
回答已采纳
6
回答
从一个大
的
MongoDB
集合
中选择每N个元素?
、
我有一个包含大约4M个元素
的
MongoDB
集合
。例如,从
集合
中获取1000个元素--每4000行一个。现在,我将整个
集合
放在一个游标中,然后每隔N个元素
写入
一次。这给了我所需要
的
东西,但最初加载大量
集合
需要很长时间。 有什么简单
的
方法可以做到这一点吗?现在,我猜测
的
方法是
对
一个增量索引属性执行J
浏览 2
提问于2011-06-13
得票数 10
1
回答
副本模式下操作日志收集上
的
MongoDB
3.0写锁
、
、
、
在复制模式中,每次
写入
任何DB中
的
任何
集合
时,也会
写入
oplog
集合
。我很乐意得到这方面的任何提示。
浏览 1
提问于2015-11-17
得票数 8
1
回答
如何处理
多个
数据库调用(调用防火墙和
mongoDB
地图集)
的
事务回滚?
、
、
下面是我
的
设想:启动一个transactionI --启动一个
MongoDB
MongoDB
(如果失败,我可以不回滚问题)----我执行
对
Firebase
的
写(如果失
浏览 0
提问于2021-03-18
得票数 0
回答已采纳
3
回答
Mongo中
的
写锁
我在某个地方读到
MongoDB
持有db级写锁,这是否意味着当某人更新任何collection时,其他人不允许读取其他collection或它是如何工作
的
。另外,当有人向数据库
写入
任何内容时,
MongoDB
是如何获得写锁
的
,它
的
粒度是什么?
浏览 0
提问于2013-09-11
得票数 6
2
回答
访问morphia中
的
多个
集合
、
、
我正在使用morphia从
mongodb
拉取数据。我将只从
mongodb
读取数据,而不是
写入
数据。我已经创建了一个模型类,它将包含
集合
中
的
所有字段。我将在db中有
多个
集合
,并且计数可能会增加。我使用@Entity(“
集合
名称”)来映射
集合
。我
的
问题是:我将需要来自不同
集合
的
数据。那么我该如何映射它呢。传递给@Entity
的
集合
名称应该是动态<em
浏览 1
提问于2013-05-03
得票数 1
1
回答
填充后保存猫鼬模型和子模型
、
、
我正试图找到一种方法来简化我
的
后端逻辑并优化我
的
DB,因此如果我能够同时保存一个文档和它
的
子文档,那么创建子文档就更容易了。下面是一个简单
的
例子:var ItemSchema = new Schema({ extrainfo: {type: Schema.Types.ObjectIddiferen" //some random change in subdocument item.save(function(){conso
浏览 1
提问于2014-04-16
得票数 0
回答已采纳
1
回答
我如何防止我
的
跨
多个
服务器
的
并行应用程序
抓取
相同
的
mongodb
文档进行工作?
、
、
、
、
我有一个在
多个
服务器上运行
的
应用程序,它使用并行循环来处理来自
MongoDB
集合
的
对象。因为
MongoDB
强制我允许多读访问,所以我不能阻止
多个
进程和/或服务器从
集合
中
抓取
相同
的
文档并复制工作。这个程序是这样
的
,应用程序等待信息出现,做一些工作来弄清楚如何处理它,然后在完成后删除它。我希望实现
的
是,如果我能防止文档在同一时间被访问,知道一旦一个文档被读取,它最终将被删除,
浏览 0
提问于2019-01-07
得票数 0
1
回答
ReactiveMongo可以在Lagom框架中使用吗?
、
、
我需要将现有的Play + Scala +
Mongodb
应用程序转换为Lagom微服务。但我测试
的
所有示例都使用Cassadra。 他们
的
文档中提到了
对
mongodb
的
读取支持。。这意味着,我们可以不
写入
mongodb
集合
吗?
浏览 0
提问于2018-10-30
得票数 0
1
回答
在Scala中使用索引将RDD激发到新
的
MongoDB
集合
、
、
、
在火花提交作业(用Scala编写
的
.JAR)中,我需要访问现有的
MongoDB
,在db中创建一个新
的
集合
,添加索引,从分布在1,000
多个
执行者
的
RDD中
写入
数据到
集合
中。我找不到一个能做到这一切
的
图书馆。现在,我使用mongo火花连接器从RDD
写入
,然后使用casbah创建索引。 从RDD
写入
新
集合
(使用mongo
浏览 2
提问于2017-10-31
得票数 1
回答已采纳
4
回答
MongoDB
在
写入
时锁定到了什么级别?(或:“每个连接”是什么意思?)
、
、
在
mongodb
文档中,它说: 从版本2.2开始,
MongoDB
在每个数据库
的
基础上为大多数读和写操作实现锁。一些全局操作,通常是涉及
多个
数据库
的
短暂操作,仍然需要全局“实例”宽锁。这是否意味着,在我有3个连接到
mongodb
的
情况下://localhost/test来自网络上运行
的
不同应用程序--一次只能写一个?还是只是每个连接?IOW:是每个连接,还是整个/test数据库在
写入
时都被锁定了
浏览 13
提问于2013-07-03
得票数 65
回答已采纳
3
回答
如何在
MongoDB
中锁定
集合
我
的
数据库里有一个
集合
2.不执行任何操作Expect读取同时为其他用户更新
集合
诚挚
的
问候 谷胱甘肽
浏览 3
提问于2014-01-23
得票数 4
回答已采纳
1
回答
model.count不是快速异步
写入
是否存在
的
可靠测试
、
、
、
在通过MongoLab数据库中
的
nodejs将新文档保存到
mongodb
集合
之前,我使用model.count检查某些字段以防止重复条目: if (count == 0) { }但是,在测试期间,我注意到在过程完成后,
集合
中
的
许多重复项由于MyModel.count()语句嵌入在一个回调中,每当
浏览 4
提问于2013-11-14
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
MongoDB系列8:MongoDB集合的增量更新
主动写入流对@ResponseBody注解的影响
RT809H对UV EPROM的写入演示
python爬虫超简单攻略,带你写入门级的爬虫,抓取上万条信息
mongotop-跟踪一个MongoDB的实例,查看哪些大量的时间花费在读取和写入数据
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券