本地数据库mysql大概有3000W条，其中的某一个字段要做处理，但是实在太慢了，平均一秒钟处理一条。
请问要怎么加快读取mysql速度？用多线程吗?还是如何做？
浏览 510提问于2017-11-03
我得到了一个用PHP下载链接列表的函数(假设大约100000个，但不是一次下载)。我想从这些链接下载数据，如果它还没有下载，所以我需要检查他们中的哪些不在MySQL数据库中。到目前为止，数据库包含了大约40000条记录。这样做的正确方法是什么？我不能将所有这些链接都保存在数组中，并与MySQL结果进行比较，因为它占用太多内存。我正在通过多线程( forks)从这些链接下载信息。如果父母需要10MB的内存，30个分支需要300MB，等等。我尝试分别查询每个链接的数据库，但
浏览 0提问于2013-08-30得票数 0
我有一个脚本，我想保存从下拉菜单中选择的值-其中一个选项是以下htmlentity但是当它被保存到数据库时，它会被保存为问号吗？将htmlentities保存到数据库的最好方法是什么？
浏览 2提问于2012-10-04得票数 0
回答已采纳
我在创建带有数字海洋的mysql数据库时遇到了麻烦。我对unix shell不太在行。使用mysql工作台gui尝试ssh时也遇到了问题。它一直给我提示我的登录凭据无效。我已经更改了mysql的默认管理员密码，但我似乎无法使用新密码或默认密码登录到我的vps。我读过一些教程，但我只是想知道VPS设置mysql数据库的最好的‘工作流程’是什么。使用
浏览 2提问于2014-03-10得票数 0
我想知道我是否可以使用不同的数据库来提高性能。
我有一个有超过500万行的大表support_chat。我需要一直扫描这个(使用ajax的3s)来检查支持方面的新消息。如果我将这个表移动到同一台计算机中的另一个数据库，它能帮助什么吗？
浏览 0提问于2015-10-05得票数 2
我正在编写一个多线程的Ruby应用程序，它通过生成数据并将其加载到遗留的MySQL数据库中，以便在负载测试中使用。我曾尝试增加应用程序本身的线程池大小，但通过观察MySQL，我似乎无法建立超过10个连接。我觉得我已经倾注了我能在DataMapper上找到的每一个RDoc和文档，但我找不到怎么做。在这一点上，我会切换到ActiveRecord来实现这一点，但是它不支持组合主键，这是我在这个遗留数据库中所需要的。作为参考，我使用'thread/pool‘gem进行
浏览 2提问于2013-01-30得票数 0
1回答
鉴于下面的简单代码： process(row)
如果数据库很大，我怎么用多线程来帮助我呢？具体来说，每一行应该只处理一次，所以当多线程时，每个线程应该只在ID上进行处理。我需要基本上得到数据库的总长度，决定需要多少线程，然后告诉每个线程它应该过滤的最小/最大id吗？
浏览 3提问于2017-02-06得票数 3
回答已采纳
我使用django + MySQL。有时，我会将重复的数据插入到数据库中，这会导致django引发IntegrityErrror。
问题是，django/python对几个不同的使用相同的错误。
浏览 4提问于2013-05-15得票数 12
6回答
请描述您的问题地址：https://cloud.tencent.com/act/first_purchase?utm_source=portal&utm_medium=banner&utm_campaign=firstpurchase&utm_term=0109Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36
浏览 636提问于2018-01-26
我用ruby on rails做了一个网站。起初，我认为我应该使用多线程应用程序(使用jruby运行)，每个客户端都有一个线程。然后我意识到这不是一个好主意。然后我考虑使用select/kqueue/epoll。但有一件事:我意识到使用ActiveRecord意味着我的数据库查询会阻塞，这是一件坏事。我完全迷惑了，我希望有人给我一个基本的EM服务器对postgresql数据库进行非阻塞ActiveRecord调用的示例(主要是因为我将使用它)。
此外，还有一件事我可能不明白。
浏览 1提问于2013-06-02得票数 1
我有一个坞-合成文件，在这里我使用正式的mysql:latest映像作为我的数据库服务器。在docker pull mysql和docker-compose up之后，图像从5.7 -> 8.0.11更新所有.frm文件都被删除了。InnoDB: Submit a detailed bug report to http://bugs.mysql.com.我到目前为止尝试过的
由于我有一个数据库的本地副本，但由于数据已经过时
浏览 0提问于2018-06-11得票数 5
回答已采纳
我已经倾注了所有我能找到的答案，但似乎没有找到任何东西：
我有一个对MySQL数据库的批量更新，每隔几分钟就会发生一次，由Python处理ETL工作(我正在将数据从web拉到MySQL系统中)。我正在尝试了解使用多线程或多处理同时执行多个连接和插入数据会带来什么样的潜在影响(无论是积极的还是消极的)。每个工作进程(线程或进程)将从任何其他工作进程更新不同的表。我能找到的每个其他资源都在对同一个表进行多线程/处理，而不是每个worker都有一个不同的表。我得到的印象是，我肯定想要使用多线程
浏览 0提问于2017-08-16得票数 0
2回答
我有一个简单的应用程序，通过Hibernate从数据库(MySQL 5.1)的一个表中获取一些数据并显示内容。使用的主要框架是Spring3.0。我想这是因为@Transactional不管理多线程访问(如果我错了，请纠正我)。有没有办法用Spring+Hibernate实现多线程访问管理器来管理对数据库的并发请求？
浏览 1提问于2012-01-26得票数 0
回答已采纳
1回答
我们有一个巨大的数据仓库(几乎4TB)数据库，我们正在将其复制到从数据库，但它比主/主数据库滞后45小时。此时，使复制速度更快的最佳方法是什么？
浏览 0提问于2012-08-10得票数 2
2回答
在Cake中，我遇到了芬兰语不能正确显示的问题。我在config.php中设置了utf编码，在default.ctp中设置了字符集输出，在core.php中也设置了config为了给你一个概念，链接如下：
浏览 1提问于2011-08-15得票数 0
回答已采纳
1回答
我有一个运行多线程进程的应用程序。我正在使用innodb，它在使用它时会锁定行，我不知道是否需要在我的代码中也查看对它的访问。
浏览 0提问于2012-05-16得票数 2
回答已采纳
3回答
MySQL复制的一个主要问题是，从服务器是单线程的。这可能导致复制滞后。
Postgresql如何处理复制？它(或附加的，如slony-I)允许多线程奴隶吗？一般来说，MySQl和Postgresql复制的优缺点是什么？我经常听说MySQL复制比postgresql复制更好。这是一个公平的陈述吗？怎么才能更好呢？
浏览 0提问于2009-08-07得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
