腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
是否
可以
在
IgniteRDD
的
共享
缓存
中
删除
单个
值
?
apache-spark
、
rdd
、
ignite
可以
从Ignite
共享
缓存
(
IgniteRDD
)
中
删除
特定项目吗? 例如,在下面的代码
中
,如何
删除
唯一
的
项(21,21)?igniteContext.fromCache("partitioned") cacheRdd.savePairs(sparkContext.parallelize(1 to 10000, 10).map(i => (i, i)))
IgniteRDD
提供了一个名为cl
浏览 11
提问于2020-01-23
得票数 1
回答已采纳
2
回答
用Ignite激发SQL
sql
、
apache-spark
、
ignite
我试图通过使用
IgniteRDD
引入speed作为
缓存
层来加快spark查询
的
速度。从RDD示例
中
,它从RDD
缓存
加载数据以构造RDD。但是
在
我们
的
使用
中
,数据大小可能太大而不能放入内存
中
,实际上我们只是将数据放在hbase
中
,所以
可以
这样做: 1、通过从hbase 2加载数据构建
igniteRDD
,使用generated
缓存
sql生成
的
浏览 4
提问于2017-12-21
得票数 0
回答已采纳
1
回答
可以
从C/C++应用程序访问Apache IgnitieRDD吗?
apache-spark
、
rdd
、
ignite
我想在火花执行器和C++进程之间
共享
数据。除了像Tachyon/IgniteFS这样将数据作为文件存储在内存文件系统
中
之外,还有没有其他有效
的
方法?
浏览 0
提问于2016-06-06
得票数 2
1
回答
Apache
是否
适合我
的
usecase(加载要
缓存
的
oracle表,在这些表之间进行连接,并反映对oracle数据
的
更改)
apache-spark
、
ignite
我想问Ignite
是否
适合我
的
用例,即: 当
缓存
关闭时,应该有某种方法从oracle恢复数据
浏览 6
提问于2016-12-07
得票数 2
1
回答
如何在Apache点火器
中
缓存
数据
scala
、
hadoop
、
caching
、
apache-spark
、
ignite
我正在编写一个代码来
缓存
RDBMS数据,使用spark连接。一旦创建了Dataframe,我就希望使用apache
缓存
该reusltset,从而生成其他应用程序来使用结果集。这是代码片段。val sharedrdd = ic.fromCache("hbase_metadata") } 现在
的
问题是如何
缓存
一个数据,
IgniteRDD
有savepairs方法,但是它接受键和<
浏览 1
提问于2016-05-12
得票数 2
回答已采纳
1
回答
基于Spark
的
物品分配算法
apache-spark
、
ignite
我正在研究Spark
中
的
一种资源分配问题。 假设有一个人员列表和一个他们想要
的
项目,这些项目来自预先选择
的
项目列表。现在,由于用户想要
的
每一件物品都有一个有限
的
库存,所以我能想到
的
唯一解决方案是顺序
的
。如果我想与Spark并行,我找不到任何数据结构/类型
可以
用来具有
共享
的
、强一致
的
状态,在这种状态下,我
可以
在
分配一个物品后减少库存。我查
浏览 1
提问于2017-11-01
得票数 0
2
回答
Spark:
缓存
RDD/DF以便跨多个程序使用
scala
、
apache-spark
我有一个从多个程序读取
的
数据集。与其每天多次将该数据集读入内存
中
,
是否
有一种方法
可以
让spark有效地
缓存
数据集,允许任何程序调用它?
浏览 4
提问于2016-10-12
得票数 4
回答已采纳
1
回答
如何将Ignite队列转换为Spark Dataframe?
apache-spark
、
spark-dataframe
、
ignite
我们需要获取Ignite队列
的
内容,该队列
在
集群中保存大型数据集,作为Spark dataframe。array = igniteQueue.toArray(array)提前感谢!
浏览 5
提问于2017-08-01
得票数 0
1
回答
Apache Ignite和Apache Spark集成,使用
IgniteRDD
将
缓存
加载到Spark上下文中
ignite
如果我
在
我
的
spark作业
中
创建了一个有10M个条目的
缓存
之外
的
igniteRDD
,它会将所有10M条目加载到我
的
spark上下文中吗?请在下面找到我
的
代码以供参考。query_res,input.col("id").equalTo(query_res.col("ID")));在上面的代码
中
,在上述代码<em
浏览 1
提问于2016-04-06
得票数 2
1
回答
错误
的
分享会导致错误
的
结果吗?
c++
、
c
、
caching
、
parallel-processing
、
openmp
如我所知,当两个cpu核心访问
单个
内存块
的
不同部分时,就会发生错误
共享
。在这种情况下,每个核心中
的
L1
缓存
包含不同
的
值
。 虚假分享
的
效果是什么?商品CPU总是检测错误
的
共享
吗?它
是否
会导致类似的情况(在内存
中
持久化不同
的
缓存
版本)?
浏览 1
提问于2015-04-13
得票数 1
回答已采纳
1
回答
Asp核心.Net返回
缓存
数据请求
c#
、
asp.net-core-mvc
我有一个登录页面,客户端在其中插入他
的
id号,然后向控制器发出ajax请求,以根据该参数获取数据。.");} 我在想,当尝试使用responsecache时,如果另一个客户端也
在
尝试登录,他会获得当前客户端
的
缓存
数据吗
浏览 2
提问于2019-06-29
得票数 0
1
回答
PHP/Centos/Apache
的
eAccelerator设置
apache-2.2
、
centos
、
php
eaccelerator.shm_max="0",其中shm_max是“用户
可以
使用eaccelerator_put之类
的
函数输入
共享
内存
的
最大大小.默认
值
是"0”,这将禁用限制。eaccelerator.shm_ttl="0" --“当eAccelerator没有足够
的
空闲
共享
内存来
缓存
一个新脚本时,它将从
共享
内存
缓存
中
删除
至少<
浏览 0
提问于2011-02-24
得票数 2
2
回答
AppFabric
缓存
可以
像memcached一样使用独立节点吗?
caching
、
memcached
、
appfabric
使用Memcached,我
的
理解是,每个
缓存
服务器都不需要知道其他服务器
的
详细信息。另一方面,使用AppFabric
缓存
,
共享
配置将服务器链接在一起(因此成为单点故障)。
是否
可以
独立使用AppFabric
缓存
服务器?换句话说,
单个
客户端
是否
可以
根据可用
的
缓存
服务器选择将其键/
值
存储
在
何处,并且该决定
是否</em
浏览 0
提问于2011-09-12
得票数 0
2
回答
单个
进程
可以
在
多个内核
中
运行吗?
concurrency
、
operating-system
、
multicore
单个
进程
可以
在
不同
的
内核上运行不同
的
线程吗?在这种情况下,不同
的
核心
共享
相同
的
地址空间,但具有不同
的
缓存
?这
是否
意味着
缓存
将是多余
的
? 谢谢!
浏览 1
提问于2016-08-03
得票数 17
1
回答
速度CTP:我们能“搜索”物体吗?
appfabric
它将只部署
在
AppFabric多服务器实现
中
的
多个
缓存
服务器
中
的
单个
缓存
服务器上。此外,区域
在
某种程度上将
缓存
中
的
对象
的
位置限制
在
单个
服务器上(或者类似的东西)。 因此,如果
缓存
项
的
唯一Id没有持久化,或者对存储对象和从
缓存
中
检索对象
的
应用
浏览 6
提问于2010-06-04
得票数 1
回答已采纳
3
回答
如何在两个Spark上下文之间
共享
Spark RDD?
apache-spark
、
rdd
有没有办法
在
不同
的
Spark上下文之间
共享
RDD?
浏览 1
提问于2015-01-13
得票数 8
2
回答
使用PDO
在
sqlite
中
启用
共享
寻呼机
缓存
php
、
caching
、
sqlite
我正在研究sqlite特性,并且我发现了默认禁用
的
。 1) PHP脚本
中
到sqlite
的
每个PDO连接
是否
都被视为一个单独
的
连接?2)如果是,使用
共享</em
浏览 7
提问于2012-02-05
得票数 4
回答已采纳
2
回答
何时使用具有
共享
CUDA内存
的
易失性
compiler-construction
、
cuda
、
gpu
、
gpgpu
、
volatile
在
什么情况下,应该在volatile内核
的
共享
内存中使用CUDA关键字?我知道volatile告诉编译器永远不要
缓存
任何
值
,但我
的
问题是关于
共享
数组
的
行为: for (i = 0; i < THREADS_PER_ACTION; i++)
浏览 1
提问于2013-03-11
得票数 14
回答已采纳
1
回答
Ehcache
是否
使用
删除
过期项
的
后台线程?
java
、
guava
、
ehcache
现在我正在使用番石榴
缓存
,并考虑迁移到Ehcache。根据这个,没有线程
可以
确保
在
番石榴
缓存
中
的
延迟过后立即从
缓存
中
删除
条目: 这样做<e
浏览 1
提问于2021-05-13
得票数 1
回答已采纳
3
回答
可以
从不同
的
spark上下文访问RDD吗
apache-spark
、
apache-spark-sql
、
hadoop2
我是spark
的
新手。
是否
可以
使用在不同spark上下文中定义
的
RDD?如果是,是如何实现
的
。我们
在
spark context1
中
创建一个hive表t1
的
RDD。我们
是否
可以
在
不同
的
spark工作中使用(参考) RDD。
浏览 49
提问于2016-08-12
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Spark+ignite实现海量数据低成本高性能OLAP
整合@Cache和Redis
Java 类库中的瑞士军刀:Google Guava 缓存
Spring Boot 2X整合Spring-cache
golang-xorm库快速学习
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券