腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
如何使用
Spark
/
Geomesa
将几何图形从一个EPSG投影到另一个EPSG?
、
我正在“翻译”一些Postgis代码到
Geomesa
,我有一些Postgis代码,如下所示: select ST_Transform(ST_SetSRID(ST_Point(longitude, latitude), 4326), 27700) 例如,它将点几何图形从4326
转
换为
27700。在
Geomesa
-
Spark
-sql文档https://www.
geomesa
.org/documentation/user/
spark</
浏览 55
提问于2020-06-24
得票数 0
1
回答
如何将
spark
数据
集
转
换为
geomesa
功能
?
、
、
、
我想知道使用
GeoMesa
显示geojson mongo LineString的最佳方式是什么,我发现
GeoMesa
可以从cassandra
数据
库中读取
数据
,但我的观点是我的
数据
存储在mongoDb中因此,我可以看到
GeoMesa
可以与Apache搜索引擎集成在一起,我已经使用apache-
spark
导入了该
数据
。我的问题是,有没有人尝试或知道地理
数据
的源如何成为geomedia的源?
浏览 15
提问于2019-03-02
得票数 0
1
回答
加快
geomesa
查询速度
、
、
、
、
我一直在用简单的空间查询测试
geomesa
,并将其与Postgis进行比较。i, i*2) as geom from seriesselect st_distance(a.geom, b.geom) from points as a, points as bimport org.apache.
spark
.sql.SparkSession import org.locationtech.
geomesa
.
spark
.jts("
浏览 172
提问于2019-12-01
得票数 0
回答已采纳
2
回答
没有为org.locationtech.jts.geom.Point找到编码器
、
、
、
在使用
Geomesa
和Scala时,我一直试图使用下面的代码片段在
Spark
中对2列进行编码,但我不断收到一个问题,似乎Scala无法将返回的对象序列化为Dataframe。还是有一个更好的库可以处理来自包含双格式的纬度和经度的星火
数据
的地理空间查询?._ def main(sysArgs: Array[String$.apply(ExpressionEncod
浏览 1
提问于2019-03-06
得票数 1
1
回答
GeoMesa
-支持的
数据
存储之间的差异?
、
、
我正在浏览,目录公开了许多可使用的受支持的
数据
存储: Accumulo
数据
存储卡夫卡
数据
存储HBase
数据
存储Bigtable
数据
存储卡桑德拉
数据
存储 我找不到实现级别的比较(例如在支持/缺少特性、稳定性等方面)。这
浏览 4
提问于2017-03-15
得票数 2
回答已采纳
1
回答
Spark
&
GeoMesa
中地理空间表的左半连接
、
、
包含地理空间点.我想执行以下查询:我使用
Spark
-SQL和
GeoMesa
& Accumulo来实现同样的
功能
。(
Spark
作为处理引擎,Accumulo作为
数据
存储库&
GeoMesa
用于GeoSpatial库)。上面的查询是某种left semi join,但我不确定如何使用
Spark</
浏览 3
提问于2017-03-23
得票数 0
回答已采纳
1
回答
在
GeoMesa
-Accumulo中创建视图
、
、
、
在
GeoMesa
- Accumulo中摄取了多个
数据
集
之后,我想将这些
数据
集合并到一个单独的“视图”中,适合通过GeoServer进行可视化。 我使用转换器和sfts摄取了以下
数据
集
。反过来,我可以使用这个视图通过GeoServer可视化
数据
。然而,我很难在
GeoMesa
-Accumulo中找到相当于视图的东西。我已经找到了一些有关Apache的信息,这些信息可以用于修改(
GeoMesa
中的
数据
),但这是一条路吗
浏览 0
提问于2019-04-26
得票数 1
回答已采纳
1
回答
Scala重新分区无法解析符号
、
、
、
我试图保存我的
数据
文件aa拼板文件与一个分区,每天。所以试着使用日期列。
浏览 0
提问于2018-03-26
得票数 2
回答已采纳
2
回答
BSONObject到DataFrame的RDD
、
、
、
按照的描述,我正在从Mongo加载一个bson
转
储到
Spark
中。它是有效的,但我得到的是:它基本上应该是包含所有String字段的JSON。我的其余代码需要一个DataFrame对象来操作
数据
。但是,当然,toDF在该RDD上失败了。
如何将
其转
换为
所有字段均为String的
Spark
DataFrame?如果能有类似于
spark
.read
浏览 1
提问于2016-10-04
得票数 1
1
回答
火花会话文本和文本文件方法之间的区别?
、
、
、
、
我正在使用,并尝试从文本文件中创建
数据
和
数据
集
。要从文本文件获取
数据
集
,有两个选项,文本和textFile方法,如下所示:csv format jdbc json load optionoptions orc parquet schema table text textFilescala> val
浏览 0
提问于2019-03-28
得票数 1
回答已采纳
2
回答
为什么在将任何rdd转
换为
ds之前就嵌入了
spark
.implicits._,而不是作为常规导入?
、
、
、
、
我正在学习
spark
数据
集
,并检查
如何将
rdd转
换为
dataset。为此,我得到了以下代码: .builder .master("local[*]") val lines =
spark
.sparkContext.textFile("..
浏览 1
提问于2019-03-16
得票数 0
1
回答
如何在火花
数据
集中将字符串值替
换为
int?
、
例如,输入
数据
:\Nval schema = StructType(Seq())val df =
spark
.read.schema(schema)当我使用这个
数据
集
时,我会得到一个异常,因为"\N“对double
如何将
此<
浏览 1
提问于2018-04-20
得票数 1
回答已采纳
1
回答
在Java中从
spark
数据
集
创建密集矩阵
、
、
我需要一些关于如何从
数据
集
创建密集矩阵的指导。假设我的
数据
集
是一个csv文件,其中的
数据
分别为row-1: 1.1,1.0,1.2和row-2: 1.4,1.1,1.3
如何将
数据
集
转
换为
可以应用矩阵运算的matrix..so。Java/
Spark
谢谢!
浏览 1
提问于2017-01-09
得票数 0
2
回答
从Oracle到Apache :如何处理最终的一致性?
、
、
、
、
我有一个现有的生产Oracle
数据
库。但是,由于
数据
量或查询的复杂性,某些类型的操作存在性能问题。 这就是为什么我经常将每个Oracle表导出/
转
储到CSV。然后,此类CSV被转
换为
Parquet文件,以便允许使用
Spark
进行非常高性能的查询。然而,我担心的是失去强大的一致性利益。Parquet文件(每个Oracle表都有自己的Parquet文件
集
),以便为
Spark
查询做好准备。有两个批处理,一个
转
储到CSV (然后是Parquet)<e
浏览 0
提问于2020-02-02
得票数 2
回答已采纳
1
回答
转换具有第一个列标题的
数据
集
并且
数据
在R中行的最佳方法是什么?
如何将
它们转
换为
列?
转换
数据
集
的最佳方式是什么?第一列是标题,
数据
是行而不是列。
如何将
它们转
换为
列?我
转
置了
数据
,然后将第一行转
换为
列标题,但我的
数据
的类发生了变化。
浏览 19
提问于2020-02-07
得票数 0
回答已采纳
1
回答
将data_numeric转
换为
R中的日期
、
、
、
我有一个具有数字日期列的
数据
集
。
如何将
数字形式的2017.31
转
换为
"2017-4-22“日期?
浏览 4
提问于2022-03-10
得票数 0
回答已采纳
1
回答
MLLib是否只接受libsvm
数据
格式?
、
、
、
但是我发现在
spark
(python)的文档中,这个模型就像随机森林,只接受libsvm格式的
数据
。data =
spark
.read.format("libsvm").load("data/mllib/sample_libsvm_data.txt") 所以我想知道MLLib是否只接受libsvm
数据
格式如果是这样,我
如何将
我的
数据
集
转
换为
libsvm格式,因为我的
数据
<em
浏览 0
提问于2017-03-16
得票数 0
1
回答
如何处理遗留应用程序在latin1
数据
库中存储阿拉伯字符
、
、
我现在使用一个基于web的PHP应用程序来处理MySQL服务器
数据
库。
数据
库与windows软件一起使用,显示和保存波斯语文本良好。我不想更改字符
集
,因为windows软件可以使用该字符
集
。问题:
如何将
latin1
转
换为
utf8以显示,以及
如何将
utf8
转
换为
latin1,以便从我的web基础PHP应用程序中保存,或
浏览 5
提问于2012-10-28
得票数 0
回答已采纳
2
回答
GeoTiff光栅
数据
到德尔塔湖/ Parquet格式?
、
、
、
、
我们的组织最近一直在使用
数据
库进行ETL和
数据
集
的开发。然而,我发现栅格
数据
集
的库/
功能
非常有限。有几个光栅/火花图书馆,但他们不是很成熟。例如、和。因此,我一直在探索在Databricks平台上高效处理栅格
数据
的其他方法,该平台利用
Spark
/ Delta表/ Parquet文件。我的一个想法是将栅格
数据
转
储到简单的x,y,value列,并将它们作为表加载。如果我的其他<e
浏览 11
提问于2022-09-27
得票数 0
回答已采纳
1
回答
如何在
Spark
中处理多个csv.gz文件?
、
、
、
、
我有一个包含多个表的大型
数据
集
。每个表被分成数百个csv.gz文件,我需要通过PySpark将它们导入到
Spark
中。有关于
如何将
"csv.gz“文件导入到
Spark
的想法吗?SparkSQL的SparkContext或SparkSession是否提供了导入此类文件的
功能
?
浏览 22
提问于2017-07-06
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
如何将excel表格转换成pdf?两种工具帮你解决问题。
TensorFlow模型如何与线上工程交互
如何将图片转换成表格?简单操作几步就能解决
PDF文档为什么不能编辑?怎么转到TXT文档?
如何将pdf转换成word?两种方法快来试试
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券