腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

点滴积累

专栏作者

108

文章

172194

阅读量

44

订阅数

安装 Accumulo——突破自己，就是成长

大数据 zookeeper 面向对象编程 bash bash 指令

前言在我刚开始接触分布式集群的时候，是自己在几台虚拟机中手动安装的 Hadoop 和 Spark ，所以当时对 Hadoop 的配置有个简单的印象，但是后面发现了 Cloudera 和 Ambari 之后（两个分布式集群自动管理工具），就再没有手动安装过。这就导致我用了很久的 Accumulo 却从未手动安装过，使用 Cloudera 安装导致我根本没有关心 Accumulo 是怎么从无到有冒出来的，只是简单了解了安装的大概过程，并学会了如何使用它。今天不同，当我再次安装 Cloudera 集群的时候

2018-05-02

1.2K0

geotrellis使用（三十六）瓦片入库更新图层

前言 Geotrellis 是针对大数据量栅格数据进行分布式空间计算的框架，这一点毋庸置疑，并且无论采取何种操作，其实都是先将大块的数据切割成一定大小的小数据（专业术语为瓦片），这是分治的思想，也是分布式计算的精髓，所以使用 Geotrellis 的第一步工作就是要将数据切片（无论是存储在内存中还是进行持久化），然而即使其能力再“大”在实际工作中也难以处理以下几种需求：全球（大范围）高分辨率遥感影像数据，数据量在 TB 级；局部地区数据更新；不同时间数据融合。这几种情况下我们都很难或者没有办法同时对

2018-05-02

1.1K0

geotrellis使用（三十二）大量GeoTiff文件实时发布TMS服务

前言在上一篇文章中我讲了如何直接将Geotiff文件发布为TMS服务，在其中只讲了单幅Geotiff的操作，其实单幅这种量级的数据对Geotrellis来说就是杀鸡焉用牛刀，Geotrellis针对的是大数据量的操作。在进行完单幅Geotiff的操作后，就去出差了一周，这一周也没闲着，稍有空隙便在思索这个问题，并抽空写那么两行，回来一调试果然可以，于是就有了本文。下面我来介绍如何对大量Geotiff实时进行TMS服务化操作。一、总体效果上次使用的是北京首都国际机场影像数据，这次我又下载了部分北京市区影

2018-05-02

9420

ANSJ中文分词使用方法

大数据数据分析

一、前言之前做solr索引的时候就使用了ANSJ进行中文分词，用着挺好，然而当时没有写博客记录的习惯。最近又尝试了好几种JAVA下的中文分词库，个人感觉还是ANSJ好用，在这里简单总结之。二、什么是中文分词百度百科对其定义如下：中文分词(Chinese Word Segmentation) 指的是将一个汉字序列切分成一个一个单独的词。分词就是将连续的字序列按照一定的规范重新组合成词序列的过程。我们知道，在英文的行文中，单词之间是以空格作为自然分界符的，而中文只是字、句和段能通过明显的分界符来简单划

2018-04-28

2.2K0

我的奋斗——从印刷工人到地理信息大数据系统程序员

大数据单片机 java

首先声明本文不存在任何工作歧视，每个人只要找到适合自己并且自己喜欢的岗位都是在为社会主义为人类的发展做出自己的贡献。 2011年从湖南某985高校仪器专业毕业，扛着大包小包先火车到西安然后汽车到兰州，之后出租车到单位，一路风尘仆仆。离开熟悉的环境，离开朝夕相处的同学只身一人来到一个陌生的城市。路途的艰辛倒也是早就司空见惯，然而迎接我的却是不堪回首的人生新篇章。刚到单位迎接我的就是一个庞然大物——印刷机，可是如果能当个印刷工人倒也是个技术活了，刚开始一个月每天十几个

2018-04-28

7800

geotrellis使用（十五）使用Bokeh进行栅格数据可视化统计

数据可视化 html scala 大数据

Geotrellis系列文章链接地址http://www.cnblogs.com/shoufengwei/p/5619419.html 目录前言实现方案总结一、前言之前有篇文章介绍了使用Bokeh-scala进行数据可视化（见http://www.cnblogs.com/shoufengwei/p/5722360.html），其实当时选择Bokeh的部分原因就是Bokeh支持大数据量的可视化，有点“大数据”的意思，总之这刚好能与Geotrellis结合起来进行一些地理信息方面的大数

2018-04-28

1K0

PhiloGL学习（5）——神说要有光，便有了光

前言上一篇文章中介绍了如何创建三维对象及加载皮肤，本文为大家介绍如何为场景添加光源。一、原理分析光在任何地方都是非常重要的，无论在哪里都说是要发光发热，光和热也是分不开的。光线分为点光源和线光源，所谓点光源和线光源也是个相对的概念，站在地球上我们可以认为太阳光是线光源，其实从更大的尺度来看太阳光也是个点光源，只是我们站在地球上来看光线基本上是平行的了，所以可以认为是线光源。所有问题，站在不同的角度来看就会发生变化。光线还有另外几个概念，环境光（ambient light）、漫反射光（diffuse

2018-04-28

7400

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态