大数据实战演练

61 篇文章
23 人订阅

全部文章

CREATE_17

【生活现场】从洗袜子到HBase存储原理解析

小史是一个非科班的程序员,虽然学的是电子专业,但是通过自己的努力成功通过了面试,现在要开始迎接新生活了。

913
CREATE_17

如何使用C++通过thrift访问HBase进行操作

上周六,接了一个紧急任务,说实现使用 C++ 访问 HBase 进行操作。说是用 thrift 来实现。对于 C++ 来说,我真的是门外汉,但需求如此,皱着眉头...

894
CREATE_17

HBase二次开发之搭建HBase调试环境,如何远程debug HBase源代码

之前的文章也提到过,最近工作中需要对HBase进行二次开发(参照HBase的AES加密方法,为HBase增加SMS4数据加密类型)。研究了两天,终于将开发流程想...

693
CREATE_17

shell实战(一):sed命令小结

sed是一种流编辑器,它是文本处理中非常中的工具,能够完美的配合正则表达式使用,功能不同凡响。sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编写转...

651
CREATE_17

shell实战(二)cat EOF 追加与覆盖文件

之前写shell脚本的时候,有这样一个需求:我需要创建一些文件,并将内容输入到文件中。如果创建一个文件内容模板,然后通过$1,$2传参的形式修改某些值,这样做感...

671
CREATE_17

HBase配置AES加密

为了避免第三方非法访问我们的重要数据,我们可以给HBase配置加密算法,目前HBase只支持使用aes加密算法,用于保护静态的HFile和WAL数据。

582
CREATE_17

PostgreSQL与PostGIS的基础入门

PostgreSQL是一个功能强大的对象关系型数据库管理系统(ORDBMS)。用于安全地存储数据,支持最佳做法,并允许在处理请求时检索它们。

823
CREATE_17

Kylin集群模式部署(使用同一HBase存储)

本文主要讲解如何部署Kylin集群,采取多个Kylin实例共享HBase存储的模式,如果需要事先了解Kylin基本概念的朋友可以查看《Apache Kylin基...

1132
CREATE_17

PostgreSQL本地/远程登陆配置

关于PostgreSQL与PostGIS使用,可参看《PostgreSQL与PostGIS的基础入门》。本篇文章主要介绍如何实现本地与远程登陆,并对其认证方式进...

832
CREATE_17

Apache Kylin目录详解

Kylin 会在 HDFS 上生成文件,根目录是 “/kylin” (可以在conf/kylin.properties中定制),然后会使用 Kylin 集群的元...

914
CREATE_17

spring boot通过JPA访问Mysql

根据个人喜好选择配置文件的类型,在这里我选择配置application.yml,主要对datasource与jpa进行一些配置说明。

912
CREATE_17

Java版SMS4加密解密算法

最近工作中需要实现HBase自定义扩展sms4加密,今天就先来说一下Java版的SMS4加密解密算法的具体实现。

1133
CREATE_17

注解@RequestParam与@RequestBody的使用场景

一直有这么一个疑问:在使用postman工具测试api接口的时候,如何使用 json 字符串传值呢,而不是使用 x-www-form-urlencoded 类型...

4695
CREATE_17

zookeeper ACL 权限控制

zooKeeper使用acl(Access Control List)来控制对其znode(zooKeeper数据树的数据节点)的访问。 不过,zookeepe...

1552
CREATE_17

如何查找并下载rpm依赖包并使用yum离线安装rpm包

最近在工作中需要postgresql + postgis的离线安装。安装有两种方式:

1063
CREATE_17

spring boot使用JDBCTemplate访问Mysql

根据个人喜好选择配置文件的类型,在这里我选择配置application.yml,主要对datasource进行一些配置说明。

1101
CREATE_17

HDFS ACL权限设置

今天主要给大家说一下HDFS文件权限的问题。当一个普通用户去访问HDFS文件时,可能会报Permission denied的错误。那么你会怎么做呢?

2803
CREATE_17

ambari-server api,多表数据关联

其中requestedSubResources的值是在对应Type的ResourceDefinition类中定义,例如RackResourceDefinitio...

945
CREATE_17

调试ambari-server总结

编辑key_properties.json,将当前资源类型与含有id的value相映射。

972
CREATE_17

ambari-server版本比较

2.7版本在 org/apache/ambari/server/controller/目录下的xxxRequest.java和xxxResponse.java文...

761

扫码关注云+社区