CoM-iMX6UL(L) 是一款兼容 i.MX6UL(L)-x（X=Y0/1/2 三个版本）的高性能、低功耗工业级核心板，主要用于各种工业级、商业级的应用控制终端数据采集和处理、智能物流数据终端、数据中继器、新能源充电桩控制器和计费系统、车载终端数据采集和处理，是 NXF的 i.MX6UL(L)系列产品的一员。
lzo压缩格式有很快的压缩/解压速度和合理的压缩率，并且支持分块(split)，所以lzo是目前在Hadoop中最流行的压缩格式。hadoop中的lzo不是自带的，如果要支持lzo，需要另外安装。本文介绍了在hadoop2.0上安装和配置lzo，同样也适用于hadoop1.0。
可以试下x86_64-redhat-linux-gcc -o hello hello.c -static或者gcc -o hello hello.c -static，如果也无法编译，就证明这个pc的gcc确实不支持静态编译
二、安装lzo 1、wget http://www.oberhumer.com/opensource/lzo/download/lzo-2.06.tar.gz 2、tar -zxvf lzo-2.06.tar.gz 3、mv lzo-2.06 lzo && cd lzo 4、export CFLAGS=-m64 5、./configure -enable-shared 6、make && make install【默认安装在了/usr/local/lib下:liblzo2.a liblzo2.la liblzo2.so liblzo2.so.2 liblzo2.so.2.0.0】 7、在/etc/ld.so.conf.d/目录下新建lzo.conf文件,内容： /usr/local/lib 8、让lzo.conf生效:/sbin/ldconfig -v
1，执行命令安装一些依赖组件 yum install -y hadoop-lzo lzo lzo-devel hadoop-lzo-native lzop 2， 下载lzo的源码包并解压 wget http://www.oberhumer.com/opensource/lzo/download/lzo-2.09.tar.gz tar -zxvf lzo-2.09.tar.gz 3，在当前目录新建一个lzo目录，存储编译后的lzo文件 进入lzo-2.09目录 依次执行命令： expor
本文主要介绍 Linux Shell 下常规压缩与解压，即独立的单个压缩包。对于分巻压缩与解压，请出门左拐至LinuxShell下分卷压缩与解压。
优点：压缩率比较高，而且压缩/解压速度也比较快；hadoop本身支持，在应用中处理gzip格式的文件就和直接处理文本一样；有hadoop native库；大部分linux系统都自带gzip命令，使用方便。
目前在Hadoop中用得比较多的有lzo，gzip，snappy，bzip2这4种压缩格式，笔者根据实践经验介绍一下这4种压缩格式的优缺点和应用场景，以便大家在实践中根据实际情况选择不同的压缩格式。
Flume是Cloudrea公司开源的一款优秀的日志收集框架，主要经历了两个大的版本，分别是 Flume-OG Flume-NG OG是0.9.x的版本，依赖zookeeper，角色职责不够单一
NXP 会从linux内核官网下载某个版本，然后将其移植到自己的 CPU上，测试成功后就会将其开放给NXP的CPU开发者。开发者下载 NXP 提供的 Linux 内核，然后将其移植到自己的产品上。
tar 是 GNU 项目中的一个归档工具，其创建可以追溯到磁带机的年代，可谓历史悠久。虽然 tar 工具最初是用于磁带机的数据归档，但其现在也支持磁盘的数据归档，而且仍然保留着对磁带机的兼容。tar 工具一路发展过来，经过很多大佬的打磨，功能强大，现在已经是 Linux 系统上默认的数据归档工具。
方案：3个核（Linux或Debian） + 1个核（RT-Thread） Debian-AMP工程
对于文件的存储、传输、磁盘IO读取等操作在使用Hadoop生态圈的存储系统时是非常常见的，而文件的大小等直接影响了这些操作的速度以及对磁盘空间的消耗。
你可曾想过在IOS设备上运行Linux系统？或者用shell来传输文件、编写脚本，又或者使用Vi来开发代码？
Busybox 最初是由 Bruce Perens 在 1996 年为 Debian GNU/Linux 安装盘编写的。其目标是在一张软盘(存储空间只有1MB多)上创建一个GNU/Linux 系统，可以用作安装盘和急救盘
Hive 建设离线数据仓库通常符合：一次写入，多次读取。所以需要我们在建表的时候选择恰当的存储格式和数据的压缩模式。
tar命令允许你创建和解压缩 tar 包。它支持很多压缩算法，例如 gzip, bzip2, lzip, lzop, xz 和 compress。
最近公司业务转型，开始倒腾起安卓系统，做了几个月的安卓APP开发，最近又需要做系统定制，所以撸起袖子搞起… 首先干嘛？部署开发环境，开发环境一直是让人头疼的问题，何况我们不只需要一套环境，这样整来整去很容易就把系统玩废了，一旦出了问题就等着崩溃吧。所以借着这几年火起来的docker布置一个我们的开发环境。 其实环境配置大同小异，我们只是需要把编译环境配置在docker中就可以了，在这里只做记录，过程仅供参考。
这篇文章简单我们来一起梳理嵌入式Linux的一些知识，方便于一些想跟我一样想要由单片机进阶到嵌入式Linux的朋友做一些参考学习。
在使用 docker 容器的时候，我们总会想看看容器内部长什么样子：我们使用 docker exec 命令可以满足我们的期望：
Yarn上可以运行各种类型的分布式运算程序（mapreduce只是其中的一种），比如mapreduce、storm程序，spark程序等。
综合资料百度云：https://pan.baidu.com/s/1kJdJ6xc12Yg4rPby_MatDA 提取码：4u7d
关闭防火墙： systemctl stop firewalld systemctl disable firewalld
一个通用 Linux SDK 工程目录包含有buildroot、app、kernel、device、docs、external 等目录。其中一些特性芯片如RK3308/RV1108/RV1109/RV1126等，会有所不同。
Ubuntu系统打开Windows下生成的文本文件，会在每行的末尾出现’^M’ 原因就是Windows和Linux的回车符是不同的 在Windows下回车符是\r\n回车换行 在Linux下回车符是\n 最简单、最常用的解决方法是使用dos2unix命令转换：dos2unix filename Ubuntu下dos2unix和unix2dos命令在tofrodos包中 安装：apt-get install tofrodos 安装完之后用dos2unix和unix2dos发现还是不能用，原来是Ubuntu10.04里已经不再用这个命令啦，
安装JDK: 因为我是编译android4.4，故jdk6即可满足。ubuntu14.04不支持apt-get安装，我们来手动安装一下：
大家好，我是架构君，一个会写代码吟诗的架构师。今天说一说BusyBox 72 变「建议收藏」,希望能够帮助大家进步!!!
docker pull registry.cn-hangzhou.aliyuncs.com/gloomyghost/yuzukilizard
我们Hadoop 2.4集群默认不支持snappy压缩，但是最近有业务方说他们的部分数据是snappy压缩的（这部分数据由另外一个集群提供给他们时就是snappy压缩格式的）想迁移到到我们集群上面来进行计算，但是直接运行时报错：
本篇文章主要讲解嵌入式板卡中Linux系统是如何正确测试、使用的，其中内容包含有U-Boot编译、U-Boot命令和环境变量说明、Linux内核编译、xtra驱动编译、系统信息查询、程序开机自启动说明、NFS使用说明、TFTP使用说明、TFTP + NFS的系统启动测试说明、inux设备驱动说明等，其中案例源码部分公开。
[No.007] 解决Ubuntu16.04 字体太细发虚（表现在Chrome中浏览中文） 这个问题产生是由于Ubuntu 16.04 LTS 的默认中日韩字体packagefonts-noto-cjk有一个bug，如果网页没有把其页面语言指定为中日韩字体，那么会用细的字体来显示。解决方法如下：
最近遇到一个日志备份 io 过高的问题，业务日志每十分钟备份一次，本来是用 Python 写一个根据规则扫描备份日志问题不大，但是随着业务越来越多，单机上的日志文件越来越大，文件数量也越来越多，导致每每备份的瞬间 io 阻塞严重， CPU 和 load 异常的高，好在备份速度很快，对业务影响不是很大，这个问题会随着业务增长，越来越明显，这段时间抽空对备份方式做了优化，效果十分显著，整理篇文章记录一下。
使用maven来进行源码，真的是靠运气，特别是你网络很差的情况下，再特别是你没有本地库的时候，靠运气吃饭。。。
Busybox本身包含了很了Linux命令，但是要编译其他程序的话需要手工下载、编译，如果它需要某些依赖库，你还需要手工下载、编译这些依赖库。 如果想做一个极简的文件系统，可以使用Busybox手工制作。
sequenceFile文件是Hadoop用来存储二进制形式的[Key,Value]对而设计的一种平面文件(Flat File)。可以把SequenceFile当做是一个容器，把所有的文件打包到SequenceFile类中可以高效的对小文件进行存储和处理。SequenceFile文件并不按照其存储的Key进行排序存储，SequenceFile的内部类Writer提供了append功能。SequenceFile中的Key和Value可以是任意类型Writable或者是自定义Writable。
之前的文章：《一次搞定交叉编译》 给大家讲了如何安装交叉编译工具链，搭建交叉编译环境。
其中Openjdk-8-jdk不能直接安装，因为官方已经将源默认移除了，需要寄几添加，jdk不行必须要openjdk
配置CentOS能连接外网。Linux虚拟机ping www.baidu.com 是畅通的 注意：采用root角色编译，减少文件夹权限出现问题
关于UnBlob UnBlob是一款针对容器安全的强大工具，该工具可以从任意格式的容器中提取文件。该工具运行速度非常快，准确率高，并且易于使用。UnBlob能够解析已知的超过30种不同格式的文档、压缩文件和文件系统，并能够从中递归提取文件内容。 UnBlob是完全开源免费的，并提供了一个命令行接口。除此之外，该工具还能够以Python库的形式来使用。这些特性使得UnBlob成为文件/数据提取、分析和逆向固件镜像的完美工具。 工具特性 1、准确率高：支持使用自定义规则识别数据区块的起始偏移量，并根
NXP官方linux仓库地址为：https://github.com/Freescale/linux-fslc/tree/5.4-2.1.x-imx。
之前一篇文章中已经完成了kali虚拟机的一些基本环境的搭建，现在我们开始用kali进行Lineage源码编译。整个流程基本上说按照官方wiki来的，但是肯定会踩不少坑，即使是完全照着这篇文章来，也不一定会成功，但是还是记录一下踩坑记录。
LZO 是致力于解压速度的一种数据压缩算法，LZO 是 Lempel-Ziv-Oberhumer 的缩写。这个算法是无损算法，参考实现程序是线程安全的。 实现它的一个自由软件工具是lzop。最初的库是用 ANSI C 编写、并且遵从 GNU通用公共许可证发布的。现在 LZO 有用于 Perl、Python 以及 Java 的各种版本。代码版权的所有者是 Markus F. X. J. Oberhumer。 LZO 库实现了许多有下述特点的算法： * 解压简单，速度非常快。 * 解压不需要内存。 *
Android是当今世界上最流行的操作系统。数以百计的不同设备制造商选择将其安装在他们的设备上，因为它是免费的开源的，并且围绕它构建了大量的应用程序和服务生态系统。但是，许多厂商为了利益，很少会持续升级您的系统版本，迫使您购买新的设备以提升体验。同时，厂商也会使用制定系统，包含很多您用不到的软件，为了体验最新原生安卓系统，您可以尝试自行编译Android ROM。在Androidmodding社区中，此类固件通常称为ROM，即只读内存的缩写。
小文件问题的影响 1.从Hive的角度看，小文件会开很多map，一个map开一个JVM去执行，所以这些任务的初始化，启动，执行会浪费大量的资源，严重影响性能。
近几年，物联网设备已渗透到生活的方方面面，为人们带来了极大的方便。但是，因其承载有人们日常生活产生的数据和隐私信息，其安全性也越来越受到人们的关注。在上一篇中，我们讨论了用脚本控制小米设备，这主要是从流量层面入手来进行的安全分析；在这一篇，主要从固件入手，分析固件的脆弱性。
1 - A list of partitions 2 - A function for computing each split 3 - A list of dependencies on other RDDs 4 - Optionally, a Partitioner for key-value RDDs (e.g. to say that the RDD is hash-partitioned) 5 - Optionally, a list of preferred locations to compute each split on (e.g. block locations for an HDFS file)
转载请注明出处 : http://blog.csdn.net/shulianghan/article/details/51592930
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
云直播
对象存储
