展开

关键词

开源的对决,MapR将Apache Drill引入企业应用

【编者按】近日,MapR正式将Apache Drill整合进该公司的大数据处理平台,并开源了一系列大数据相关工具。 该公司称这个版本的Drill为0.5,以“开发者预览版”的方式展示这个SQL查询引擎。 Drill最初公布是在 2012年8月,专注于SQL on Hadoop,当下已经取得了很大的进展。 同时,Drill的主要特性在于,在数据被加载到数据库之前,它可以快速的生成结构模式,这主要因为取代将数据转换成其他模式或者表格,Drill保持原始的格式。 因此,Drill也无法满足那些期望将数据转换成特定格式的用户需求。 MapR产品管理负责人Tomer Shiran表示:“对比其他SQL on Hadoop项目,我们更有信心将Drill做好。” 尽管该公司当下的大数据平台已经整合了Drill,但是这个技术并不是MapR产品的唯一选择。

67770

Linux Tcp 内核协议栈学习三种武器 之 Packet Drill

Google 在2013 年发布了TCP 内核协议栈 测试工具 Packet Drill。这个工具是名副其实,大大的简化了学习和测试TCP 内核协议栈的难度。 Packet Drill 脚本解析/执行引擎 首先 Packet Drill 脚本必须要被解析和分解为 通过传统socket 接口收发报文的部分和通过TUN接口收发报文的部分 在传统socket 接口执行对应的动作 Packet Drill 语法简介 相对时间顺序 Packet Drill 每一个事件(发送/接收/发起系统调用)都有相对前后事件的时间便宜。一般使用+number 来表达。 Packet Drill 使用 < 表示发送报文, 使用 > 表示接收报文。 报文的格式描述 报文格式的表达比较类似tcpdump。 Packet Drill 其实还有非常复杂而且更精巧的玩法, 可以充分测试各种边界条件。

1.1K30
  • 广告
    关闭

    【玩转 Cloud Studio】有奖调研征文,千元豪礼等你拿!

    想听听你玩转的独门秘籍,更有机械键盘、鹅厂公仔、CODING 定制公仔等你来拿!

  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Apache Drill 专为Hadoop、NoSQL和云存储设计的Schema-free类型的SQL引擎

    选择 Apache Drill 的十大理由 分钟级的上手速度 几分钟即可入门 Apache DrillDrill 还为 SQL 提供了灵活的扩展来处理嵌套数据结构。 Drill的虚拟数据集可以将复杂的NoSQL数据结构对应到兼容BI的结构,帮助用户挖掘和可视化数据。 交互式查询Hive表 Drill可以充分利用Hive中存在的资源。 Drill还支持 Hive UDFs,如果您在Hive中创建了UDFs,那么可以在Drill中直接使用它们而无需修改。 高性能分析 Drill专为高吞吐和低延迟而设计。 Drill会利用集群的聚合内存在高效的流水线模型下执行查询。当内存不足时,Drill会自动溢写到磁盘上。

    39430

    大数据那些事(26):Apache Drill之我很土但我毕业了

    差不多这个项目起来的时候在2013年,比Impala开始进展要慢,但是Drill毕业的却比Impala还早。Impala现在还在孵化器里,而Drill则已经堂而皇之的成了顶级项目了。 Drill是不是Dremel呢?当然不是的。从我能看到的关于Drill来介绍以外。Drill有那么几个重要的特点。首先是Drill对nested data的支持。 关于这种半结构化的支持来说,Drill做得看起来是相当不错。在SQL语言的使用上也是很简单的使用点来引用下一层的数据。 Drill对于数据已经包含了Schema的类型比如JSON的表现,至少从使用性来看,可谓我见过的工具里面很好的。 Drill当然也必须说自己是做的。至于做得到底有多好,我想,小人之心的我估计它们做得不咋地。

    75480

    数据仓库专题(23):总线矩阵的另类应用-Drill Down into a More Detailed Bus Matrix

    predisposed to dense details, we suggest you begin with the more simplistic, high-level matrix and then drill-down

    38820

    Data Models(数据模型)-翻译

    Accounting(会计) Please drill down to each mid-level section of Accounting for more detail. Airline(航空) Please drill down to each mid-level section of Airline for more detail. 经济指标,产品包,产品,财产,帐户,客户,管理人员,交易,金融机构,员工,市场营销的计划,监管机构,国家 Contracts(合同) Please drill down to each mid-level 供应商,合同,合同管理员,客户 Corporate Tax(企业所得税) Please drill down to each mid-level section of Corporate Tax for 列车时间表,失事,旅行,火车,火车/站,汽车,机车,设备,轨道,居民公司,开关,站,包括运费,庭院,权利的方式,供应商,旅游市场,提单,票务,托运人,客运 Sales(销售) Please drill

    7540

    OLAP是什么东西

    功能 钻取(Drill-up和Drill-down): 改变维的层次,变换分析的粒度——包括向下钻取(Drill-down)和向上钻取(Drill-up)/上卷(Roll-up)。 Drill-up是在某一维上将低层次的细节数据概括到高层次的汇总数据,或者减少维数; 而Drill-down则相反,它从汇总数据深入到细节数据进行观察或增加新维。

    99920

    Oracle BIEE (Business Intelligence) 11g 11.1.1.6.0 学习(4)创建多维钻取分析

    primary key (EMPNO); alter table BI_DIM_DRILL_EMP add constraint FK_DIM_DRILL_EMP_REF_JOB foreign key (JOB) references bi_dim_job (JOB); alter table BI_DIM_DRILL_EMP add constraint FK_DIM_DRILL_EMP_REF_DEPTNO   好了,天下太平,主表BI_FACT_EMP 与 从表 BI_DIM_DRILL_EMP 通过EMPNO关联,而 BI_DIM_DRILL_EMP 再进一步通过EMPNO、JOB、DEPTNO分别与 在弹出的界面中,展开SCOTT下的BI_DIM_DRILL_EMP表,双击EMPNO(即设置BI_DIM_DRILL_EMP的EMPNO字段为维度EMPNO的显示列) ? 类似的,把BI_DIM_DRILL_EMP的DEPTNO设置成维度DEPTNO的显示列,把BI_DIM_DRILL_EMP的JOB设置成维度JOB的显示列,再次点击保存,应该就能成功了。

    39990

    一文读懂数据钻取

    在BI的领域里面,数据钻取主要分为两种: 一种是贯穿钻取(drill through),比如在企业网站分析报告上你看到了10个注册转化记录,点击之后就可以看到这10个转化记录的详细信息。 另一种是向下钻取(drill down),指的是不同条件或维度之间的切换,你可以对这10个转化的信息从年龄进行钻取,再从性别和使用设备等维度钻取。 为什么要做数据钻取? 它包括向上钻取(roll up)和向下钻取(drill down),后面简称为上钻和下钻。 我们先来聊一聊下钻,下钻是通过增加图层从汇总数据深入到细节数据进行观察。 钻取(Drill) 钻取包含向下钻取(Drill-down)和向上钻取(Drill-up)/上卷(Roll-up)操作, 钻取的深度与维所划分的层次相对应。 3.

    96320

    Mac OS如何恢复出厂设置?安装Mac OS系统教程

    推荐一款数据恢复软件Disk Drill Enterprise for Mac Disk Drill Enterprise for Mac(数据恢复软件) 立即下载 Disk Drill Enterprise for Mac是一款应用在MacOS平台的数据恢复软件,disk drill mac使用多种恢复方法恢复任何文件或文件夹或重建200多种文件类型。 还为所有数 2019-08-2818.4 MB简体中文 在本站下载安装好Disk Drill,只需点击一个“恢复”按钮即可完成所有操作。 当然这款软件还有很多功能,详情点击上面链接查看吧!

    4.9K40

    大数据处理分析的六大工具

    Apache Drill 为了帮助企业用户寻找更为有效、加快Hadoop数据查询的方法,Apache软件基金会近日发起了一项名为“Drill”的开源项目。 Apache Drill 实现了 Google's Dremel. 据Hadoop厂商MapR Technologies公司产品经理Tomer Shiran介绍,“Drill”已经作为Apache孵化器项目来运作,将面向全球软件工程师持续推广。 而“Drill”将有助于Hadoop用户实现更快查询海量数据集的目的。 通过开发“Drill”Apache开源项目,组织机构将有望建立Drill所属的API接口和灵活强大的体系架构,从而帮助支持广泛的数据源、数据格式和查询语言。

    568150

    【工具】六大工具帮你做好大数据分析

    Apache Drill 为了帮助企业用户寻找更为有效、加快Hadoop数据查询的方法,Apache软件基金会近日发起了一项名为“Drill”的开源项目。 Apache Drill 实现了 Google’s Dremel. 据Hadoop厂商MapR Technologies公司产品经理Tomer Shiran介绍,“Drill”已经作为Apache孵化器项目来运作,将面向全球软件工程师持续推广。 而“Drill”将有助于Hadoop用户实现更快查询海量数据集的目的。 通过开发“Drill”Apache开源项目,组织机构将有望建立Drill所属的API接口和灵活强大的体系架构,从而帮助支持广泛的数据源、数据格式和查询语言。

    37570

    6个用于大数据分析的最好工具

    四 Apache Drill 为了帮助企业用户寻找更为有效、加快Hadoop数据查询的方法,Apache软件基金会近日发起了一项名为"Drill"的开源项目。 Apache Drill 实现了 Google’s Dremel. 据Hadoop厂商MapR Technologies公司产品经理Tomer Shiran介绍,"Drill"已经作为Apache孵化器项目来运作,将面向全球软件工程师持续推广。 ? 而"Drill"将有助于Hadoop用户实现更快查询海量数据集的目的。 通过开发"Drill"Apache开源项目,组织机构将有望建立Drill所属的API接口和灵活强大的体系架构,从而帮助支持广泛的数据源、数据格式和查询语言。

    13720

    解决SAP Webi的槽点

    但如果能够drill down和使用report filters的时候,就会出现问题,在BI 4.1及以上版本中,我们可以通过自定义Webi界面来解决此问题。 点击下面的save button,该用户组现在可以进行drill和filter了,但无法访问webi中的design mode。 请注意,右上角没有Design或者Data的按钮,但我们可以访问Drill和Filter栏。相对4.0及以下版本来说这是个非常大的进步了。

    15210

    Hadoop上时实类SQL查询系统对比

    以前只用过Hive与impala两个类SQL查询系统,最近又将Hortonworks开源的Stinger与Apache的Drill做了些调研。累死累活搞了一天的资料,头都大了。 由于调查时间比较短(一天的时间都头晕眼花了,再长点估计我就要过劳死了),所写之处难免会有差错,欢迎大家指正 总体来说虽然impala、stinger、drill三个系统都是类SQL实时查询系统,但是它们的侧重点完全不同 drill 开源时间跟impala差不多,只不过属于Apache,。这个系统的目标很宏大--抽象所有数据源,做成统一接口。底层支持hbase、mongoDB、HDFS、Cassandra等数据源。 下图为drill的架构图。 (图片来源https://cwiki.apache.org/confluence/display/DRILL/High-level+Architecture) Stinger Hortonworks开源的一个实时类

    7020

    MySQL系列之数据库应用类型学习笔记

    都可能存在各个细节的描述方面(比如时间维度包括日期、月份、季度、年等) 度量(Measure):多维数组的取值 维的成员(Member):即维的一个取值,是数据项在某个维中位置的描述 OLAP的基本多维分析操作有钻取(Drill-up 和Drill-down)、切片(Slice)、切块(Dice)以及旋转(Pivot)等 钻取:改变维的层次,变换分析的粒度,它包括向上钻取(Drill-up)、向下钻取(Drill-down )、上滚(

    5410

    python 读写csv格式的文件

    LawnMower,Ride-on mower,Mike,Anne,9/5/2012,1/5/2013 3,Bike,BMX bike,Joe,Rob,7/3/2012,7/22/2013 4,Drill ','Mike','$370','Fair','2012-04-01'],['3','Bike','BMX bike','Joe','$200','Good','2013-03-22'],['4','Drill

    20610

    6个用于大数据分析的最好工具

    四、Apache Drill 为了帮助企业用户寻找更为有效、加快Hadoop数据查询的方法,Apache软件基金会近日发起了一项名为“Drill”的开源项目。 Apache Drill 实现了 Google’s Dremel. 据Hadoop厂商MapR Technologies公司产品经理Tomer Shiran介绍,“Drill”已经作为Apache孵化器项目来运作,将面向全球软件工程师持续推广。 而“Drill”将有助于Hadoop用户实现更快查询海量数据集的目的。 通过开发“Drill”Apache开源项目,组织机构将有望建立Drill所属的API接口和灵活强大的体系架构,从而帮助支持广泛的数据源、数据格式和查询语言。

    30320

    【性能分析】大数据分析工具

    四、Apache Drill 为了帮助企业用户寻找更为有效、加快Hadoop数据查询的方法,Apache软件基金会近日发起了一项名为“Drill”的开源项目。 Apache Drill 实现了 Google’s Dremel. 据Hadoop厂商MapR Technologies公司产品经理Tomer Shiran介绍,“Drill”已经作为Apache孵化器项目来运作,将面向全球软件工程师持续推广。 而“Drill”将有助于Hadoop用户实现更快查询海量数据集的目的。 通过开发“Drill”Apache开源项目,组织机构将有望建立Drill所属的API接口和灵活强大的体系架构,从而帮助支持广泛的数据源、数据格式和查询语言。

    8440

    使用Chrome的timeline工具分析web应用性能

    这个版本的TimeLine能够像ABAP的SAT一样,让使用者可以drill down到具体到底是哪一个function花费了多少时间。 进一步drill down进去就能知道其实都是由两个jQuery.sap.require引起的,这个无法避免。 ? ?

    47610

    扫码关注腾讯云开发者

    领取腾讯云代金券