我在一篇关于动态仪器的论文中找到了这个概念。但我找不到这个概念的解释。如果可能的话请解释一下..。
编辑:或者有关于如何实现轻量级动态工具(在用户空间、syscalls和普通函数调用)的教程吗?
编辑(增加纸张细节):
一种优化高性能分布式数据流处理的代码生成方法
摘要
我们提出了一种基于代码生成的优化方法,以提高分布式流处理应用程序的性能和可扩展性。我们使用一种基于运算符的、以流为中心的语言(称为SPADE )来表示流处理应用程序,它支持从类型泛型运算符的工具包中合成分布式数据流图。构建此类应用程序的一个主要挑战是找到一种有效和灵活的方法,将运算符的逻辑图映射为可部署在一组分布式节点上的物理图。这涉及到如何找到最佳运算符如何映射到进程,以及如何将最佳流程映射到计算节点。在本文中,我们采用两阶段优化方法,首先由SPADE编译器生成应用程序的仪器化版本,以分析和收集有关应用程序中运算符的处理和通信特性的统计信息。在第二阶段,分析信息被提供给优化器,以得到一个物理数据流图,该图可以部署在计算集群中的节点上。这种方法不仅创建了高度优化的应用程序,这些应用程序是为底层计算和网络基础设施量身定做的,而且通过简单地重复优化步骤并重新编译应用程序以匹配优化器生成的物理流图,可以将应用程序重新定位到不同的硬件设置中。利用现实世界的应用,从金融和射电天文学等不同领域,我们证明了我们的方法在系统S --一个大规模的分布式流处理平台上的有效性。
https://stackoverflow.com/questions/5916094
复制相似问题