专栏首页owentLua性能分析

Lua性能分析

、前言

Lua性能分析本来有一些现成的工具,比如LuaProfile,不幸的是这货不支持luajit,另外LuaStudio虽然挺好用但是是收费的。 比较不爽,刚好Lua本身提供钩子功能,用来写调试工具和性能分析工具都比较简单,索性就自己写一个。

设计思路

在lua提供了钩子函数的情况下,性能分析其实比较简单。只要挂载LUA_MASKCALL钩子和LUA_MASKRET的钩子,自己搞一个执行栈信息记录的结构,里面记录一下时间差就好了。

一般性能分析工具都会提供函数内部开销和总开销。总执行时间差即是总开销,函数内部则在函数切换时累加,切换回来时重新计算开始时间即可。(其实还有一种办法是总时间减去其调用的函数开销,为什么不这么做下面会提到)

一些问题

但是实际实现过程中还是碰到了一些问题的,因为我直接用得luajit,所以不知道是不是luajit的bug。

  1. 本地C代码会触发LUA_MASKCALL钩子,不会触发LUA_MASKRET钩子
  2. 有些lua函数的返回钩子也不会被触发

总的来说就是有些函数返回没有触发LUA_MASKRET钩子,这样带来的一个问题就是统计不准,准确的说就是这些函数的实际调用开销会比统计结果小。并且调用关系可能会不正确。

为了尽可能减少不触发返回带来的影响,函数内部开销的统计在函数切换的时候就统计一次,并更新状态。另外如果弹出的函数不是记录中的最上层,就一直弹出栈到匹配的函数为止

这样做的结果只能尽可能减少误差,当然还有一种可选方案是不统计这些不触发返回钩子的函数的统计,这样不会有误差,但是统计的信息量会减少。

精细统计

很多情况下总的调用统计并不能满足需求,特别是有上面误差的问题的情况下。所以就加了个对于单个函数调用手动hook的统计功能。

实现的方式就是替换原有的lua函数为自己实现的C函数,然后在自己的函数里增加统计信息,再去调用原来的lua函数。这种情况可以做到手动对单个函数的单次调用关系和消耗分析。对于查找性能毛刺有一定帮助。

hook的函数如下:

// hook_fn[lua fn, stat fn](...)
static int LuaProfile_hook_run_fn(lua_State *L) {
    auto profile = LuaProfile::Instance();
    // 获取Lua调用信息
    lua_Debug ar;
    lua_getstack(L, 0, &ar);
    lua_getinfo(L, "Sn", &ar);

    LuaProfileStackData::stack_ptr_t root_ptr = LuaProfileStackData::make(std::make_pair(__FUNCTION__, __LINE__));
    root_ptr->name = ar.name;
    size_t top = profile->push_fn(root_ptr);

    // native 级cpu时钟统计 
    auto start_tm = LuaProfileStackData::clock_t::now();

    // 转入原来的lua 函数
    int param_num = lua_gettop(L);
    lua_pushvalue(L, lua_upvalueindex(1));

    for (int i = 1; i <= param_num; ++i) {
        lua_pushvalue(L, i);
    }
    lua_call(L, param_num, LUA_MULTRET);

    auto duration = LuaProfileStackData::clock_t::now() - start_tm;
    // 关闭统计
    profile->pop_fn(top);

    // 统计函数
    {
        lua_pushvalue(L, lua_upvalueindex(2));
        if (lua_isnil(L, -1)) {
            lua_pop(L, 1);
        } else {
            LuaProfile_hook_run_fn_gen_stats_table(L, root_ptr);
            lua_call(L, 1, 0);
        }

        ++ root_ptr->call_count;
        root_ptr->call_full_duration += duration;
    }

    // 优先读取第一子节点的信息
    if (!root_ptr->children.empty()) {
        root_ptr->source = root_ptr->children.begin()->second->source;
        root_ptr->line_number = root_ptr->children.begin()->second->line_number;
    }

    // TODO hook 的函数级监控
    int ret_top = lua_gettop(L);
    return ret_top - param_num;
}

导出Lua接口

开启性能分析的时候会导致执行速度大幅下降,而且lua的钩子是独占的,所以在lua层增加了接口用于控制性能分析组件。

profile.start() -- 启动栈性能分析
profile.stop() -- 停止栈性能分析
profile.reset() -- 重置栈性能分析缓存数据
profile.enable() -- 恢复性能分析
profile.disable() -- 暂停性能分析
profile.enableNativeProfile() -- 启动本地调用统计
profile.disableNativeProfile() -- 关闭本地调用统计
profile.dump_to(<文件路径>) -- 转储分析结果到文件(csv格式)
profile.dump() -- 返回分析结果(csv格式)
profile.hook(<lua函数>) -- 函数级性能分析钩子

输出

上面的总调用统计我这里直接输出csv文件或csv格式的文本了。有需要可以改成其他输出格式。

精确的函数调用关系统计直接输出的lua table,可以通过lua转成其他格式。比如下图是我转成json之后的结果:

所有代码托管在: https://github.com/owent-utils/lua/tree/master/src_native/Script/Lua/LuaModule/LuaProfile.cpphttps://github.com/owent-utils/lua/tree/master/src_native/Script/Lua/LuaModule/LuaProfile.h

除这两个文件已外依赖项目: 1. https://github.com/owent-utils/c-cpp/tree/master/include/DesignPattern 2. https://github.com/owent-utils/c-cpp/tree/master/include/String/StringCommon.h

共3个文件,如果不需要单件模式基类和字符串跨平台CMP函数的话可以移除掉,有兴趣的童鞋可自取。

Written with StackEdit.

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 对atbus的小数据包的优化

    atbus是我按之前的思路写得服务器消息通信中间件,目标是简化服务器通信的流程,能够自动选择最优路线,自动的断线重连和通信通道维护。能够跨平台并且高效。

    owent
  • tolua++内存释放坑

    tolua++在new一个类的时候,会把类指针作为userdata传入lua,建立metatable并通过tolua_classevents函数给metatab...

    owent
  • USACO 2008 March Gold Cow Jogging 解题报告

    题目链接:http://202.120.106.94/onlinejudge/problemshow.php?pro_id=143

    owent
  • WAF代码剖析之初识openresty

    自从这几年信息安全的大力发展,信息安全的建设是逐步发展起来,作为甲方安全工程师,一个人的安全部,使用开源的WAF部署防御攻击,仿佛是件很平常的事情,但是开源的坏...

    FB客服
  • 防御性编程

    Author:bakari       Date:2012.8.25 本篇是我根据网上的一些陈述经过整理和总结而得。其中详细的内容我会标注出处。看不懂的可以查看...

    CloudDeveloper
  • PHP从数据库提取并显示数据的典型代码

    似水的流年
  • PHP从数据库提取并显示数据的典型代码

    PHP从数据库提取并显示数据的典型代码如下: if ($res=mysql_query($sql)) { //数据库查询执行成功 ...

    似水的流年
  • 2019年,熊掌号内容优化,8个小技巧!

    在2019年,SEO人员明显可以感觉到每天关键词的浮动变化,还是相对比较大的,这与百度算法迭代更新有直接的关系,我们知道,搜索排序规则将逐渐从超链技术向领域权威...

    蝙蝠侠IT
  • 【Unity游戏开发】tolua之wrap文件的原理与使用

    本文内容转载自:https://www.cnblogs.com/blueberryzzz/p/9672342.html 。非常感谢原作者慷慨地授权转载,比心!...

    马三小伙儿
  • java链接数据库简单教程(JDBC)

    Java基础 | 数据库 | Android | 学习视频 | 学习资料下载 ★回复【数据库工具】获取数据库安装包以及安装视频教程链接 注:(本文以连接orac...

    Java学习

扫码关注云+社区

领取腾讯云代金券