游戏蛮牛学习群(纯技术交流,不闲聊):159852603
游戏蛮牛 手机端
开启辅助访问
 找回密码
 注册帐号

扫一扫,访问微社区

开发者专栏

关注:2332

当前位置:游戏蛮牛 技术专区 开发者专栏

__________________________________________________________________________________
开发者干货区版块规则:

  1、文章必须是图文形式。(至少2幅图)
      2、文章字数必须保持在1500字节以上。(编辑器右下角有字数检查)
      3、本版块只支持在游戏蛮牛原创首发,不支持转载。
      4、本版块回复不得无意义,如:顶、呵呵、不错......【真的会扣分的哦】
      5、......
__________________________________________________________________________________
查看: 2245|回复: 23

[yuxikuo] 使用xlua读取lua数据表性能分析

[复制链接]  [移动端链接]
排名
3519
昨日变化
1

4

主题

38

帖子

613

积分

Rank: 9Rank: 9Rank: 9

UID
74505
好友
1
蛮牛币
1246
威望
0
注册时间
2015-2-12
在线时间
175 小时
最后登录
2018-8-29

专栏作家

发表于 2017-12-21 02:07:36 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?注册帐号

x
本帖最后由 yuxikuo 于 2017-12-21 02:07 编辑

使用xlua读取lua策划数据表性能分析
使用的lua表
[XML] 纯文本查看 复制代码
Hero =
{
    [1] =
    {
        nHeroId = 1,
            sName = "英雄法师",
            nRare = 11,
            nType = 1,
            nDefaultStar = 1,
            bIsOpen = true,
    },
    [2] =
    {
        nHeroId = 2,
            sName = "英雄法师",
            nRare = 11,
            nType = 1,
            nDefaultStar = 1,
            bIsOpen = true,
    },
    [3] =
    {
        nHeroId = 3,
            sName = "英雄法师",
            nRare = 11,
            nType = 1,
            nDefaultStar = 1,
            bIsOpen = true,
    },
    [4] =
    {
        nHeroId = 4,
            sName = "英雄法师",
            nRare = 11,
            nType = 1,
            nDefaultStar = 1,
            bIsOpen = true,
    },
    [5] =
    {
        nHeroId = 5,
            sName = "英雄法师",
            nRare = 11,
            nType = 1,
            nDefaultStar = 1,
            bIsOpen = true,
    },
    [6] =
    {
        nHeroId = 6,
            sName = "英雄法师",
            nRare = 11,
            nType = 1,
            nDefaultStar = 1,
            bIsOpen = true,
    },
}
测试代码
[C#] 纯文本查看 复制代码
using System.Collections;
using System.Collections.Generic;
using UnityEngine;
using XLua;

public class LoadLuaData : MonoBehaviour
{
    void Awake()
    {
        LuaInstance.instance.Get();
    }
    void Start()
    {
        UnityEngine.Profiling.Profiler.BeginSample("Get Lua Data test ===1");
        TableDataHeroPojo data = (TableDataHeroPojo)LuaDataManager.GetLuaDatInfo<TableDataHeroPojo>(4);
        UnityEngine.Profiling.Profiler.EndSample();
        Debug.LogError("1 test hero id = " + data.nHeroId);

        UnityEngine.Profiling.Profiler.BeginSample("Get Lua Data test ===2");
        TableDataHeroPojo data2 = (TableDataHeroPojo)LuaDataManager.GetLuaDatInfo<TableDataHeroPojo>(4);
        UnityEngine.Profiling.Profiler.EndSample();
        Debug.LogError("2 test hero id = " + data2.nHeroId);

        UnityEngine.Profiling.Profiler.BeginSample("Get Lua Data test ===3");
        string path = string.Format(GameConfig.LuaPath, "DataConfig/Hero");
        LuaInstance.instance.Get().DoString(path);
        LuaTable table = LuaInstance.instance.Get().Global.Get<LuaTable>("Hero");
        LuaTable hero = table.Get<int, LuaTable>(1);
        TableDataHeroPojo tb1Class = hero.Cast<TableDataHeroPojo>();
        UnityEngine.Profiling.Profiler.EndSample();

        UnityEngine.Profiling.Profiler.BeginSample("Get Lua Data test ===3");
        LuaTable hero2 = table.Get<int, LuaTable>(2);
        TableDataHeroPojo tb1Class2 = hero2.Cast<TableDataHeroPojo>();
        UnityEngine.Profiling.Profiler.EndSample();

        UnityEngine.Profiling.Profiler.BeginSample("Get Lua Data test ===4");
        LuaTable hero3 = table.Get<int, LuaTable>(3);
        TableDataHeroPojo tb1Class3 = hero3.Cast<TableDataHeroPojo>();
        UnityEngine.Profiling.Profiler.EndSample();

        UnityEngine.Profiling.Profiler.BeginSample("Get Lua Data test ===5");
        LuaTable hero4 = table.Get<int, LuaTable>(4);
        TableDataHeroPojo tb1Class4 = hero4.Cast<TableDataHeroPojo>();
        UnityEngine.Profiling.Profiler.EndSample();

        UnityEngine.Profiling.Profiler.BeginSample("Get Lua Data test ===6");
        LuaTable hero5 = table.Get<int, LuaTable>(5);
        TableDataHeroPojo tb1Class5 = hero5.Cast<TableDataHeroPojo>();
        UnityEngine.Profiling.Profiler.EndSample();

        UnityEngine.Profiling.Profiler.BeginSample("Get Lua Data test ===7");
        LuaTable hero6 = table.Get<int, LuaTable>(6);
        TableDataHeroPojo tb1Class6 = hero6.Cast<TableDataHeroPojo>();
        UnityEngine.Profiling.Profiler.EndSample();


        Debug.Log("hero id = " + tb1Class.nHeroId);
        Debug.Log("hero id = " + tb1Class2.nHeroId);
        Debug.Log("hero id = " + tb1Class3.nHeroId);
        Debug.Log("hero id = " + tb1Class4.nHeroId);
        Debug.Log("hero id = " + tb1Class5.nHeroId);
        Debug.Log("hero id = " + tb1Class6.nHeroId);
    }
}

Table对应数据Class
[C#] 纯文本查看 复制代码
using System.Collections;
using System.Collections.Generic;
using UnityEngine;
using System.IO;
using XLua;

public class TableDataHeroPojo : LuaDataInfo
{
    private static string TableName = "Hero";
    private static LuaTable Table = null;

    public int nHeroId;
    public string sName;
    public int nRare;
    public int nType;
    public int nDefaultStar;
    public bool bIsOpen;

    public override object Marshal(int table_id_)
    {
        TableID = table_id_;
        if (Table == null)
        {
            string path = string.Format(GameConfig.LuaPath, lua_hero);
            lua_.DoString(path);
            Table = lua_.Global.GetInPath<LuaTable>(TableName);
        }
        if (Table == null)
        {
            Debug.Log(TableName + "  load success");
            return null;
        }
        lua_table_ = Table.Get<int, LuaTable>(TableID);
        if (lua_table_ == null)
        {
            Debug.Log("load success  " + TableID);
            return null;
        }
        TableDataHeroPojo data = lua_table_.Cast<TableDataHeroPojo>();
        return data;
    }
}

public class LuaDataInfo 
{
    protected static LuaEnv lua_;
    protected string lua_hero = "DataConfig/Hero";
    protected LuaTable lua_table_;

    public static void RegisterToLua(LuaEnv lua)
    {
        lua_ = lua;
        lua_.AddLoader(new LuaLoader((ref string filepath) =>
        {
            filepath = string.Format(GameConfig.LuaLoaderPath, Application.streamingAssetsPath, filepath);
            if (File.Exists(filepath))
            {
                return File.ReadAllBytes(filepath);
            }
            else
            {
                return null;
            }
        }));
    }
    
    public int TableID { get; set; }

    public virtual object Marshal(int table_id_)
    {
        return true;
    }
}

1.第一次DoString开销比较大,主要在File的操作。解决方案:所有lua文件做成大文件,File的open操作打开一次,持有句柄。(test===1)
2.重复Get已经DoString的表仍然有1K的GC,主要在LuaTable.Get操作里。解决方案:在LuaDataInfo里有个Marshal,用来序列化数据,并且能保证只Get一次表。每个表有一个static的表名和LuaTable对表的引用。(test===2)
3.重复获取同一个index的子表,GC开销较大,主要在Activator.CreateInstance里。解决方案:缓存已经读取的子表,每次先从字典里查找,找到直接返回,找不到再走整个读取流程(test===4~8)
4.返回缓存的子表,GC仍然不可忽略,60B。由于我使用的是type的name做key,所以会有一个字符串60B的开销,后面直接用type做key,可以省略这部分开销,但是时间略有消耗

优化点:
1.分表,将大的数据表分成多个
2.读取表的时候,按字段读取,而不是一次性解析整条数据
3.预加载一些道具、活动、任务表
4.注意缓存表的内存占用
5.注意lua堆栈

lua读取数据表.png
lua读取数据表.png

回复

使用道具 举报

7日久生情
2723/5000
排名
2958
昨日变化
10

2

主题

1840

帖子

2723

积分

Rank: 7Rank: 7Rank: 7Rank: 7

UID
241666
好友
0
蛮牛币
10437
威望
0
注册时间
2017-9-6
在线时间
407 小时
最后登录
2018-10-19
发表于 2017-12-21 06:55:48 来自Mobile--- | 显示全部楼层
感谢分享

回复

使用道具 举报

7日久生情
1631/5000
排名
3077
昨日变化

3

主题

867

帖子

1631

积分

Rank: 7Rank: 7Rank: 7Rank: 7

UID
246489
好友
1
蛮牛币
2708
威望
0
注册时间
2017-9-28
在线时间
311 小时
最后登录
2018-10-11

活力之星

发表于 2017-12-21 08:30:29 | 显示全部楼层
谢谢分享

回复

使用道具 举报

7日久生情
2325/5000
排名
2829
昨日变化
9

11

主题

1117

帖子

2325

积分

Rank: 7Rank: 7Rank: 7Rank: 7

UID
168159
好友
4
蛮牛币
5325
威望
0
注册时间
2016-9-12
在线时间
703 小时
最后登录
2018-10-19
发表于 2017-12-21 09:30:00 | 显示全部楼层

回复

使用道具 举报

5熟悉之中
782/1000
排名
3666
昨日变化
10

0

主题

152

帖子

782

积分

Rank: 5Rank: 5

UID
254155
好友
0
蛮牛币
1066
威望
0
注册时间
2017-11-13
在线时间
244 小时
最后登录
2018-10-19
发表于 2017-12-21 09:53:12 | 显示全部楼层
{:90:}

回复

使用道具 举报

4四处流浪
445/500
排名
12909
昨日变化
5

3

主题

149

帖子

445

积分

Rank: 4

UID
216830
好友
2
蛮牛币
329
威望
0
注册时间
2017-4-9
在线时间
231 小时
最后登录
2018-10-19
发表于 2017-12-21 10:00:50 | 显示全部楼层
谢谢分享

回复

使用道具 举报

7日久生情
1610/5000
排名
2474
昨日变化
8

12

主题

749

帖子

1610

积分

Rank: 7Rank: 7Rank: 7Rank: 7

UID
218409
好友
3
蛮牛币
5107
威望
0
注册时间
2017-4-19
在线时间
315 小时
最后登录
2018-10-19
发表于 2017-12-21 10:20:20 | 显示全部楼层

谢谢分享

回复

使用道具 举报

7日久生情
3301/5000
排名
1941
昨日变化
7

0

主题

2122

帖子

3301

积分

Rank: 7Rank: 7Rank: 7Rank: 7

UID
219676
好友
1
蛮牛币
2410
威望
0
注册时间
2017-7-12
在线时间
513 小时
最后登录
2018-10-19

活力之星

发表于 2017-12-21 10:21:58 | 显示全部楼层
谢谢分享

回复

使用道具 举报

排名
777
昨日变化
1

36

主题

815

帖子

3563

积分

Rank: 9Rank: 9Rank: 9

UID
76248
好友
21
蛮牛币
19187
威望
0
注册时间
2015-2-28
在线时间
946 小时
最后登录
2018-10-19

专栏作家蛮牛译员活力之星七夕浪漫情人

发表于 2017-12-21 11:13:21 | 显示全部楼层
谢谢分享,很重要的细节处理

回复 支持 反对

使用道具 举报

排名
13372
昨日变化
3

0

主题

9

帖子

94

积分

Rank: 2Rank: 2

UID
224451
好友
0
蛮牛币
14
威望
0
注册时间
2017-5-31
在线时间
25 小时
最后登录
2018-10-19
发表于 2017-12-21 11:22:06 | 显示全部楼层
zhichi                        

回复 支持 反对

使用道具 举报

7日久生情
2104/5000
排名
2057
昨日变化
10

1

主题

938

帖子

2104

积分

Rank: 7Rank: 7Rank: 7Rank: 7

UID
216583
好友
2
蛮牛币
3480
威望
0
注册时间
2017-4-7
在线时间
535 小时
最后登录
2018-10-19
发表于 2017-12-21 13:17:05 | 显示全部楼层
谢谢分享

回复

使用道具 举报

5熟悉之中
683/1000
排名
4621
昨日变化
1

0

主题

199

帖子

683

积分

Rank: 5Rank: 5

UID
164084
好友
0
蛮牛币
1518
威望
0
注册时间
2016-8-24
在线时间
190 小时
最后登录
2018-10-10
发表于 2017-12-21 14:17:33 | 显示全部楼层
谢谢分享,学习了

回复

使用道具 举报

2初来乍到
118/150
排名
22113
昨日变化
6

1

主题

68

帖子

118

积分

Rank: 2Rank: 2

UID
252344
好友
0
蛮牛币
79
威望
0
注册时间
2017-11-3
在线时间
29 小时
最后登录
2018-9-19
发表于 2017-12-21 16:59:56 | 显示全部楼层
感谢分享

回复

使用道具 举报

7日久生情
1904/5000
排名
2187
昨日变化
4

44

主题

754

帖子

1904

积分

Rank: 7Rank: 7Rank: 7Rank: 7

UID
219600
好友
7
蛮牛币
2635
威望
0
注册时间
2017-4-27
在线时间
502 小时
最后登录
2018-10-19
发表于 2017-12-21 17:35:14 | 显示全部楼层
感谢分享
[发帖际遇]: fengjing 发帖时在路边捡到 1 蛮牛币,偷偷放进了口袋. 幸运榜 / 衰神榜

回复

使用道具 举报

5熟悉之中
842/1000
排名
5526
昨日变化
3

0

主题

436

帖子

842

积分

Rank: 5Rank: 5

UID
146677
好友
9
蛮牛币
2732
威望
0
注册时间
2016-4-25
在线时间
166 小时
最后登录
2018-10-16
QQ
发表于 2017-12-21 17:43:12 | 显示全部楼层
谢谢分享,借鉴一下

回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册帐号

本版积分规则

快速回复 返回顶部 返回列表