经过半年的系统开发与数据分析,目前最为复杂的地方就是在游戏研发方记录的LOG日志上,每个CP团队的日志记录方式,时间点均有所差异,而面对产品所需要的数据我们只能逐一进行分析,而且尤其是时间点问题导致数据计算异常的事情时有发生,鉴于以上的问题进过多部分游戏的分析最终产出一套基于我们开发的系统的标准LOG库,并且逐步的与新接入研发方沟通,在数据记录/时间点上以此作为规范。
以下的数据基本上囊括了我们的产品所需要计算的所有数值,也几乎容纳了网上对于游戏运营所需要的基础数值。
结构简述
手游日志库包含两部分,
1、 中心数据库(ucenter),所有的游戏公用的数据库,存储未分区服前的数据,
2、 独立游戏库(ugame),每区服一个,存储已区分区服的游戏数据
以上日志型数据库可与游戏逻辑数据库建立在同一实例中,日志库均以时间为分区
数据流
特别注意:
数据我们将采用ETL采集方式从游戏数据库中采集至联运数据仓库,并经由后期计算产生相应报表。为保证ETL采集数据准确性,对数据写入方式存在部分要求。
1、区服ID请设置可由运维人员继续配置
2、数据必须以时间顺序写入,例如:不能先写入2014-12-31 23:50:50 数据再写入其之前数据,否则会造成采集数据丢失
3、数据写入需保证时效性,数据需在5分钟之内写入,例如:不能在当前时间为14:05分后写入14:00之前数据,否则可能造成报表数据不准确
4、数据表中,除login_log,sence_log中类型使用数字替代,其余类型均使用汉字记录包含:
- a) 消费类型
- b) 消费名称
- c) 玩法类型
- d) 玩法分类
e) 玩法名称
数据结构
中心库(ucenter)
1 | /*start_log*/ |
游戏库(ugame)
1 | /*enter_log*/ |