反欺诈规划
2016-11-22 21:06:36 0 举报
AI智能生成
ppdai
作者其他创作
大纲/内容
新流程
整理需求
整理需求
有限层的关系
全图关系
第一阶段
有限层的关系
**可以只做1层
有限层的关系
**可以只做1层
需求
需要有个框架,在上面写
可以让很多人一起来写
,捞出关系
,捞出关系
只要实现有限层(例如1层)即可
只要捞出关系即可,变量可以从传统数据库捞
生成变量、规则、模型
进入的关系需要比较多
速度快,<30s
支持批量+非批量
支持回溯
方法
HBase或者Titan都可以
走线下T+1
第二阶段
有限层的关系
3层
有限层的关系
3层
需求
要求第一阶段的层数是可以方便地扩展为2、3的
需要沿用第一阶段的框架
方法
第三阶段
需求
出全图的关系
这个时候进入的节点、关系可以比较少
方法
研究中……
测试和预发布环境
需求
避免因为修改代码,造成生产代码挂机
测试流程是否能跑通
测试跑出的结果是否正确
方法
建立测试环境
建立预发布环境
可以和PATA共享同样的测试环境、预发布环境
运行监控
需求
观察到反欺诈的运行指标(平均速度、积压数量)
T+0报警邮件
T+1的报表
看到每一步的耗时,便于优化
格式参考右侧网址
https://paipaidai-my.sharepoint.cn/personal/huyueteng_ppdai_com/_layouts/15/WopiFrame.aspx?sourcedoc=%7BC45D02EA-D16C-484E-950D-53B9CB62B649%7D
方法
T+0的报警邮件
完成之后,让刘勇的报警关掉
T+1的报表邮件
每一步的耗时,放在这里
T+1的Tableau报表
增加处理能力
需求
当前急需增加处理能力
方法
B1机器环境配置
在B1上多开了4个进程
现有流程
优化加速
(人肉分布式)
优化加速
(人肉分布式)
需求
在保证兼容的情况下,优化加快现有流程
方法
每个子环节打点,拿到时间消耗
子主题
人肉分布式,拆为n个模块
cookies一个模块
number一个模块
每个模块只负责下载+计算自己的内容
完成后写入集中的地方,并通知
有一个汇总的模块,负责集合其他模块的内容
【预计效果 22min -> 9min】
0 条评论
下一页