DQC
数据质量监控平台
目前支持在云端调度系统中的DT及ODPS SQL数据质量校验

功能特点
•1、支持多种模板级规则

•2、可扩展的模板表达式

•3、支持强弱不同程度校验

•4、支持红橙级别告警

•5、校验规则与任务分离

•6、分区级别质量校验

•7、分区级别质量报告

•8、项[......]

Read more

自定义报表系统需求调研

     从面临的问题说起,我们已经有优秀的启明星平台,可以解决绝大多数的数据上的问题。但是还是有很多临时的需求像长尾一样,总是存在。例如:导出任意组合列的数据、合并任意两个埋点统计等。

     面对这些问题,我们怎么变被动为主动?有没有理论基础支撑去解决这些问题?答案是olap多维分析。简单说[......]

Read more

后端服务及可视化工作计划

智能监控系统

指标监控(系统指标和业务指标)

  • 监控接入权限系统
  • 重构目前监控流程,改善交互

服务性能监控(按如下指标设计)

  • 平均响应时长(目前不超过100ms)
  • 响应时长长尾比例,超过1s的请求,不超过千分之五
  • 错误比例,即非200返回,不超过万[......]

Read more