IDB申请DRDS执行DDL(建表、修改表结构)流程——分库分表

在DRDS上申请执行分库分表的DDL需要4步:
1、在IDB上提建表申请单
2、主管审批,DBA审批
3、发按日期分表的DDL邮件给DBA(指定日期范围)
4、DBA分表建好后,通知刈刀,在DRDS中配置分库分表策略

分库分表DDL的IDB申请流程(第1、2步)同单库单表,这篇主要介绍第3、4步骤

在IDB上提交建表申请后,即可着手发邮件给DBA。

发邮件给DBA是让DBA跑脚本批量建按日期的分表。需要干2件事情
1、指定所用的DRDS的库:
高德地图amap aos相关的业务:use autonavi_aos_da_[00-24];
开放平台相关的业务:use autonavi_api[......]

Read more

启明星统计体系

启明星负责高德地图和开放平台的业务统计,涉及到数十个指标和维度的统计。统计指标体系将会阐述这些产品线的指标和维度的统计定义,作用以及统计方法。

1. 高德地图

1.1 名词解释

1.1.1 指标定义

指标名称
指标定义

用户
每个独立设备当作一个独立用户。Android根据IMEI号,iOS根据IDFV来统计。

新增用户
首次联网使用高德地图的用户。如果一个用户首次使用高德地图,该用户定义为新增用户;卸载再安装的设备,不会被算作一次新增。

活跃用户
启动高德地图的用户即为活跃用户,每天同一个用户启动多次只计为一个活跃用户。

周(月)活跃用户
某个[......]

Read more

编写nvd3组件需要具备的一些知识

以下是我基于nvd3开发组件时的一些心得:

1、任何复杂的图表基本的元素其实并不多(很多复杂的系统都是基于一些简单的规则组合而成),svg中的图形元素大概就以下几种:line、rect 、polyline、 path 、ellipse 、circle ,正如“一生二、二生三、三生万物”所言,我们基于这些元素可以做出很复杂很美观的图表,前提是要对基本的元素灵活应用,了如指掌,所以基于svg做图表库要对svg中的这些基本元素烂熟于心。

2、nvd3是基于d3做的,api风格与d3也是一致的,需要对d3的api很熟悉,最好能系统的看一遍d3的api,不用熟悉每一个方法,但是心里要有个大概印象,知[......]

Read more

人地关系第一期挖掘结果校验报告与工作规划

1. 摘要

人地关系的家和公司挖掘,经过三轮迭代,融合了AMap和开放平台用户数据,挖掘出来3.32亿名用户的常驻地,家和公司(截至2015-05-01)。其中针对amap日活用户而言,家的总体覆盖率达到77.32%,公司的总体覆盖率达到80.17%。

我们采用了两份不同样本集来对挖掘结果校验,交通订阅样本共计5269条,家准确率为89.31%,公司准确率79.18%。公司同事反馈样本共计90条,家和公司的准确率均为94.44%。目前挖掘结果基本达到年前所设定的准确率80%,覆盖率50%的目标,可以投入使用。

通过追踪样本集,目前存在IOS平台准确率和覆盖率都偏低,公司准确率相对[......]

Read more

启明星日志收容

一、启明星所收容的日志,主要由AOS(服务平台)和API(开放平台)两套中间服务层产生。

二、AOS,全称 amap online service,即高德地图在线服务,由服务平台部-后台服务组负责研发,维护。AOS作为中间层,提供包括高德地图(手机版,PC,M站)以及车联网等应用使用。AOS使用Python和Java两种语言开发,部署在上海,深圳,北京(北京机房于2015年9月作为冷备,预计2015年底弃用)三地。AOS包含多个子系统,包括Maps,MPS,SNS,OSS,Push等,共计三百多个接口,大约800多台VM构成。历史版本繁复众多,兼容时间非常长,具体的服务架构和组成,请参见AO[......]

Read more

日志团队工作规划

1. 启明星

1.1 监控系统

  1. 自动化监控
  2. 机器学习回归模块
  3. 对接权限系统,开放所有用户使用
    系统收益:逐步提供所有用户对数据波动和变化快速监控提醒工具
    截止:1.0 Aug 20 1.1 Aug 30 1.2 Sep 30 1.2 Nov 30
    注意事项:满足各方需求

1.2 端对端/SLA

  1. 上线第一版端对端
  2. 跟进日志质量
  3. 对接监控系统
    系统收益:能够真实体现客户端实际性能
    截止时间:1.0 Aug 20 1.1 Aug 30 1.2 Sep 30
    注意事项:base,page日志质量需要跟进

1.3 数据质量

    [......]

Read more