惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

博客园 - 三生石上(FineUI控件)
WordPress大学
WordPress大学
S
SegmentFault 最新的问题
小众软件
小众软件
T
Tailwind CSS Blog
博客园 - 聂微东
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
人人都是产品经理
人人都是产品经理
V
Visual Studio Blog
罗磊的独立博客
有赞技术团队
有赞技术团队
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
Jina AI
Jina AI
量子位
云风的 BLOG
云风的 BLOG
Recent Announcements
Recent Announcements
Hugging Face - Blog
Hugging Face - Blog
P
Proofpoint News Feed
N
Netflix TechBlog - Medium
GbyAI
GbyAI
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
腾讯CDC
美团技术团队

陈少文的网站

巨变与机遇的未来十年 Kubernetes 平台管理软件压力测试方案 使用镜像部署 Hexo 静态页面 终于等到你 - GitHub 镜像仓库服务(ghcr.io) 一起来学 Go --(6)Interface 一起来学 Go --(5)Goroutine 和 Channel 什么是函数式编程 如何在 Kubernetes 集群集成 Kata 柯里化与偏函数 使用 PyGithub 自动创建 Label 软件产品是团队能力的输出 Helm 2 、Helm 3 比较 IoT 变现 Kubernetes 中的 DNS 服务 国内的 Helm 镜像源 Harbor 使用自签证书支持 Https 访问 DevOps 工具链之 Prow 如何使用 kfctl 安装 Kubeflow VS Code 无法下载 Go 插件的工具包 工程师更应具有服务精神 你不知道的 Docker 使用技巧 使用 Docker 运行 Tensorflow 论中国 什么是左移 如何清空 Git 仓库全部历史记录 一禅小和尚 有风吹过厨房 时间的玫瑰 如何在 CentOS 安装 GPU 驱动 开发 Tips(19)
GrowingIO 数据采集字段分析
微信公众号 · 2017-08-09 · via 陈少文的网站

Please enable Javascript to view the contents

1. 字段含义

1.1 u, 用户ID

1
2
3
4
5
6
if cookie.has(gr_user_id){
    //使用 cookie 中的 gr_user_id 有效期十年
}
else {
    //按照 "xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx" 格式,随机生成一个 gr_user_id
}

1.2 s,会话ID

1
2
3
4
5
6
7
if cookie.has(gr_session_id_){
    //使用 cookie 中的 gr_session_id_
    //gr_session_id_,的有效期为 100 分钟
}
else {
    //按照 "xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx" 格式,随机生成一个 gr_session_id_
}

1.3 t,事件类型

  • imp,显示
  • vst,访问
  • clck,点击
  • chng,变更
  • sbmt,提交

1.4 tm,当前时间

数据发出时,浏览器当前时间。

1.5 ptm,页面加载时间

当前页面加载时,浏览器当前时间。跳转或刷新时,刷新。

1.6 d,当前域名

1.7 p,当前相对路径

去掉域名和参数部分的 URI,不包含 ? 的内容

1.8 rf, 访问来源

1.9 sh,屏幕高度

1.10 sw,屏幕宽度

1.11 l,浏览器语言

1.12 e,触发的事件

  • e.x ,xpath
  • e.h,href
  • e.v,元素文本内容

2. 原理简介

原始的 http://dn-growing.qbox.me/vds-gate.js ,采集的数据并不可读。这是因为在发送采集数据之前,vds-gate.js 对数据进行了编码。阅读代码之前,必须先去掉编码处理。

MutationObserver:Mutation Observer(变动观察器)是监视DOM变动的接口。当DOM对象树发生任何变动时,Mutation Observer会得到通知。

事件主要分为两类:

  • DOM变更:GrowingIO 采集 JS 中引入了 Google 实现的 MutationObserver 封装。提供对 DOM 变动时,数据的采集。
  • 行为触发:主要是页面的 visit、impression、click、submit等。

首次访问时,API 返回应用和用户设备相关的信息,产生 visit 和 页面加载时 DOM 变化的 Event 事件流数据。会有两次数据采集:

  • 第一次,采集设备相关的信息。客户端、屏幕大小、语言等。
  • 第二次,采集页面加载时,DOM 变化的事件流。

在不刷新页面的前提下,当前页面每次 DOM 发生变化,每次点击等行为,都会有数据的提交。

点击等行为、数据采集的格式

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
[
  {
    "u": "7ddbc39e-8861-482d-bba6-b9e00f4607e7",
    "s": "da237b25-6a7f-4e37-beba-5d1e7255ff88",
    "t": "clck",
    "tm": 1502335934576,
    "ptm": 1502335904058,
    "d": "domain.com",
    "p": "/overview",
    "e": [
      {
        "v": "2016",
        "x": "/div#wrapper/div#page-wrapper.page-wrapper/div.content"
      }
    ]
  }
]

3. 参考


微信公众号