数据采集,是一切有效管理的前提

  • 数据接入

  • 数据传输

  • 数据建模/存储

  • 数据查询

  • 数据可视化

公司的理念:
数据采集要大、全、细、时

  • 充分考虑用户规模与数据规模的增长,做好数据资产积累的准备。

  • 多种数据源,多种方法全量采集,贯穿用户使用产品的整个生命周期。

  • 采集足够全面的属性、维度、指标,让积累的数据资产更加优质。

  • 提高数据采集的时效性,从而提高后续数据应用的时效性。

在公司,灵活选择你的数据采集方案

  • 多种采集方案

    客户端(前端)

    设置内容

    服务器日志

    采集后端业务服务器打印的日志。更强的采集能力,更好的支撑精细化分析场景。

    业务数据库

    采集存储在各个关系型数据库中的业务数据。让用户行为数据与业务数据结合,满足复杂分析场景。

    历史数据

    支持历史数据一次性导入,激活过往数据,挖掘潜在价值。

    第三方数据

    对接 OA、CRM、ERP、客服、物流等第三方系统数据,实现一个平台上,多维度、多部门的数据分析需求。

  • 业务数据采集平台

    支持多种数据源、多种协议、多种方法实现各软件系统中业务数据的全量和增量采集,包括 OA、CRM、ERP、客服、物流等第三方系统数据,可根据需要灵活定义采集数据样式、采集周期、采集指标。

    互联网采集平台

    内置通用采集爬虫模块,实现国内外全网任意网站文本信息的采集,包括各大新闻发布网站、社交网络、各大电商网站、社区论坛等,提供包括IP代理池、VPN代理池,提供包括IP代理池、VPN代理池。

    IOT采集平台

    基于X开源框架搭建的可插拔数据采集平台,支持多种物联网设备,提供开放的API,便于上层应用获取设备状态、设备事件等信息,同时支持新型设备协议的扩展集成。