Advertisement

flink 项目实战案例之电商订单实时分析业务介绍

阅读量:

flink 项目实战案例之电商订单实时同步业务介绍

第一部分: flink 入门demo

配置一个maven项目
编写一个flink程序

1.1 配置一个maven项目

org.apache.flink flink-java ${flink.version} org.apache.flink flink-streaming-java_2.11 ${flink.version} org.apache.flink flink-clients_2.11 ${flink.version} org.apache.flink flink-connector-wikiedits_2.11 ${flink.version} \---------------------

第二部分: flink项目实战

在过去的某一个月中,项目组采用了Flink这一技术平台开发了一个大数据系统。该系统的核心功能则致力于实现对电商订单数据的分析。同时,在处理能力方面表现突出,在线数据流每秒可接收并处理高达5万笔的数据信息。

基本上这个思路拿到任何处理订单的场景都可以使用.

开发环境为: Flink1.6.1 , Hadoop2.6.0, Hbase1.0.0, Hive1.1.0

这个项目中主要有几大功能:

第一部分为: flink分析网站的PV,UV.以及用户的访问状态.
这个用的是MR

第二部分: flink分析网站频道的新鲜度

第三部分: flink 分析用户浏览地区分布

第四部分: flink 用户网络分析

第五部分: flink batch 实现产品成交订单分析

第六部分: flink table 订单分析

这些功能主要基于hadoop、hbase、hive、sqoop等技术框架与spring cloud平台集成开发。为大数据开发人员提供了良好的学习实践平台。目前大数据处理领域已广泛采用flink技术。

打赏链接

全部评论 (0)

还没有任何评论哟~