原文:大数据离线分析平台 需求分析(一)

项目综述 在本次课程中,项目分别分为bigdata track,bigdata transforer和bigdata dataapi。本次项目主要以分析七个模块的数据,分别为用户基本信息分析 操作系统分析 地域信息分析 用户浏览深度分析 外链数据分析 订单信息分析以及事件分析。那么针对不同的分析模块,我们又不同的用户数据需求,所以我们在bigdata track项目中提供不同的客户端来收集不同的数 ...

2019-04-17 13:10 0 1059 推荐指数:

查看详情

大数据离线分析平台 需求分析(二)

一、数据展示系统(bigdata_dataapi)总述 bigdata_dataapi项目的主要目标有两个:第一个就是我们需要提供一个提供json数据的Rest API;另外一个目标就是提供一个展示结果的demo页面。bigdata_dataapi使用 ...

Wed Apr 17 22:12:00 CST 2019 0 538
大数据量的需求分析:使用sqoop导数据

Sqoop:SQL-to-Hadoop (点击查看官方英文文档) 这个链接是简洁的中文教程:https://www.yiibai.com/sqoop/sqoop_import_all_tables.html Sqoop连接传统关系型数据库 和 Hadoop 的工具 ...

Mon Apr 13 19:08:00 CST 2020 0 1100
大数据离线分析平台 用户数据Etl

Etl目标 解析我们收集的日志数据,将解析后的数据保存到hbase中。这里选择hbase来存储数据的主要原因就是: hbase的宽表结构设计适合我们的这样多种数据格式的数据存储(不同event有不同的存储格式)。 在etl过程中,我们需要将我们收集得到的数据进行处理,包括ip地址解析 ...

Thu Apr 18 00:30:00 CST 2019 0 782
数据库设计(一) 需求分析

,具体包含6个步骤:需求分析、概念结构设计、逻辑结构设计、物理结构设计、数据库实施、数据库运行和维护。 ...

Thu Nov 13 23:33:00 CST 2014 0 5150
数据库设计-需求分析

数据库设计-需求分析 需求分析的任务: 确定所要开发的应用系统的目标。 收集和分析用户对数据的要求。 了解用户需要什么样的数据。      需求分析主要考虑“做什么”,而不是“怎么做”的问题,从用户出发,从数据出发,从经验出发 需求分析 ...

Sat Apr 20 17:34:00 CST 2019 0 3613
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM