【资源介绍】:
本课程是一门针对大数据测试与分析的综合性课程,旨在帮助学员全面掌握大数据领域的核心技术与实战应用。课程从开学典礼开始,逐步深入,涵盖了元数据管理、分布式日志收集、Hadoop常用命令、ETL系统、数据仓库与数据集市、日志采集、离线与实时数据计算、数据服务原理以及Redis和HBase等大数据技术的核心要点。
首先,学员将学习如何管理和使用元数据,了解Workbench管理表的基本原理。随后,通过结合游戏数据分析的案例,深入探究数据建模和数据采集测试的实战操作。课程中,分布式日志收集系统(如Flume)的使用和日志数据的预清洗、分区设计等技术将帮助学员提升数据处理能力。
Hadoop作为大数据处理的重要工具,其常用Linux命令和ETL系统(数据抽取、转换、加载)的掌握对于数据仓库和数据集市的建设至关重要。课程将详细讲解这些技术,并通过实战案例加深理解。
在数据采集与测试部分,课程将教授学员如何使用Wireshark、Postman等工具进行日志采集,并结合游戏数据分析场景进行数据采集测试。此外,离线与实时数据计算、数据服务原理等内容也将是课程的重点,帮助学员掌握MapReduce、Hive、Storm等大数据计算框架的使用。
最后,课程还将介绍Redis和HBase等NoSQL数据库在大数据测试中的应用,以及二次拆封重组、UI测试等高级测试技术。
通过本课程的学习,学员将能够全面掌握大数据测试与分析的核心技术,提升在大数据领域的实战能力,为未来的职业发展打下坚实的基础。
【资源目录】:
├──lib
| ├──.DS_Store 8.00kb
| ├──asm-5.0.3.jar 51.98kb
| ├──clojure-1.7.0.jar 3.66M
| ├──disruptor-3.3.2.jar 77.61kb
| ├──kryo-3.0.3.jar 278.53kb
| ├──log4j-api-2.8.2.jar 222.81kb
| ├──log4j-core-2.8.2.jar 1.34M
| ├──log4j-over-slf4j-1.6.6.jar 20.16kb
| ├──log4j-slf4j-impl-2.8.2.jar 22.58kb
| ├──minlog-1.3.0.jar 5.58kb
| ├──objenesis-2.1.jar 40.78kb
| ├──reflectasm-1.10.1.jar 20.25kb
| ├──ring-cors-0.1.5.jar 5.51kb
| ├──servlet-api-2.5.jar 102.65kb
| ├──slf4j-api-1.7.21.jar 40.11kb
| ├──storm-core-1.1.1.jar 22.54M
| └──storm-rename-hack-1.1.1.jar 2.38M
├──lib(1)
| ├──lib
| | ├──.DS_Store 6.00kb
| | ├──jopt-simple-3.2.jar 52.00kb
| | ├──kafka_2.9.2-0.8.1.1-javadoc.jar 36.55kb
| | ├──kafka_2.9.2-0.8.1.1-scaladoc.jar 1.58M
| | ├──kafka_2.9.2-0.8.1.1-sources.jar 4.40kb
| | ├──kafka_2.9.2-0.8.1.1.jar 3.23M
| | ├──log4j-1.2.15.jar 382.65kb
| | ├──metrics-core-2.2.0.jar 80.20kb
| | ├──scala-library-2.9.2.jar 8.45M
| | ├──slf4j-api-1.7.2.jar 25.47kb
| | ├──snappy-java-1.0.5.jar 1.19M
| | ├──zkclient-0.3.jar 62.51kb
| | └──zookeeper-3.3.4.jar 590.02kb
| └──__MACOSX
| | └──lib
├──linlinstorm1
| ├──linlinstorm1
| | ├──.settings
| | ├──bin
| | ├──lib
| | ├──src
| | ├──.classpath 1.25kb
| | ├──.DS_Store 8.00kb
| | └──.project 0.36kb
| └──__MACOSX
| | └──linlinstorm1
├──ReportLog 2
| ├──ReportLog 2
| | ├──js
| | ├──.DS_Store 6.00kb
| | ├──index1 0.69kb
| | └──index1.html 18.18kb
| └──__MACOSX
| | ├──ReportLog 2
| | └──._ReportLog 2 0.17kb
├──__MACOSX
| └──lib
| | └──._.DS_Store 0.12kb
├──0.1 开学典礼.mp4 169.47M
├──0.10 元数据-事实设计.mp4 159.41M
├──0.11 元数据-workbench管理表(一).mp4 204.09M
├──0.12 元数据-workbench管理表(二).mp4 195.65M
├──0.13 实战篇-结合游戏数据分析的数据建模.mp4 215.21M
├──0.14 大数据测试原则,基础原理,所需技能等.flv 195.97M
├──0.15 分布式日志收集系统-flume.mp4 237.00M
├──0.16 分布式日志收集系统-日志数据预清洗规则.mp4 185.02M
├──0.17 分布式日志收集系统-分区设计及创建.mp4 165.62M
├──0.18 分布式日志收集系统-利用滚存.mp4 164.20M
├──0.19 基于hadoop的常用linux命令(一).20.mp4 134.80M
├──0.2 ETL系统,EDW数据仓库,数据集市(一).mp4 139.99M
├──0.20 基于hadoop的常用linux命令(二).19.mp4 191.97M
├──0.21 日志采集-采集来源及兼容处理.mp4 170.59M
├──0.22 日志采集-结合wireshark抓包(一).mp4 169.93M
├──0.23 日志采集-结合wireshark抓包(二).mp4 166.98M
├──0.24 日志采集-结合postman发包(一).mp4 133.65M
├──0.25 日志采集-结合postman发包(二).mp4 141.29M
├──0.26 结合游戏数据分析的数据采集测试(一).mp4 142.38M
├──0.27 结合游戏数据分析的数据采集测试(二).mp4 134.58M
├──0.28 过滤,内建变量,字符串匹配等语法(一).mp4 158.09M
├──0.29 过滤,内建变量,字符串匹配等语法(二).mp4 193.85M
├──0.3 ETL系统,EDW数据仓库,数据集市(二).mp4 123.37M
├──0.30 结合游戏数据分析的日志数据计算.mp4 191.87M
├──0.31 海量数据计算-事件分类.mp4 204.42M
├──0.32 离线数据计算1.0-MapReduce计算.mp4 170.46M
├──0.33 框架-实例调度及依赖.mp4 227.25M
├──0.34 框架-Hdfs.mp4 202.94M
├──0.35 框架-批处理.mp4 229.93M
├──0.36 离线数据计算2.0框架-hive开发(一).mp4 218.07M
├──0.37 离线数据计算2.0框架-hive开发(二).mp4 237.90M
├──0.38 离线数据计算2.0框架-hive测试(一).mp4 278.06M
├──0.39 离线数据计算2.0框架-hive测试(二)…mp4 171.07M
├──0.4 5V特征.mp4 171.39M
├──0.40 结合游戏数据分析的海量数据计算测试.mp4 218.15M
├──0.41 实时数据计算-事件选择.mp4 285.35M
├──0.42 实时数据计算-kafka…mp4 141.46M
├──0.43 实时数据计算-storm计算…mp4 258.96M
├──0.44 数据服务原理-数据拆分.mp4 315.10M
├──0.45 数据服务原理-数据重组.mp4 194.81M
├──0.46 sql-针对数据服务的hive测试.mp4 210.48M
├──0.47 sql-kylin入库(一)…mp4 276.76M
├──0.48 sql-kylin入库(二)…mp4 208.99M
├──0.49 sql-impala(一).mp4 177.52M
├──0.5 报表,预测分析,数据监控,运营指导.mp4 113.97M
├──0.51 结合游戏数据分析的数据服务测试…mp4 161.35M
├──0.52 redis语法及基于大数据测试的使用(一).flv 241.15M
├──0.53 redis语法及基于大数据测试的使用(二).flv 243.47M
├──0.54 hbase常用命令.mp4 262.68M
├──0.55 二次拆封重组,常见ui测试等.mp4 107.64M
├──0.56 结合游戏数据分析的前端测试实战篇.mp4 121.81M
├──0.57 自动化设计及模块-MapReduce自动化.mp4 120.46M
├──0.58 自动化设计及模块-流程自动化.mp4 230.50M
├──0.59 自动化设计及模块-大数据自动化架构.flv 175.77M
├──0.6 数据层和业务层到数据流转过程.mp4 108.83M
├──0.60 利用java实现mr或者流程自动化(一).mp4 199.99M
├──0.61 利用java实现mr或者流程自动化(二).mp4 272.59M
├──0.62 利用java实现mr或者流程自动化(三).mp4 366.83M
├──0.7 批处理,流处理,Interactive SQL类型.mp4 174.14M
├──0.8 元数据-界定,管理,应用元数据.mp4 166.57M
├──0.9 元数据-维度设计.mp4 168.71M
├──Hadoop技术内幕 深入解析HADOOP COMMON和HDFS架构设计与实现原理_13236639.pdf 57.16M
├──hbase基础+redis副本.txt 9.08kb
├──hive实战 27.46kb
├──hive优化.docx 29.11kb
├──lib.zip 26.77M
├──linlinstorm1.zip 26.77M
├──ReportLog 2.zip 36.33kb
└──storm-redis-1.0.3.jar 64.44kb
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。