Spark_Page 2_思索IT

极课时间-大数据训练营2021|完结无密

极课时间-大数据训练营2021最新完结课程设计对标阿里 P7，三个维度全面覆盖大数据工程师能力要求 1：掌握以 Spark SQL 为核心的泛 SQL 体系，囊括 Hive、Spark SQL、Flink SQL、Kafka SQL 等知识点，进一步掌握 SQL 应用及性能调优，深入了解 SQL 底层逻辑与原理，摆脱 SQL Boy/Girl 的困境，掌握大数据分析和大数据开发能力，以 Hadoop、Spark、Kafka、Flink 等框架为脉络 2：了解分布式计算体系的来龙去脉，掌握大规模存储、计算、性能调优的能力，掌握构建大数据平台工程的能力，了解如何设计和实现一个分布式系统，胜任数据开发任务和数据平台的搭建任务 3：详解 Hadoop、Spark 核心源码，学会在源码层面分析和解决问题，实现开发能力的再进阶与突破，跳出复杂的技术栈，领会底层核心原理，掌握 trouble-shooting 的思路与能力，培养真正的大数据开发思维学习人群有 2 年以上开发经验，熟练掌握 Java/Python 等语言，想转型大数据的程序员。有大数据基础，希望提升自己能力水平的大数据开发工程师。对现状迷茫，希望打破瓶颈，构建自己技术壁垒的大数据开发工程师。对大数据感兴趣，希望进入大数据行业的计算机相关专业大学生。 Q：是否有基础要求？需要你拥有 2 年以上的开发经验，熟悉 Java 和 SQL...

2 years前 1.2K 98

IT课程资源架构师

七月在线-大数据工程师集训营|2022年最新完结无密

七月在线-大数据工程师集训营|2022年最新完结无密本大数据集训营从Hadoop基础讲解，贯穿数据采集、传输、存储、计算、展示等各个环节，着重讲解企业中如何使用spark、MapReduce、hive、flume、sqoop等各个组件，并附有经典企业案例讲解，案例均来自一线互联网工业项目。另，讲师团队堪称大厂豪华级大数据专家讲师团队，且根据最近的大数据人才需求，加入elasticsearch和数据仓库模型等内容，以及设计了三大企业级项目，并标准化项目流程： a、设计与搭建基于Hive、Presto的数据仓库与OLAP分析引擎 b、Flink实战——直播、短视频APP用户行为分析 c、ELK+Spark实现一个错误日志监控(搜索、分析、报警)平台最后，在第八阶段设置了大数据求职面试辅导，包括大数据面试求职准备工作讲解、常见大数据面试题目解析等内容。一切为了大家更好的就业、转型、提升。培养目标：从零开始，由Hadoop入门，打造大数据开发工程师之路。试看链接：https://pan.baidu.com/s/1jVGx34SJa70942HlGFEdmw?pwd=uxbq 目录大纲：七月在线大数据工程师集训营「3月下旬新增三大实战项目，且标准化项目流程」/ ├──01、第一阶段大数据与Hadoop 基础(HDFS与YARN) | ├──01、在线视频：大数据与Hadoop生态介绍.mp4 290.09M | ├──02、在线视频：大数据存储系统HDFS.mp4 336.58M | ├──03、在线视频：分布式资源管理框架Yarn.mp4 363.57M | └──04、在线视频：分布式计算框架MapReduce与Hive SQL.mp4 254.48M ├──02、第二阶段数据采集工具与消息队列Kafka | ├──01、在线视频：数据收集工具Flume、Beats介绍与原理.mp4 136.64M | ├──02、在线视频：数据库同步工具Alibaba Canal介绍与原理.mp4 133.22M | ├──03、在线视频：高吞吐消息队列Kafka介绍（一）.mp4 307.64M | ├──04、在线视频：分布式数据库Hbase.mp4 291.15M | └──05、在线视频：数据采集工具与消息队列实战.mp4...

2 years前 345 98

IT课程资源大数据&机器学习

尚硅谷大数据项目实战提升大神班

尚硅谷大数据项目实战提升大神班尚硅谷大数据项目实战提升大神班本课程带你系统讲解了JavaSE、Hadoop、Spark、Flink等核心技术体系，基于众多的实战开发项目，深入剖析了数据采集、离线数仓、实时分析、实时数仓、推荐和用户画像、在线教育、电商、机器学习等解决方案，让你快速提升实战经验，轻松应对工作中的难题。项目简介本项目参考美团、OPPO、知乎等大数据实时数仓项目架构，采用当前主流的实时数据处理框架Flink进行搭建，对接多种数据源，并实现了对结果数据的实时展示，与离线数仓可以无缝对接，真正实现了流批一体，可以无缝满足企业实时数据处理需求。项目架构 Nginx + SpringBoot + Flume1.9 + Kafka2.4.1 + Flink1.2 + Canal HA + Redis + ElasticSearch + HBase2.0.5 + Phoenix + ECharts + MySQL5.7 + Maxwell + Kibana + ClickHouse + DataV 项目场景可满足各种行业、不同规模的企业的实时数据处理场景，例如实时分析新用户注册人群、实时显示交易额、实时对账、实时预警等。技术点通过分层处理，让实时计算复用性更好，结构更清晰；通过结合MySQL动态配置表实现数据的动态分流；使用HBase + Redis 实现维度数据的管理与关联查询；提供针对不同情境的双流Join解决方案，优化双流Join解决方案；结合keyed state实现数据的去重、计算等功能；实现对于所有需求提供Flink代码和Flink...

1 year前 418 73

IT课程资源 Java

迈向高级的Java面试突围课|完结无密

[wm_notice]试看链接：https://pan.baidu.com/s/1yVj1572FssDzZt6czqS4bQ 提取码：gzqo [/wm_notice] 章节目录：第1章课程介绍试看1 节 | 8分钟对整个课程内容做一个概述，讲解学习的必要性收起列表视频：1-1 课程介绍：中高级Java开发者的面试突围 (07:39)试看第2章一面上半场——项目业务架构介绍试看10 节 | 84分钟你的目的是在有限的时间内让面试官对你印象深刻。本章教会你如何白板快速的根据业务场景绘制系统架构图，在架构划分过程中体现你的领域模型思想。用电商项目举例，主要分为电商商品和交易场景。收起列表视频：2-1 先简单的自我介绍一下吧！ (16:09) 视频：2-2 一面模拟面试 (00:49) 视频：2-3 跟我聊聊你的项目吧！ (01:56) 视频：2-4 简单的描述一下你的业务 (05:57) 视频：2-5 系统架构–流量入口-服务治理-数据选型 (21:17)试看视频：2-6 业务架构：商品查询交互 (12:58) 视频：2-7 业务架构：商品的领域模型 (08:56)...

2 years前 722 38

IT课程资源 Python

Python3实战Spark大数据分析及调度|完结无密

Python3实战Spark大数据分析及调度 Python3玩转Spark开发，Azkana让作业井然有序本课程运用python3实战讲解了Spark中心功用组件，并结合调度爆款框架Azkaban，来对作业进行调度，最后以天气数据剖析做为实战项目，让你学会对大数据进行处理与剖析，让Python开发人员也能对Spark应用程序进行开发及调优。适合人群了解Python言语的想运用Spark进行数据处理剖析的人员了解Hadoop，想快速提高Spark技能的小伙伴想转行投身大数据职业的小伙伴技术储备要求熟悉常用Linux命令的运用把握Python同时有数据库SQL根底 [wm_notice]链接：https://pan.baidu.com/s/12nVrxA0PJj9innSMwiykHQ 提取码：7zb8 –来自百度网盘超级会员V1的分享[/wm_notice] 章节目录：第1章课程介绍试看2 节 | 19分钟课程介绍收起列表视频：1-1 PySpark导学 (12:51)试看视频：1-2 OOTB环境演示 (05:29) 第2章实战环境建立7 节 | 32分钟工欲善其事必先利其器，本章叙述JDK、Scala、Hadoop、Maven、Python3以及Spark源码编译及布置收起列表视频：2-1 -课程目录 (00:54) 视频：2-2 -Java环境建立 (02:14) 视频：2-3 -Scala环境建立 (01:50) 视频：2-4...

3 years前 1.3K 25

IT课程资源架构师

七月在线-机器学习集训营15期|2022年最新|价值12000元|无密分享

七月在线-机器学习集训营15期|2022年最新|价值12000元|无密分享课程简介：如今，人工智能火爆全球并快速切入各个领域，比如电商、金融、交通、安防、医疗、教育，国内外各大公司纷纷成立相关AI研究院，火速招兵买马，可目前市面上人才缺口严重不足，供需比例仅为1:10。机器学习作为AI的核心技术，可谓掌握了机器学习，便跨过了AI的准入门门槛。或从Java等传统IT行业成功转型AI拿到年薪三四十万，部分超过四十万拿到五十万，有的甚至年薪百万本第十五期由七月在线和深度之眼联合开设，继续维持以及六大企业项目：大规模行人重识别（ReID）、人体姿态识别、智能问答系统、聊天机器人、商品推荐系统、电影推荐系统且为再次提升大家的AI项目经验和工程能力，本期新增部分在线直播、实训项目，具体见大纲。一切为了学员更好的就业、转型、提升。试看链接：https://pan.baidu.com/s/1cA_wLI-jPP4eSKaTe9ngew?pwd=5ayr 目录大纲：课程大纲预习阶段 Python基础和数据分析在线视频：Python基础语法语法精讲 1-Anaconda安装及使用 2-循环判断语句 3-函数 4-面向对象 5-文件以文件夹操作在线视频：Python核心语法进阶 1-高阶函数的使用 2-迭代器、生成器、装饰器详解在线视频：数据分析numpy和pandas精髓速讲 1-numpy基本操作 2-pandas基本操作 2-项目实战：美国大选在线视频：matplotlib数据可视化 1-matplotlib基本操作 2-常用2D图形使用 3-项目实战：电商商品数据探索性分析在线直播：开班宣讲在线实训：入学测试第一阶段机器学习原理在线视频：1-线性回归、logistic回归、梯度下降在线视频：2-决策树、随机森林、GBDT 在线视频：3-SVM与数据分类在线视频：4-特征工程：数据清洗、异常点处理、特征抽取/选择/组合在线直播：5-机器学习简介、广义线性模型（线性回归、逻辑斯蒂回归）精髓速讲在线实训：6-算法核心要点巩固(上) 在线直播：7-决策树、Boosting模型融合的精髓速讲在线实训：8-算法核心要点巩固(中) 在线直播：9-朴素贝叶斯、SVM模型精髓速讲在线实训：10-算法核心要点巩固(下) 在线直播：XGBoost精讲 1-建模调参（数据清洗、特征处理、特征选择、模型的调参、评估）...

2 years前 603 98

IT课程资源大数据&机器学习

博学谷-狂野大数据（四期）完结无密

狂野大数据（四期）完结无密课件同步官方原价17980 课程内容精准聚焦大数据开发过程中常用的离线数据分析、实时数据分析和内存数据计算等重要内容；涵盖了大数据体系中的核心技术，包含Linux、Zookeeper、Hadoop、Redis、HDFS、MapReduce、Hive、Impala、Hue、Oozie、Storm、kafka、Spark、Scala、SparkSQL、Hbase 目录大纲：狂野大数据（四期）/ ├──1.1 大数据技术转型必备知识与学习计划1.mp4 151.80M ├──1.1 大数据技术转型必备知识与学习计划2.mp4 86.82M ├──1.10 前置课程知识串讲41.mp4 295.09M ├──1.11 前置课程知识串讲51.mp4 155.43M ├──1.11 前置课程知识串讲52.mp4 73.42M ├──1.12 前置课程知识串讲61.mp4 232.97M ├──1.13 前置课程知识串讲81.mp4 282.05M ├──1.2 不可不谈：大数据与Java云计算AI的关系1.mp4 265.64M ├──1.3 海量数据：传统IT开发无法解决的瓶颈1.mp4 236.79M ├──1.4 分布式：大数据的私人订制1.mp4 225.96M ├──1.5 互联网大厂大数据开发的标配：实时计算1.mp4 166.05M ├──1.6 BI技术：大数据开发最后一公里1.mp4 207.63M ├──1.7 前置课程知识串讲11.mp4 294.11M ├──1.8 前置课程知识串讲21.mp4...

1 year前 394 98

IT课程资源 Java

Java大数据实战 Storm构建实时流处理|完结无密|超清原画

Java大数据实战 Storm构建实时流处理全方位解剖大数据实时处理利器Storm，让你在流式处理领域得心应手 Storm是实时流处理领域的一柄利器，本课程采用最新的Storm版本1.1.0，从0开始由浅入深系统讲解，深入Storm内部机制，掌握Storm整合周边大数据框架的使用，从容应对大数据实时流处理！合适人群及技术储备要求这是一门非常具有可操作性的课程，合适Java工程师正处于瓶颈期想提高自己技术、想转型做大数据的开发者，更合适关于大数据感兴趣、想从事大数据研发作业的同学。本课程将手把手带你从零循序渐进地解说Storm各方面的技术点，让你轻松胜任实践大数据实时流处理的作业，稳拿高薪！技术储备要求熟练掌握Java SE、Linux即可 [wm_notice]试看链接：https://pan.baidu.com/s/1EnyzdTmE5UqHx-LS8RWV2A 提取码：6ww3 –来自百度网盘超级会员V1的分享[/wm_notice] 章节目录：第1章课程导学试看3 节 | 33分钟介绍课程相关背景，学习主张等等收起列表视频：1-1 -导学 (20:17)试看视频：1-2 -OOTB环境运用演示 (08:49) 视频：1-3 -授课习气与学习主张 (03:39) 第2章初识实时流处理Storm10 节 | 66分钟 Storm作为近几年Hadoop生态圈很火爆的大数据实时流处理结构，是成为大数据研制工程师必备的技能之一。本章将从如下几个方面让我们关于Storm有宏观上的知道：什么是Storm、Storm的开展史、Storm比照Hadoop的差异、Storm比照Spark Streaming的差异、Storm的优势、Storm运用现状及开展趋势、Storm运用事例分享… 收起列表视频：2-1 -课程目录...

3 years前 686 42

IT课程资源 Java

Spark + ElasticSearch 构建电商用户标签系统|完结无密

Spark + ElasticSearch 构建电商用户标签系统从Java开发过渡到大数据开发的转型课程核心技术+业务思路实现精准营销课程利用 Spark + ElasticSearch 构建用户标签系统，利用 Docker+Docker Compose 实现项目的一键启停。涵盖数据同步、数据清洗、用户标签化等步骤，带你领略企业级数据平台的开发流程。适合人群对 Spark, ElasticSearch等大数据技术有强烈兴趣想转行做大数据的同学对企业级数据平台开发流程没有概念，但有一定的自学能力，并且愿意接受挑战的同学技术储备要求 Java Web 基础 Linux 基础了解SQL 语法熟悉数据库操作 [wm_notice]试看链接：https://pan.baidu.com/s/18rAqn3yM2S1xvE4jBTdTZg 提取码：fxh1 [/wm_notice] 章节目录：第1章课程介绍与学习指南试看2 节 | 12分钟...

2 years前 476 38

IT课程资源 Java

玩转热门框架用企业级思维开发通用够硬的大数据平台|完结无密

玩转热门框架用企业级思维开发通用够硬的大数据平台针对每个模块，提供成熟的选型视角与详细讲解，一次学习掌握大数据项目开发通用技术从企业需求入手，构建集数据采集、数据存储、数据处理与分析、BI应用、权限管理、系统监控等于一体的大数据应用平台，帮助我们快速掌握大数据平台开发技术，迅速建立大数据技术的宏观的认识。适合人群有大数据基础，希望提升综合运用能力积累开发经验的有自学能力，想要培养大数据全局观的技术储备要求 Java开发经验熟悉SpringBoot框架熟悉Linux系统可熟练安装软件了解常用大数据组件如Hadoop等 [wm_notice]试看链接：https://pan.baidu.com/s/1WId5U0X5eND1BdbaHIqaDw 提取码：bbai [/wm_notice] 章节目录：第1章课程导学与学习指南试看3 节 | 12分钟本章中将向大家介绍课程能学到什么、解决什么实际问题、项目成果展示，课程整体安排以及如何学习更高效。收起列表视频：1-1 导学【课程背景、项目速览】 (11:53)试看图文：1-2 怎么更好的使用慕课平台图文：1-3 你真的会问问题吗？第2章认识企业中的大数据平台6 节 | 32分钟为什么要有大数据平台？大数据平台究竟是为了解决什么问题产生的？如何判断一个大数据平台的好坏？在设计一个数据平台时，需要注意哪些，有什么步骤。各大企业现有的解决方案有哪些，常见的技术栈有哪些，我们自己设计的这个通用的大数据平台是什么结构。… 收起列表视频：2-1 课程简介与学习建议 (07:32)...

2 years前 1.0K 40

Android IT课程资源

ES7+Spark 构建高相关性搜索服务&千人千面推荐系统|完结无密

ES7+Spark 构建高相关性搜索服务&千人千面推荐系统搜索、推荐服务是很多企业的刚需，能开发搜索、推荐服务的人才更是企业的“刚需” 基于大众点评搜索以及推荐业务，使用SpringBoot加mybatis结合前端模板搭建运营后台门店管理功能，借助ElasticSearch的最新版本ES7，完成高相关性进阶搜索服务，并基于spark mllib2.4.4构建个性化千人千面推荐系统。适合人群想了解EasticSearch，对搜索推荐系统感兴趣，符合技术储备的同学技术储备要求熟悉JavaWeb基本应用了解MySQL常用命令 [wm_tips]试看链接：https://pan.baidu.com/s/1YZh1WuNjAC4BBVGwDZ2ADg 提取码：65i2 [/wm_tips] 章节目录：第1章课程导学【终于遇到你】试看3 节 | 12分钟本章综合讲述了点评搜索推荐课程的项目业务背景，架构设计理念以及所需要用到的核心技术能力。收起列表视频： 1-1 课程导学 (11:20) 试看图文： 1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）图文： 1-3 你真的会问问题吗？第2章项目设计【项目需求到技术方案的完美执行过程】试看5 节 | 27分钟本章中讲述了如何模拟现实情况中，点评搜索推荐项目从业务需求BRD到产品需求PRD，最终到技术方案选型，架构设计及技术落地的整个过程。...

2 years前 844 43

2/2 上一页 1 2