Spark_思索IT

IT课程资源 Java

Spark进阶大数据离线与实时项目实战|完结无密

Spark进阶大数据离线与实时项目实战整合大数据生态圈多个框架(Spark/Hbase/Redis/Hadoop) ，Spark大技术栈的企业级应用本课程整合Redis和HBase打造以Spark技术栈为核心的离线处理项目以及实时处理项目，以功能实现为基础，通过调优及重构功能实现，达到企业级生产水平。课程最后讲解Alluxio整合Hadoop和Spark的使用，拓展同学们的视野。适合人群想转型或者从事大数据行业的小伙伴技术储备要求 Spark进阶课程，不是从零基础开始讲解，需要有一定基础熟悉Scala、Java SE基本语法熟悉Hadoop基本使用、Linux基本命令了解Spark SQL和Streaming的基本使用 [wm_tips]试看链接：https://pan.baidu.com/s/10Hn4ALGdd7aYJL40gZLi6A 提取码：q5q1 [/wm_tips] 章节目录：第1章课程介绍&学习指南试看2 节 | 12分钟本章会对这门课程进行说明并进行学习方法介绍。收起列表视频： 1-1 课程介绍 (11:26) 试看图文： 1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）第2章 Redis入门试看12 节 | 126分钟 Redis是目前最火爆的内存数据库之一，通过在内存中读写数据，大大提高了读写速度。本章将从Redis特性、应用场景出发，到Redis的基础命令，再到Redis的常用数据类型实操，最后通过Java API来操作Redis，为后续实时处理项目打下坚实的基础…...

2 years前 855 38

IT课程资源 Python

Python3实战Spark大数据分析及调度|完结无密

Python3实战Spark大数据分析及调度 Python3玩转Spark开发，Azkana让作业井然有序本课程运用python3实战讲解了Spark中心功用组件，并结合调度爆款框架Azkaban，来对作业进行调度，最后以天气数据剖析做为实战项目，让你学会对大数据进行处理与剖析，让Python开发人员也能对Spark应用程序进行开发及调优。适合人群了解Python言语的想运用Spark进行数据处理剖析的人员了解Hadoop，想快速提高Spark技能的小伙伴想转行投身大数据职业的小伙伴技术储备要求熟悉常用Linux命令的运用把握Python同时有数据库SQL根底 [wm_notice]链接：https://pan.baidu.com/s/12nVrxA0PJj9innSMwiykHQ 提取码：7zb8 –来自百度网盘超级会员V1的分享[/wm_notice] 章节目录：第1章课程介绍试看2 节 | 19分钟课程介绍收起列表视频：1-1 PySpark导学 (12:51)试看视频：1-2 OOTB环境演示 (05:29) 第2章实战环境建立7 节 | 32分钟工欲善其事必先利其器，本章叙述JDK、Scala、Hadoop、Maven、Python3以及Spark源码编译及布置收起列表视频：2-1 -课程目录 (00:54) 视频：2-2 -Java环境建立 (02:14) 视频：2-3 -Scala环境建立 (01:50) 视频：2-4...

3 years前 1.3K 25

IT课程资源架构师

拉钩教育-大数据高薪训练营2022最新版

2 years前 1.2K 98

IT课程资源大数据&机器学习

博学谷-狂野大数据（四期）完结无密

狂野大数据（四期）完结无密课件同步官方原价17980 课程内容精准聚焦大数据开发过程中常用的离线数据分析、实时数据分析和内存数据计算等重要内容；涵盖了大数据体系中的核心技术，包含Linux、Zookeeper、Hadoop、Redis、HDFS、MapReduce、Hive、Impala、Hue、Oozie、Storm、kafka、Spark、Scala、SparkSQL、Hbase 目录大纲：狂野大数据（四期）/ ├──1.1 大数据技术转型必备知识与学习计划1.mp4 151.80M ├──1.1 大数据技术转型必备知识与学习计划2.mp4 86.82M ├──1.10 前置课程知识串讲41.mp4 295.09M ├──1.11 前置课程知识串讲51.mp4 155.43M ├──1.11 前置课程知识串讲52.mp4 73.42M ├──1.12 前置课程知识串讲61.mp4 232.97M ├──1.13 前置课程知识串讲81.mp4 282.05M ├──1.2 不可不谈：大数据与Java云计算AI的关系1.mp4 265.64M ├──1.3 海量数据：传统IT开发无法解决的瓶颈1.mp4 236.79M ├──1.4 分布式：大数据的私人订制1.mp4 225.96M ├──1.5 互联网大厂大数据开发的标配：实时计算1.mp4 166.05M ├──1.6 BI技术：大数据开发最后一公里1.mp4 207.63M ├──1.7 前置课程知识串讲11.mp4 294.11M ├──1.8 前置课程知识串讲21.mp4...

1 year前 388 98

IT课程资源 Java

玩转热门框架用企业级思维开发通用够硬的大数据平台|完结无密

玩转热门框架用企业级思维开发通用够硬的大数据平台针对每个模块，提供成熟的选型视角与详细讲解，一次学习掌握大数据项目开发通用技术从企业需求入手，构建集数据采集、数据存储、数据处理与分析、BI应用、权限管理、系统监控等于一体的大数据应用平台，帮助我们快速掌握大数据平台开发技术，迅速建立大数据技术的宏观的认识。适合人群有大数据基础，希望提升综合运用能力积累开发经验的有自学能力，想要培养大数据全局观的技术储备要求 Java开发经验熟悉SpringBoot框架熟悉Linux系统可熟练安装软件了解常用大数据组件如Hadoop等 [wm_notice]试看链接：https://pan.baidu.com/s/1WId5U0X5eND1BdbaHIqaDw 提取码：bbai [/wm_notice] 章节目录：第1章课程导学与学习指南试看3 节 | 12分钟本章中将向大家介绍课程能学到什么、解决什么实际问题、项目成果展示，课程整体安排以及如何学习更高效。收起列表视频：1-1 导学【课程背景、项目速览】 (11:53)试看图文：1-2 怎么更好的使用慕课平台图文：1-3 你真的会问问题吗？第2章认识企业中的大数据平台6 节 | 32分钟为什么要有大数据平台？大数据平台究竟是为了解决什么问题产生的？如何判断一个大数据平台的好坏？在设计一个数据平台时，需要注意哪些，有什么步骤。各大企业现有的解决方案有哪些，常见的技术栈有哪些，我们自己设计的这个通用的大数据平台是什么结构。… 收起列表视频：2-1 课程简介与学习建议 (07:32)...

2 years前 1.0K 40

IT课程资源 Java

Spark + ElasticSearch 构建电商用户标签系统|完结无密

Spark + ElasticSearch 构建电商用户标签系统从Java开发过渡到大数据开发的转型课程核心技术+业务思路实现精准营销课程利用 Spark + ElasticSearch 构建用户标签系统，利用 Docker+Docker Compose 实现项目的一键启停。涵盖数据同步、数据清洗、用户标签化等步骤，带你领略企业级数据平台的开发流程。适合人群对 Spark, ElasticSearch等大数据技术有强烈兴趣想转行做大数据的同学对企业级数据平台开发流程没有概念，但有一定的自学能力，并且愿意接受挑战的同学技术储备要求 Java Web 基础 Linux 基础了解SQL 语法熟悉数据库操作 [wm_notice]试看链接：https://pan.baidu.com/s/18rAqn3yM2S1xvE4jBTdTZg 提取码：fxh1 [/wm_notice] 章节目录：第1章课程介绍与学习指南试看2 节 | 12分钟...

2 years前 475 38

IT课程资源架构师

尚硅谷大数据2022年4月开班最新

课程简介： 2022年最新的大数据课程原价25000，2022年4月刚刚开班的！ 9大实战项目，大数据企业项目直接为学员所用，月薪百万不是梦！！！试看链接：https://pan.baidu.com/s/1OHw86QEsCeh5321Gy0lVRg?pwd=s387 目录大纲： ├──01、学习环境虚拟机 VMWare16 | ├──VMware-workstation-full-16.1.0-17198959.exe 621.55M | └──私钥.txt 0.03kb ├──02、第1~28天-javase | ├──day00 | | ├──01_20220411_112511准备目录和文件.mp4 5.44M | | ├──02_20220411_114234JDK安装1.mp4 38.45M | | └──03_20220411_115303JDK安装2.mp4 55.91M | ├──day01 | | ├──01_20220412_084713基本常识.mp4 300.82M | | ├──02_20220412_101340创建目录.mp4 43.26M | | ├──03_20220412_102821语言的发展.mp4 171.09M...

2 years前 521 98

Android IT课程资源

ES7+Spark 构建高相关性搜索服务&千人千面推荐系统|完结无密

ES7+Spark 构建高相关性搜索服务&千人千面推荐系统搜索、推荐服务是很多企业的刚需，能开发搜索、推荐服务的人才更是企业的“刚需” 基于大众点评搜索以及推荐业务，使用SpringBoot加mybatis结合前端模板搭建运营后台门店管理功能，借助ElasticSearch的最新版本ES7，完成高相关性进阶搜索服务，并基于spark mllib2.4.4构建个性化千人千面推荐系统。适合人群想了解EasticSearch，对搜索推荐系统感兴趣，符合技术储备的同学技术储备要求熟悉JavaWeb基本应用了解MySQL常用命令 [wm_tips]试看链接：https://pan.baidu.com/s/1YZh1WuNjAC4BBVGwDZ2ADg 提取码：65i2 [/wm_tips] 章节目录：第1章课程导学【终于遇到你】试看3 节 | 12分钟本章综合讲述了点评搜索推荐课程的项目业务背景，架构设计理念以及所需要用到的核心技术能力。收起列表视频： 1-1 课程导学 (11:20) 试看图文： 1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）图文： 1-3 你真的会问问题吗？第2章项目设计【项目需求到技术方案的完美执行过程】试看5 节 | 27分钟本章中讲述了如何模拟现实情况中，点评搜索推荐项目从业务需求BRD到产品需求PRD，最终到技术方案选型，架构设计及技术落地的整个过程。...

2 years前 842 43

IT课程资源大数据&机器学习

某易微专业-大数据开发工程师|完结无密

大数据开发工程师[原价14500]完结无密,课件官方同步实战网易大数据项目，掌握大数据核心技能 – 企业级数据仓库建设，PB级历史数据离线计算，毫秒级低延迟实时计算 – Q: 可以通过培训成为一个大数据开发工程师吗？ A: 我们课程设计来自于实际就业需求，老师以就业为导向设置课程大纲，基本涵盖了目前市场上大数据开发工程师所需要的所有技术，是大数据开发工作中实际会用到的知识点，我们课程中设计项目案例，都是网易等一线互联网公司的实际在用的方法，由网易技术大牛亲自讲授；此微专业是一个完整的大数据知识体系的课程，只要依照老师们的安排，用心认真地学习，成为高级工程师或者入职一线互联网公司，是完全没有问题的。目录大纲：大数据开发工程师/ -大数据开发工程师/ ├──{10}–某易严选项目实战 | ├──{1}–电商严选数据仓库实战 | | ├──{10}–案例实战3——订单及履约管理 | | ├──{4}–电商发展概况&维度建模简介 | | ├──{5}–维度建模基础技术 | | ├──{6}–维度建模进阶及高级技术 | | ├──{7}–数仓架构及规范 | | ├──{8}–案例实战1——订单及库存管理 | | ├──{9}–案例实战2——订单及库存管理（主题域设计进阶） | | ├──#1.2#–【下载】代码下载.pdf 83.60kb | | └──#1.3#–【下载资料】电商严选数据仓库实战-数据.pdf 83.60kb |...

1 year前 345 98

IT课程资源 Python

实战Spark3 实时处理，掌握两套企业级处理方案|完结无密

实战Spark3 实时处理，掌握两套企业级处理方案专攻实时处理技能，掌握Spark Streaming+Structured Streaming两大模块基于Spark3，在同一项目中，学习两套实时处理的解决方案：Spark Streaming和Structured Streaming，体验完整实时处理方案的全流程，为你梳理大数据常见面试题、大厂的实时解决方案，带你跨过面试最后一公里。适合人群想转型或者从事大数据开发的同学对Spark有浓厚兴趣的同学想掌握大数据实时处理技术的同学技术储备要求 Linux命令基本操作 Hadoop命令基本操作 Scala基本语法的使用 [wm_tips]试看链接：https://pan.baidu.com/s/135k1BL7bd9R8CqgSTRgRrg 提取码：r922 [/wm_tips] 章节目录：第1章【项目启动】项目背景及架构分析试看9 节 | 43分钟本章将介绍实战项目背景、数据流，并让大家对知晓在实际项目中应如何进行技术的选型以及项目架构的迭代过程。收起列表视频： 1-1 课程概览 (15:06) 试看图文： 1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）视频： 1-3 课程目录 (01:31)...

2 years前 1.1K 42

IT课程资源 Python

基于Spark2.x开发企业级个性化推荐系统|完结无密

基于Spark2.x开发企业级个性化推荐系统聚焦算法原理，搭建企业级系统，给大数据开发工程师的刚需课课程结合算法原理，利用Spark 2.x 和主流技术栈，通过Flume多级高可用日志收集用户行为，使用HBase特征向量存储，利用算法原理结合Spark和Storm进行离线和实时推荐，实现图书电商场景下的个性化推荐系统。适合人群 1~2年大数据经验，对推荐算法感兴趣的大数据开发工程师技术储备要求 Spark基础（Spark Core ，Scala相关知识）具备Python基础（Numpy的使用）使用过Hbase，Storm，Hadoop，Flume，Kafka，Hive 有高数基础和概率统计基础 [wm_notice]试看链接：https://pan.baidu.com/s/1cJn7fl36T3ER1fqLt6VIvw 提取码：08fy [/wm_notice] 章节目录：第1章课程介绍与学习指南试看3 节 | 7分钟本节主要进行课程的介绍，学习路线与指南，如何更好的学习本课程？为什么要学习本课程，学习本课程具体能收获什么？收起列表视频：1-1 课程介绍及导学 (06:32)试看图文：1-2 怎么更好的使用慕课平台图文：1-3 你真的会问问题吗？第2章了解推荐系统的生态试看5 节 | 53分钟本章带你了解推荐系统的生态，让你从思维上重塑对推荐系统的认知。了解推荐系统是由哪些关键元素支撑的，推荐算法的分类以及什么才算一个好的推荐系统收起列表图文：2-1 本章重难点提点视频：2-2...

2 years前 868 43

IT课程资源 Java

2023升级版-Spark+ClickHouse实战企业级数据仓库，进军大厂必备(21章完整版)

Spark+ClickHouse实战企业级数据仓库，进军大厂必备掌握数仓构建，完善技术体系，轻松掌握高薪技能现阶段的数据开发领域，数据仓库作为企业战略决策的“大脑”，地位日益凸显，对数仓技术的掌握程度也成了大厂面试必考的一环。本课程结合ClickHouse+Spark 这一对数据处理的“黄金搭档”，选取“大数据量企业数据仓库“这一典型场景，实战大数据量下数仓的建模、设计与调优等实用技巧，快速掌握ClickHouse+Spark核心技能，为晋级大数据架构师铺路！适合人群希望掌握实用的数据仓库建模、设计和调优能力希望快速提升的ClickHouse技术能力希望通过贴近生产实践的案例，提升大数据项目能力的同学技术储备熟悉Java/Scala基础的语法了解SQL的基本使用了解Spark基础环境参数 Spark 3.2 ClickHouse 22.* Hadoop 3.3 Scala 2.12 Java 1.8 试看链接：https://pan.baidu.com/s/1SgLH9NtdWs8FiH5QK_tATg?pwd=8y1d 章节目录：第1章从0到1搭建项目开发环境，快速上手大数据开发视频： 1-1 大数据时代，你还不知道数据仓库么？(10:28) 视频： 1-2 本章概览(02:05) 视频： 1-3 基于IDEA + Maven构建Spark工程(12:18) 图文： 1-4 数据开发环境(Spark/Hive/Hadoop/MySQL/IDEA)搭建图文： 1-5 Maven安装配置视频： 1-6...

9 months前 1.6K 48

IT课程资源大数据&机器学习

SparkSQL极速入门整合Kudu实现广告业务数据分析|完结无密

SparkSQL极速入门整合Kudu实现广告业务数据分析大数据离线处理核心技术初中级大数据工程师工作提升利器以案例驱动，全面讲解Spark SQL大数据离线处理必备的知识点。使用Kudu整合Spark进行广告业务功能的实现，并针对已实现的需求代码进行调优；通过扩展Presto和大数据平台建设方面的相关内容，进一步提升技能。适合人群具备相关技术储备，想快速提升Spark技能以及想转行投身大数据行业的小伙伴技术储备要求熟悉Linux常用操作 / 熟悉SQL基本使用了解Hadoop基础知识 / 了解Scala基本语法 [wm_tips]试看链接：https://pan.baidu.com/s/1xVncjOXoW2YnaT2Z7xF8Qg 提取码：7m33 [/wm_tips] 章节目录：第1章课程介绍&学习指南试看2 节 | 13分钟本章会对这门课程进行说明并进行学习方法介绍。收起列表视频：1-1 课程导学 (12:07)试看图文：1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）第2章为什么要学Spark21 节 | 149分钟 Spark作为近几年最火爆的大数据处理技术，是成为大数据工程师必备的技能之一。本章节将从如下几个方面对Spark进行一个宏观上的介绍：Spark产生背景、特性、环境部署、Spark与Hadoop的对比、Spark开发语言及运行模式等。收起列表视频：2-1 课程目录...

2 years前 942 43

IT课程资源 Java

Java大数据实战 Storm构建实时流处理|完结无密|超清原画

Java大数据实战 Storm构建实时流处理全方位解剖大数据实时处理利器Storm，让你在流式处理领域得心应手 Storm是实时流处理领域的一柄利器，本课程采用最新的Storm版本1.1.0，从0开始由浅入深系统讲解，深入Storm内部机制，掌握Storm整合周边大数据框架的使用，从容应对大数据实时流处理！合适人群及技术储备要求这是一门非常具有可操作性的课程，合适Java工程师正处于瓶颈期想提高自己技术、想转型做大数据的开发者，更合适关于大数据感兴趣、想从事大数据研发作业的同学。本课程将手把手带你从零循序渐进地解说Storm各方面的技术点，让你轻松胜任实践大数据实时流处理的作业，稳拿高薪！技术储备要求熟练掌握Java SE、Linux即可 [wm_notice]试看链接：https://pan.baidu.com/s/1EnyzdTmE5UqHx-LS8RWV2A 提取码：6ww3 –来自百度网盘超级会员V1的分享[/wm_notice] 章节目录：第1章课程导学试看3 节 | 33分钟介绍课程相关背景，学习主张等等收起列表视频：1-1 -导学 (20:17)试看视频：1-2 -OOTB环境运用演示 (08:49) 视频：1-3 -授课习气与学习主张 (03:39) 第2章初识实时流处理Storm10 节 | 66分钟 Storm作为近几年Hadoop生态圈很火爆的大数据实时流处理结构，是成为大数据研制工程师必备的技能之一。本章将从如下几个方面让我们关于Storm有宏观上的知道：什么是Storm、Storm的开展史、Storm比照Hadoop的差异、Storm比照Spark Streaming的差异、Storm的优势、Storm运用现状及开展趋势、Storm运用事例分享… 收起列表视频：2-1 -课程目录...

3 years前 682 42

IT课程资源大数据&机器学习

尚硅谷大数据项目实战提升大神班

尚硅谷大数据项目实战提升大神班尚硅谷大数据项目实战提升大神班本课程带你系统讲解了JavaSE、Hadoop、Spark、Flink等核心技术体系，基于众多的实战开发项目，深入剖析了数据采集、离线数仓、实时分析、实时数仓、推荐和用户画像、在线教育、电商、机器学习等解决方案，让你快速提升实战经验，轻松应对工作中的难题。项目简介本项目参考美团、OPPO、知乎等大数据实时数仓项目架构，采用当前主流的实时数据处理框架Flink进行搭建，对接多种数据源，并实现了对结果数据的实时展示，与离线数仓可以无缝对接，真正实现了流批一体，可以无缝满足企业实时数据处理需求。项目架构 Nginx + SpringBoot + Flume1.9 + Kafka2.4.1 + Flink1.2 + Canal HA + Redis + ElasticSearch + HBase2.0.5 + Phoenix + ECharts + MySQL5.7 + Maxwell + Kibana + ClickHouse + DataV 项目场景可满足各种行业、不同规模的企业的实时数据处理场景，例如实时分析新用户注册人群、实时显示交易额、实时对账、实时预警等。技术点通过分层处理，让实时计算复用性更好，结构更清晰；通过结合MySQL动态配置表实现数据的动态分流；使用HBase + Redis 实现维度数据的管理与关联查询；提供针对不同情境的双流Join解决方案，优化双流Join解决方案；结合keyed state实现数据的去重、计算等功能；实现对于所有需求提供Flink代码和Flink...

1 year前 412 73

IT课程资源 Python

Python高级爬虫实战-系统掌握破解反爬技能挑战高薪|完结无密

Python高级爬虫实战-系统掌握破解反爬技能挑战高薪加密破解、逆向重构、高并发cookie池管理、分布式框架及海量存储方案对爬虫工程师来说，突破反爬是一项重要但并不容易掌握的工作能力，因为反爬涉及的技术领域广泛，知识庞杂，网上也缺乏体系教程。不过别担心，本课中，爬虫技术专家带你深度了解Web端反爬策略，并教你用多手段、多方法破解反爬技术，向高级爬虫工程师晋级，挑战高薪。适合人群爬虫工程师 Python工程师数据分析人员技术储备 Python语法基础 HTTP理论基础/JS语法基础了解基础的网络请求了解代理IP和账号登录环境参数语言 Python3.6及以上版本 Chrome浏览器：）一件趁手的IDE ：） [wm_tips]试看链接：https://www.aliyundrive.com/s/Eb7kNK8o2tr[/wm_tips] 章节目录：第1章爬虫进阶-突破web反爬-课程导学试看4 节 | 27分钟本章节我们主要梳理本课程的学习脉络，和课前环境搭建工作，最最重要的是小布老师给所有想学习爬虫的同学们一些良心学习建议和爬虫重点学习方向梳理，让同学们在开始学习前有一个清晰的学习路线。收起列表视频：1-1 爬虫进阶之破解Web端反爬技术-课程导学 (07:00)试看视频：1-2 给所有爬虫工程师的学习建议 (19:37)试看图文：1-3 课程开发环境搭建文档作业：1-4 【讨论题】：爬虫工程师该何去何从？第2章...

2 years前 1.6K 43

1/21 2 下一页