Spark_Page 2_思索IT

IT课程资源 Java

2023升级版-Spark+ClickHouse实战企业级数据仓库，进军大厂必备(21章完整版)

Spark+ClickHouse实战企业级数据仓库，进军大厂必备掌握数仓构建，完善技术体系，轻松掌握高薪技能现阶段的数据开发领域，数据仓库作为企业战略决策的“大脑”，地位日益凸显，对数仓技术的掌握程度也成了大厂面试必考的一环。本课程结合ClickHouse+Spark 这一对数据处理的“黄金搭档”，选取“大数据量企业数据仓库“这一典型场景，实战大数据量下数仓的建模、设计与调优等实用技巧，快速掌握ClickHouse+Spark核心技能，为晋级大数据架构师铺路！适合人群希望掌握实用的数据仓库建模、设计和调优能力希望快速提升的ClickHouse技术能力希望通过贴近生产实践的案例，提升大数据项目能力的同学技术储备熟悉Java/Scala基础的语法了解SQL的基本使用了解Spark基础环境参数 Spark 3.2 ClickHouse 22.* Hadoop 3.3 Scala 2.12 Java 1.8 试看链接：https://pan.baidu.com/s/1SgLH9NtdWs8FiH5QK_tATg?pwd=8y1d 章节目录：第1章从0到1搭建项目开发环境，快速上手大数据开发视频： 1-1 大数据时代，你还不知道数据仓库么？(10:28) 视频： 1-2 本章概览(02:05) 视频： 1-3 基于IDEA + Maven构建Spark工程(12:18) 图文： 1-4 数据开发环境(Spark/Hive/Hadoop/MySQL/IDEA)搭建图文： 1-5 Maven安装配置视频： 1-6...

9 months前 1.6K 48

IT课程资源 Java

玩转热门框架用企业级思维开发通用够硬的大数据平台|完结无密

玩转热门框架用企业级思维开发通用够硬的大数据平台针对每个模块，提供成熟的选型视角与详细讲解，一次学习掌握大数据项目开发通用技术从企业需求入手，构建集数据采集、数据存储、数据处理与分析、BI应用、权限管理、系统监控等于一体的大数据应用平台，帮助我们快速掌握大数据平台开发技术，迅速建立大数据技术的宏观的认识。适合人群有大数据基础，希望提升综合运用能力积累开发经验的有自学能力，想要培养大数据全局观的技术储备要求 Java开发经验熟悉SpringBoot框架熟悉Linux系统可熟练安装软件了解常用大数据组件如Hadoop等 [wm_notice]试看链接：https://pan.baidu.com/s/1WId5U0X5eND1BdbaHIqaDw 提取码：bbai [/wm_notice] 章节目录：第1章课程导学与学习指南试看3 节 | 12分钟本章中将向大家介绍课程能学到什么、解决什么实际问题、项目成果展示，课程整体安排以及如何学习更高效。收起列表视频：1-1 导学【课程背景、项目速览】 (11:53)试看图文：1-2 怎么更好的使用慕课平台图文：1-3 你真的会问问题吗？第2章认识企业中的大数据平台6 节 | 32分钟为什么要有大数据平台？大数据平台究竟是为了解决什么问题产生的？如何判断一个大数据平台的好坏？在设计一个数据平台时，需要注意哪些，有什么步骤。各大企业现有的解决方案有哪些，常见的技术栈有哪些，我们自己设计的这个通用的大数据平台是什么结构。… 收起列表视频：2-1 课程简介与学习建议 (07:32)...

2 years前 1.0K 40

IT课程资源架构师

体系课-大数据工程师2022版2.0升级版[完结无密]

体系课-大数据工程师2022版2.0升级版 2022版已迭代两次，紧跟一线大厂用人需求，对标高薪就业标准 Java/Scala双语言教学，系统构建大数据技能体系企业级案例驱动学习，还原真实业务场景 2022版已新增40+课时，30+知识点，全面覆盖企业最新应用场景试看链接：https://pan.baidu.com/s/1SyyuDvwtVFj1xZO8Trp4ZQ?pwd=94r7 章节目录：大数据工程师2022 ├──{1}–阶段一：走进大数据 | ├──{1}–学好大数据先攻克Linux| | ├──{1}–第1章笑傲大数据成长体系课【必看】 | | ├──{2}–第2章Linux虚拟机安装配置 | | ├──{3}–第3章Linux极速上手 | | ├──{4}–第4章Linux试炼之配置与shell实战 | | └──{5}–第5章Linux总结与走进大数据 | ├──{2}–大数据起源之初识Hadoop | | ├──{1}–第1章初识Hadoop | | └──{2}–第2章Hadoop的两种安装方式 | ├──{3}–Hadoop之HDFS的使用 | | ├──{1}–第1章HDFS介绍 | | ├──{2}–第2章HDFS基础操作 | | └──{3}–第3章Java操作HDFS...

2 years前 789 98

IT课程资源 Python

基于Spark2.x开发企业级个性化推荐系统|完结无密

基于Spark2.x开发企业级个性化推荐系统聚焦算法原理，搭建企业级系统，给大数据开发工程师的刚需课课程结合算法原理，利用Spark 2.x 和主流技术栈，通过Flume多级高可用日志收集用户行为，使用HBase特征向量存储，利用算法原理结合Spark和Storm进行离线和实时推荐，实现图书电商场景下的个性化推荐系统。适合人群 1~2年大数据经验，对推荐算法感兴趣的大数据开发工程师技术储备要求 Spark基础（Spark Core ，Scala相关知识）具备Python基础（Numpy的使用）使用过Hbase，Storm，Hadoop，Flume，Kafka，Hive 有高数基础和概率统计基础 [wm_notice]试看链接：https://pan.baidu.com/s/1cJn7fl36T3ER1fqLt6VIvw 提取码：08fy [/wm_notice] 章节目录：第1章课程介绍与学习指南试看3 节 | 7分钟本节主要进行课程的介绍，学习路线与指南，如何更好的学习本课程？为什么要学习本课程，学习本课程具体能收获什么？收起列表视频：1-1 课程介绍及导学 (06:32)试看图文：1-2 怎么更好的使用慕课平台图文：1-3 你真的会问问题吗？第2章了解推荐系统的生态试看5 节 | 53分钟本章带你了解推荐系统的生态，让你从思维上重塑对推荐系统的认知。了解推荐系统是由哪些关键元素支撑的，推荐算法的分类以及什么才算一个好的推荐系统收起列表图文：2-1 本章重难点提点视频：2-2...

2 years前 868 43

IT课程资源架构师

尚硅谷大数据2022年4月开班最新

课程简介： 2022年最新的大数据课程原价25000，2022年4月刚刚开班的！ 9大实战项目，大数据企业项目直接为学员所用，月薪百万不是梦！！！试看链接：https://pan.baidu.com/s/1OHw86QEsCeh5321Gy0lVRg?pwd=s387 目录大纲： ├──01、学习环境虚拟机 VMWare16 | ├──VMware-workstation-full-16.1.0-17198959.exe 621.55M | └──私钥.txt 0.03kb ├──02、第1~28天-javase | ├──day00 | | ├──01_20220411_112511准备目录和文件.mp4 5.44M | | ├──02_20220411_114234JDK安装1.mp4 38.45M | | └──03_20220411_115303JDK安装2.mp4 55.91M | ├──day01 | | ├──01_20220412_084713基本常识.mp4 300.82M | | ├──02_20220412_101340创建目录.mp4 43.26M | | ├──03_20220412_102821语言的发展.mp4 171.09M...

2 years前 523 98

IT课程资源 Python

实战Spark3 实时处理，掌握两套企业级处理方案|完结无密

实战Spark3 实时处理，掌握两套企业级处理方案专攻实时处理技能，掌握Spark Streaming+Structured Streaming两大模块基于Spark3，在同一项目中，学习两套实时处理的解决方案：Spark Streaming和Structured Streaming，体验完整实时处理方案的全流程，为你梳理大数据常见面试题、大厂的实时解决方案，带你跨过面试最后一公里。适合人群想转型或者从事大数据开发的同学对Spark有浓厚兴趣的同学想掌握大数据实时处理技术的同学技术储备要求 Linux命令基本操作 Hadoop命令基本操作 Scala基本语法的使用 [wm_tips]试看链接：https://pan.baidu.com/s/135k1BL7bd9R8CqgSTRgRrg 提取码：r922 [/wm_tips] 章节目录：第1章【项目启动】项目背景及架构分析试看9 节 | 43分钟本章将介绍实战项目背景、数据流，并让大家对知晓在实际项目中应如何进行技术的选型以及项目架构的迭代过程。收起列表视频： 1-1 课程概览 (15:06) 试看图文： 1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）视频： 1-3 课程目录 (01:31)...

2 years前 1.1K 42

IT课程资源架构师

七月在线-机器学习集训营15期|2022年最新|价值12000元|无密分享

七月在线-机器学习集训营15期|2022年最新|价值12000元|无密分享课程简介：如今，人工智能火爆全球并快速切入各个领域，比如电商、金融、交通、安防、医疗、教育，国内外各大公司纷纷成立相关AI研究院，火速招兵买马，可目前市面上人才缺口严重不足，供需比例仅为1:10。机器学习作为AI的核心技术，可谓掌握了机器学习，便跨过了AI的准入门门槛。或从Java等传统IT行业成功转型AI拿到年薪三四十万，部分超过四十万拿到五十万，有的甚至年薪百万本第十五期由七月在线和深度之眼联合开设，继续维持以及六大企业项目：大规模行人重识别（ReID）、人体姿态识别、智能问答系统、聊天机器人、商品推荐系统、电影推荐系统且为再次提升大家的AI项目经验和工程能力，本期新增部分在线直播、实训项目，具体见大纲。一切为了学员更好的就业、转型、提升。试看链接：https://pan.baidu.com/s/1cA_wLI-jPP4eSKaTe9ngew?pwd=5ayr 目录大纲：课程大纲预习阶段 Python基础和数据分析在线视频：Python基础语法语法精讲 1-Anaconda安装及使用 2-循环判断语句 3-函数 4-面向对象 5-文件以文件夹操作在线视频：Python核心语法进阶 1-高阶函数的使用 2-迭代器、生成器、装饰器详解在线视频：数据分析numpy和pandas精髓速讲 1-numpy基本操作 2-pandas基本操作 2-项目实战：美国大选在线视频：matplotlib数据可视化 1-matplotlib基本操作 2-常用2D图形使用 3-项目实战：电商商品数据探索性分析在线直播：开班宣讲在线实训：入学测试第一阶段机器学习原理在线视频：1-线性回归、logistic回归、梯度下降在线视频：2-决策树、随机森林、GBDT 在线视频：3-SVM与数据分类在线视频：4-特征工程：数据清洗、异常点处理、特征抽取/选择/组合在线直播：5-机器学习简介、广义线性模型（线性回归、逻辑斯蒂回归）精髓速讲在线实训：6-算法核心要点巩固(上) 在线直播：7-决策树、Boosting模型融合的精髓速讲在线实训：8-算法核心要点巩固(中) 在线直播：9-朴素贝叶斯、SVM模型精髓速讲在线实训：10-算法核心要点巩固(下) 在线直播：XGBoost精讲 1-建模调参（数据清洗、特征处理、特征选择、模型的调参、评估）...

2 years前 595 98

IT课程资源 Java

迈向高级的Java面试突围课|完结无密

[wm_notice]试看链接：https://pan.baidu.com/s/1yVj1572FssDzZt6czqS4bQ 提取码：gzqo [/wm_notice] 章节目录：第1章课程介绍试看1 节 | 8分钟对整个课程内容做一个概述，讲解学习的必要性收起列表视频：1-1 课程介绍：中高级Java开发者的面试突围 (07:39)试看第2章一面上半场——项目业务架构介绍试看10 节 | 84分钟你的目的是在有限的时间内让面试官对你印象深刻。本章教会你如何白板快速的根据业务场景绘制系统架构图，在架构划分过程中体现你的领域模型思想。用电商项目举例，主要分为电商商品和交易场景。收起列表视频：2-1 先简单的自我介绍一下吧！ (16:09) 视频：2-2 一面模拟面试 (00:49) 视频：2-3 跟我聊聊你的项目吧！ (01:56) 视频：2-4 简单的描述一下你的业务 (05:57) 视频：2-5 系统架构–流量入口-服务治理-数据选型 (21:17)试看视频：2-6 业务架构：商品查询交互 (12:58) 视频：2-7 业务架构：商品的领域模型 (08:56)...

2 years前 719 38

IT课程资源架构师

七月在线-大数据工程师集训营|2022年最新完结无密

七月在线-大数据工程师集训营|2022年最新完结无密本大数据集训营从Hadoop基础讲解，贯穿数据采集、传输、存储、计算、展示等各个环节，着重讲解企业中如何使用spark、MapReduce、hive、flume、sqoop等各个组件，并附有经典企业案例讲解，案例均来自一线互联网工业项目。另，讲师团队堪称大厂豪华级大数据专家讲师团队，且根据最近的大数据人才需求，加入elasticsearch和数据仓库模型等内容，以及设计了三大企业级项目，并标准化项目流程： a、设计与搭建基于Hive、Presto的数据仓库与OLAP分析引擎 b、Flink实战——直播、短视频APP用户行为分析 c、ELK+Spark实现一个错误日志监控(搜索、分析、报警)平台最后，在第八阶段设置了大数据求职面试辅导，包括大数据面试求职准备工作讲解、常见大数据面试题目解析等内容。一切为了大家更好的就业、转型、提升。培养目标：从零开始，由Hadoop入门，打造大数据开发工程师之路。试看链接：https://pan.baidu.com/s/1jVGx34SJa70942HlGFEdmw?pwd=uxbq 目录大纲：七月在线大数据工程师集训营「3月下旬新增三大实战项目，且标准化项目流程」/ ├──01、第一阶段大数据与Hadoop 基础(HDFS与YARN) | ├──01、在线视频：大数据与Hadoop生态介绍.mp4 290.09M | ├──02、在线视频：大数据存储系统HDFS.mp4 336.58M | ├──03、在线视频：分布式资源管理框架Yarn.mp4 363.57M | └──04、在线视频：分布式计算框架MapReduce与Hive SQL.mp4 254.48M ├──02、第二阶段数据采集工具与消息队列Kafka | ├──01、在线视频：数据收集工具Flume、Beats介绍与原理.mp4 136.64M | ├──02、在线视频：数据库同步工具Alibaba Canal介绍与原理.mp4 133.22M | ├──03、在线视频：高吞吐消息队列Kafka介绍（一）.mp4 307.64M | ├──04、在线视频：分布式数据库Hbase.mp4 291.15M | └──05、在线视频：数据采集工具与消息队列实战.mp4...

2 years前 343 98

IT课程资源 Java

Java大数据实战 Storm构建实时流处理|完结无密|超清原画

Java大数据实战 Storm构建实时流处理全方位解剖大数据实时处理利器Storm，让你在流式处理领域得心应手 Storm是实时流处理领域的一柄利器，本课程采用最新的Storm版本1.1.0，从0开始由浅入深系统讲解，深入Storm内部机制，掌握Storm整合周边大数据框架的使用，从容应对大数据实时流处理！合适人群及技术储备要求这是一门非常具有可操作性的课程，合适Java工程师正处于瓶颈期想提高自己技术、想转型做大数据的开发者，更合适关于大数据感兴趣、想从事大数据研发作业的同学。本课程将手把手带你从零循序渐进地解说Storm各方面的技术点，让你轻松胜任实践大数据实时流处理的作业，稳拿高薪！技术储备要求熟练掌握Java SE、Linux即可 [wm_notice]试看链接：https://pan.baidu.com/s/1EnyzdTmE5UqHx-LS8RWV2A 提取码：6ww3 –来自百度网盘超级会员V1的分享[/wm_notice] 章节目录：第1章课程导学试看3 节 | 33分钟介绍课程相关背景，学习主张等等收起列表视频：1-1 -导学 (20:17)试看视频：1-2 -OOTB环境运用演示 (08:49) 视频：1-3 -授课习气与学习主张 (03:39) 第2章初识实时流处理Storm10 节 | 66分钟 Storm作为近几年Hadoop生态圈很火爆的大数据实时流处理结构，是成为大数据研制工程师必备的技能之一。本章将从如下几个方面让我们关于Storm有宏观上的知道：什么是Storm、Storm的开展史、Storm比照Hadoop的差异、Storm比照Spark Streaming的差异、Storm的优势、Storm运用现状及开展趋势、Storm运用事例分享… 收起列表视频：2-1 -课程目录...

3 years前 682 42

IT课程资源 Python

Python高级爬虫实战-系统掌握破解反爬技能挑战高薪|完结无密

Python高级爬虫实战-系统掌握破解反爬技能挑战高薪加密破解、逆向重构、高并发cookie池管理、分布式框架及海量存储方案对爬虫工程师来说，突破反爬是一项重要但并不容易掌握的工作能力，因为反爬涉及的技术领域广泛，知识庞杂，网上也缺乏体系教程。不过别担心，本课中，爬虫技术专家带你深度了解Web端反爬策略，并教你用多手段、多方法破解反爬技术，向高级爬虫工程师晋级，挑战高薪。适合人群爬虫工程师 Python工程师数据分析人员技术储备 Python语法基础 HTTP理论基础/JS语法基础了解基础的网络请求了解代理IP和账号登录环境参数语言 Python3.6及以上版本 Chrome浏览器：）一件趁手的IDE ：） [wm_tips]试看链接：https://www.aliyundrive.com/s/Eb7kNK8o2tr[/wm_tips] 章节目录：第1章爬虫进阶-突破web反爬-课程导学试看4 节 | 27分钟本章节我们主要梳理本课程的学习脉络，和课前环境搭建工作，最最重要的是小布老师给所有想学习爬虫的同学们一些良心学习建议和爬虫重点学习方向梳理，让同学们在开始学习前有一个清晰的学习路线。收起列表视频：1-1 爬虫进阶之破解Web端反爬技术-课程导学 (07:00)试看视频：1-2 给所有爬虫工程师的学习建议 (19:37)试看图文：1-3 课程开发环境搭建文档作业：1-4 【讨论题】：爬虫工程师该何去何从？第2章...

2 years前 1.6K 43

2/2 上一页 1 2