Spark_Page 2_思索IT

IT课程资源 Java

Spark进阶大数据离线与实时项目实战|完结无密

Spark进阶大数据离线与实时项目实战整合大数据生态圈多个框架(Spark/Hbase/Redis/Hadoop) ，Spark大技术栈的企业级应用本课程整合Redis和HBase打造以Spark技术栈为核心的离线处理项目以及实时处理项目，以功能实现为基础，通过调优及重构功能实现，达到企业级生产水平。课程最后讲解Alluxio整合Hadoop和Spark的使用，拓展同学们的视野。适合人群想转型或者从事大数据行业的小伙伴技术储备要求 Spark进阶课程，不是从零基础开始讲解，需要有一定基础熟悉Scala、Java SE基本语法熟悉Hadoop基本使用、Linux基本命令了解Spark SQL和Streaming的基本使用 [wm_tips]试看链接：https://pan.baidu.com/s/10Hn4ALGdd7aYJL40gZLi6A 提取码：q5q1 [/wm_tips] 章节目录：第1章课程介绍&学习指南试看2 节 | 12分钟本章会对这门课程进行说明并进行学习方法介绍。收起列表视频： 1-1 课程介绍 (11:26) 试看图文： 1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）第2章 Redis入门试看12 节 | 126分钟 Redis是目前最火爆的内存数据库之一，通过在内存中读写数据，大大提高了读写速度。本章将从Redis特性、应用场景出发，到Redis的基础命令，再到Redis的常用数据类型实操，最后通过Java API来操作Redis，为后续实时处理项目打下坚实的基础…...

2 years前 856 38

Android IT课程资源

ES7+Spark 构建高相关性搜索服务&千人千面推荐系统|完结无密

ES7+Spark 构建高相关性搜索服务&千人千面推荐系统搜索、推荐服务是很多企业的刚需，能开发搜索、推荐服务的人才更是企业的“刚需” 基于大众点评搜索以及推荐业务，使用SpringBoot加mybatis结合前端模板搭建运营后台门店管理功能，借助ElasticSearch的最新版本ES7，完成高相关性进阶搜索服务，并基于spark mllib2.4.4构建个性化千人千面推荐系统。适合人群想了解EasticSearch，对搜索推荐系统感兴趣，符合技术储备的同学技术储备要求熟悉JavaWeb基本应用了解MySQL常用命令 [wm_tips]试看链接：https://pan.baidu.com/s/1YZh1WuNjAC4BBVGwDZ2ADg 提取码：65i2 [/wm_tips] 章节目录：第1章课程导学【终于遇到你】试看3 节 | 12分钟本章综合讲述了点评搜索推荐课程的项目业务背景，架构设计理念以及所需要用到的核心技术能力。收起列表视频： 1-1 课程导学 (11:20) 试看图文： 1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）图文： 1-3 你真的会问问题吗？第2章项目设计【项目需求到技术方案的完美执行过程】试看5 节 | 27分钟本章中讲述了如何模拟现实情况中，点评搜索推荐项目从业务需求BRD到产品需求PRD，最终到技术方案选型，架构设计及技术落地的整个过程。...

2 years前 845 43

IT课程资源大数据&机器学习

轻松入门大数据：玩转Flink，打造湖仓一体架构完结

轻松入门大数据：玩转Flink，打造湖仓一体架构十二年技术老兵，带你操盘企业级项目，打造数据思维随着数据规模持续的高速增长，大数据基础设施技术从数据库、数据仓库演化到如今的湖仓一体架构，更成为未来新的架构标准。而Flink因为其优良的性能与广泛的适用性，也成为大数据核心技术之一。本课程将从Flink零基础讲起，涵盖Kafka、ClickHouse、Hudi等热门技术栈，结合多种实时处理场景，构建当下最热门的数据湖、湖仓一体架构，助你轻松进阶大数据工程师！适合人群想转型大数据开发的同学想提升自己技能、项目经验、薪资的大数据开发同学技术储备熟悉Linux基本命令了解Java SE的基础知识了解MySQL的基本使用环境参数 Hadoop 3.3.2 Flume 1.9.0 Hive 3.1.2 Scala 2.12 ZooKeeper 3.8.0 CentOS 7.x JDK 1.8+ 试看链接：章节目录：第1章大厂技术首选高薪必备：揭开Flink的神秘面纱试看11 节 | 53分钟要论当前业界最火的大数据实时处理引擎，Flink要说第二，无人敢称第一。本章节为大家揭开Flink的神秘面纱：Flink是什么、它的发展史、特性；对比Spark它的优势；以及Flink在大厂中是如何被广泛实践的。收起列表视频： 1-1 高薪大数据工程师必备技能，你掌握了么？ (08:16) 试看视频： 1-2 本章概览 (02:01) 视频： 1-3...

1 year前 846 85

IT课程资源架构师

七月在线-大数据工程师集训营|2022年最新完结无密

七月在线-大数据工程师集训营|2022年最新完结无密本大数据集训营从Hadoop基础讲解，贯穿数据采集、传输、存储、计算、展示等各个环节，着重讲解企业中如何使用spark、MapReduce、hive、flume、sqoop等各个组件，并附有经典企业案例讲解，案例均来自一线互联网工业项目。另，讲师团队堪称大厂豪华级大数据专家讲师团队，且根据最近的大数据人才需求，加入elasticsearch和数据仓库模型等内容，以及设计了三大企业级项目，并标准化项目流程： a、设计与搭建基于Hive、Presto的数据仓库与OLAP分析引擎 b、Flink实战——直播、短视频APP用户行为分析 c、ELK+Spark实现一个错误日志监控(搜索、分析、报警)平台最后，在第八阶段设置了大数据求职面试辅导，包括大数据面试求职准备工作讲解、常见大数据面试题目解析等内容。一切为了大家更好的就业、转型、提升。培养目标：从零开始，由Hadoop入门，打造大数据开发工程师之路。试看链接：https://pan.baidu.com/s/1jVGx34SJa70942HlGFEdmw?pwd=uxbq 目录大纲：七月在线大数据工程师集训营「3月下旬新增三大实战项目，且标准化项目流程」/ ├──01、第一阶段大数据与Hadoop 基础(HDFS与YARN) | ├──01、在线视频：大数据与Hadoop生态介绍.mp4 290.09M | ├──02、在线视频：大数据存储系统HDFS.mp4 336.58M | ├──03、在线视频：分布式资源管理框架Yarn.mp4 363.57M | └──04、在线视频：分布式计算框架MapReduce与Hive SQL.mp4 254.48M ├──02、第二阶段数据采集工具与消息队列Kafka | ├──01、在线视频：数据收集工具Flume、Beats介绍与原理.mp4 136.64M | ├──02、在线视频：数据库同步工具Alibaba Canal介绍与原理.mp4 133.22M | ├──03、在线视频：高吞吐消息队列Kafka介绍（一）.mp4 307.64M | ├──04、在线视频：分布式数据库Hbase.mp4 291.15M | └──05、在线视频：数据采集工具与消息队列实战.mp4...

2 years前 345 98

IT课程资源 Java

玩转热门框架用企业级思维开发通用够硬的大数据平台|完结无密

玩转热门框架用企业级思维开发通用够硬的大数据平台针对每个模块，提供成熟的选型视角与详细讲解，一次学习掌握大数据项目开发通用技术从企业需求入手，构建集数据采集、数据存储、数据处理与分析、BI应用、权限管理、系统监控等于一体的大数据应用平台，帮助我们快速掌握大数据平台开发技术，迅速建立大数据技术的宏观的认识。适合人群有大数据基础，希望提升综合运用能力积累开发经验的有自学能力，想要培养大数据全局观的技术储备要求 Java开发经验熟悉SpringBoot框架熟悉Linux系统可熟练安装软件了解常用大数据组件如Hadoop等 [wm_notice]试看链接：https://pan.baidu.com/s/1WId5U0X5eND1BdbaHIqaDw 提取码：bbai [/wm_notice] 章节目录：第1章课程导学与学习指南试看3 节 | 12分钟本章中将向大家介绍课程能学到什么、解决什么实际问题、项目成果展示，课程整体安排以及如何学习更高效。收起列表视频：1-1 导学【课程背景、项目速览】 (11:53)试看图文：1-2 怎么更好的使用慕课平台图文：1-3 你真的会问问题吗？第2章认识企业中的大数据平台6 节 | 32分钟为什么要有大数据平台？大数据平台究竟是为了解决什么问题产生的？如何判断一个大数据平台的好坏？在设计一个数据平台时，需要注意哪些，有什么步骤。各大企业现有的解决方案有哪些，常见的技术栈有哪些，我们自己设计的这个通用的大数据平台是什么结构。… 收起列表视频：2-1 课程简介与学习建议 (07:32)...

2 years前 1.0K 40

IT课程资源架构师

极课时间-大数据训练营2021|完结无密

极课时间-大数据训练营2021最新完结课程设计对标阿里 P7，三个维度全面覆盖大数据工程师能力要求 1：掌握以 Spark SQL 为核心的泛 SQL 体系，囊括 Hive、Spark SQL、Flink SQL、Kafka SQL 等知识点，进一步掌握 SQL 应用及性能调优，深入了解 SQL 底层逻辑与原理，摆脱 SQL Boy/Girl 的困境，掌握大数据分析和大数据开发能力，以 Hadoop、Spark、Kafka、Flink 等框架为脉络 2：了解分布式计算体系的来龙去脉，掌握大规模存储、计算、性能调优的能力，掌握构建大数据平台工程的能力，了解如何设计和实现一个分布式系统，胜任数据开发任务和数据平台的搭建任务 3：详解 Hadoop、Spark 核心源码，学会在源码层面分析和解决问题，实现开发能力的再进阶与突破，跳出复杂的技术栈，领会底层核心原理，掌握 trouble-shooting 的思路与能力，培养真正的大数据开发思维学习人群有 2 年以上开发经验，熟练掌握 Java/Python 等语言，想转型大数据的程序员。有大数据基础，希望提升自己能力水平的大数据开发工程师。对现状迷茫，希望打破瓶颈，构建自己技术壁垒的大数据开发工程师。对大数据感兴趣，希望进入大数据行业的计算机相关专业大学生。 Q：是否有基础要求？需要你拥有 2 年以上的开发经验，熟悉 Java 和 SQL...

2 years前 1.2K 98

IT课程资源大数据&机器学习

慕课大数据工程师2023版完结[电子书+源码+视频]

大数据工程师2023版紧跟技术发展，对标高薪岗位技能模型，带你更快进阶合格的大数据工程师 Java/Scala双语言教学，系统构建大数据技能体系企业级案例驱动学习，还原真实业务场景试看链接：https://pan.baidu.com/s/1-PUv8IJocfV6PC1XfI4u-Q?pwd=bfzn 章节目录：阶段一：走进大数据第1周学好大数据先攻克Linux 在步入大数据殿堂之前，先带领大家快速掌握大数据的必备技能：Linux的操作使用，为后面学习大数据技术打下坚实基础。预习资料传送门：http://suo.im/613aVS 提取码：bbbb 课程安排： 1、掌握Linux虚拟机的安装和配置 2、使用ScecureCRT连接Linux虚拟机 3、掌握Linux中常见高级命令(vi、wc、sort、date、jps、kill等命令)的使用 4、掌握Linux中三剑客(grep、sed、awk)的常见用法 5、掌握Linux的高级配置(ip、hostname、防火墙) 6、掌握Shell脚本的开发 7、掌握Shell中变量、循环和判断的使用 8、掌握Shell中的扩展内容 9、掌握Linux中crontab定时器的使用 10、了解认识什么是大数据 11、大数据产生的背景 12、大数据的4V特征 13、大数据的行业应用【本周思考与讨论】 1、结合自己的实际情况，明确学习目标、制定学习计划。有计划、有执行、有落实，必有收获！ 2、利用学习的Linux高级技能实现论坛访问日志数据分析，看一下到底是谁在暴力攻击你的网站？ 3、某云服务器被挖矿病毒程序侵入，病毒程序很顽强，如何开发一个脚本监控并杀掉此病毒程序？ 4、手动安装JDK配置环境变量太繁琐了，如何开发一个一键安装配置JDK的程序？ 5、为什么使用jps命令查看不到正在运行的Java进程？ 6、在SecureCRT中按Ctrl+s会发生什么现象，尝试一下？ 7、如何确认Crontab中的定时任务是否正常执行？ 8、使用crontab -e 和 vi /etc/crontab配置的定时任务有什么区别？ 9、谈一谈你眼中的大数据是什么样的？学习贵在坚持，每天进步一点点！第2周大数据起源之初识Hadoop Hadoop是大数据开创者，引领者，学习大数据必经之路，本周带领大家了解Hadoop，以及Hadoop集群的安装部署。预习资料：http://suo.im/5SMmAO 提取码：bbbb 课程安排： 1、什么是Hadoop 2、Hadoop发行版介绍...

10 months前 2.2K 158

IT课程资源架构师

七月在线-机器学习集训营15期|2022年最新|价值12000元|无密分享

七月在线-机器学习集训营15期|2022年最新|价值12000元|无密分享课程简介：如今，人工智能火爆全球并快速切入各个领域，比如电商、金融、交通、安防、医疗、教育，国内外各大公司纷纷成立相关AI研究院，火速招兵买马，可目前市面上人才缺口严重不足，供需比例仅为1:10。机器学习作为AI的核心技术，可谓掌握了机器学习，便跨过了AI的准入门门槛。或从Java等传统IT行业成功转型AI拿到年薪三四十万，部分超过四十万拿到五十万，有的甚至年薪百万本第十五期由七月在线和深度之眼联合开设，继续维持以及六大企业项目：大规模行人重识别（ReID）、人体姿态识别、智能问答系统、聊天机器人、商品推荐系统、电影推荐系统且为再次提升大家的AI项目经验和工程能力，本期新增部分在线直播、实训项目，具体见大纲。一切为了学员更好的就业、转型、提升。试看链接：https://pan.baidu.com/s/1cA_wLI-jPP4eSKaTe9ngew?pwd=5ayr 目录大纲：课程大纲预习阶段 Python基础和数据分析在线视频：Python基础语法语法精讲 1-Anaconda安装及使用 2-循环判断语句 3-函数 4-面向对象 5-文件以文件夹操作在线视频：Python核心语法进阶 1-高阶函数的使用 2-迭代器、生成器、装饰器详解在线视频：数据分析numpy和pandas精髓速讲 1-numpy基本操作 2-pandas基本操作 2-项目实战：美国大选在线视频：matplotlib数据可视化 1-matplotlib基本操作 2-常用2D图形使用 3-项目实战：电商商品数据探索性分析在线直播：开班宣讲在线实训：入学测试第一阶段机器学习原理在线视频：1-线性回归、logistic回归、梯度下降在线视频：2-决策树、随机森林、GBDT 在线视频：3-SVM与数据分类在线视频：4-特征工程：数据清洗、异常点处理、特征抽取/选择/组合在线直播：5-机器学习简介、广义线性模型（线性回归、逻辑斯蒂回归）精髓速讲在线实训：6-算法核心要点巩固(上) 在线直播：7-决策树、Boosting模型融合的精髓速讲在线实训：8-算法核心要点巩固(中) 在线直播：9-朴素贝叶斯、SVM模型精髓速讲在线实训：10-算法核心要点巩固(下) 在线直播：XGBoost精讲 1-建模调参（数据清洗、特征处理、特征选择、模型的调参、评估）...

2 years前 603 98

IT课程资源 Java

Hadoop 系统入门+核心精讲|完结无密

Hadoop 系统入门+核心精讲新手入门大数据要学的第一门课本课程带领你从Hadoop入门开始，逐步掌握大数据核心技术（HDFS、YARN、MapReduce、Hive开发与调优），并将这些技术应用到实战中，最终完成电商行为日志分析项目，助力探索高薪职业赛道。技术要求熟悉Linux基本命令了解Java SE的基础知识 / 了解MySQL的基本使用环境参数 Linux版本： CentOS（7） / Hadoop版本： CDH（5.15.1）开发工具： IDEA / 编程语言：JAVA [wm_tips]试看链接：https://pan.baidu.com/s/1wcUhvc8Ihdztbq5ECjKAxQ 提取码：zwq6 [/wm_tips] 章节目录：第1章大数据概述试看12 节 | 58分钟本章将从故事说起，让大家明白大数据是与我们的生活息息相关的，并不是遥不可及的，还会介绍大数据的特性，以及大数据对我们带来的技术变革，大数据处理过程中涉及到的技术以及大数据典型应用。收起列表视频： 1-1 课程导学 (14:27) 试看图文： 1-2 ***学前必读***（助你平稳踩坑，畅学无忧，课程学习与解决问题指南）视频： 1-3 课程目录 (01:52) 视频： 1-4...

2 years前 1.1K 38

IT课程资源架构师

体系课-大数据工程师2022版2.0升级版[完结无密]

体系课-大数据工程师2022版2.0升级版 2022版已迭代两次，紧跟一线大厂用人需求，对标高薪就业标准 Java/Scala双语言教学，系统构建大数据技能体系企业级案例驱动学习，还原真实业务场景 2022版已新增40+课时，30+知识点，全面覆盖企业最新应用场景试看链接：https://pan.baidu.com/s/1SyyuDvwtVFj1xZO8Trp4ZQ?pwd=94r7 章节目录：大数据工程师2022 ├──{1}–阶段一：走进大数据 | ├──{1}–学好大数据先攻克Linux| | ├──{1}–第1章笑傲大数据成长体系课【必看】 | | ├──{2}–第2章Linux虚拟机安装配置 | | ├──{3}–第3章Linux极速上手 | | ├──{4}–第4章Linux试炼之配置与shell实战 | | └──{5}–第5章Linux总结与走进大数据 | ├──{2}–大数据起源之初识Hadoop | | ├──{1}–第1章初识Hadoop | | └──{2}–第2章Hadoop的两种安装方式 | ├──{3}–Hadoop之HDFS的使用 | | ├──{1}–第1章HDFS介绍 | | ├──{2}–第2章HDFS基础操作 | | └──{3}–第3章Java操作HDFS...

2 years前 791 98

2/2 上一页 1 2