大数据入门教程

带你掌握大数据核心技能,从此轻松入门大数据

大数据入门实战课程

导学视频
Michael_PK

全栈工程师

八年互联网公司一线研发经验,担任大数据架构师。 主要从事基于Spark/Flink为核心打造的大数据公有云、私有云数据平台产品的研发。 改造过Hadoop、Spark等框架的源码为云平台提供更高的执行性能。 集群规模过万,有丰富的大数据项目实战经验以及授课经验(授课数千小时,深受学员好评)。

了解讲师
新手入门大数据 Hadoop基础与电商行为日志分析

只要有Java基础,就可入门大数据,掌握Hadoop开发的核心技能
涵盖HDFS 、YARN 、MapReduce的搭建及框架的应用
第一时间收获企业大数据的真技术,了解Hadoop 3.x 的新特性

... 已有1726同学加入学习
加购物车 立即学习

大数据相关文章

手记文章

「我的工作是制造混沌」,我与 Chaos Mesh® 的故事

作者:殷成文,Maintainer of Chaos Mesh 这段时间北京真是冷得可怕,朋友圈晒出各种零下 20 度的照片,在这样一个寒冷的时候,总是想给自己找点温暖的事情去做。这几天闲时就回顾起自己从实习到现在这段时间的经历,前不久是 Chaos Mesh 开源一周年(2020.12.31),于是就将自己与 Chaos Mesh 一起成长的点滴整理出来和大家分享。 一方面为了庆祝,另一方面也希望能够在这个寒冷的冬天给大家带来点温暖。 与 PingCAP 结缘 开始 Chaos Mesh 故事之前,先说点自己和 PingCAP

浏览70推荐0
手记文章

北京金融科技产业联盟分布式数据库运维体系建设研讨会成功举办

2020 年 12 月 21 日,北京金融科技产业联盟主办,中国光大银行及平凯星辰(北京)科技有限公司作为课题的主导单位,承办的分布式数据库运维体系建设研讨会(以下简称“研讨会”)在国家开发银行成功举办。国家开发银行信息科技部高级专家章珂、光大银行信息科技部副总经理彭晓出席研讨会并致辞,会议由北京金融科技产业联盟副秘书长聂丽琴主持。 会上,人民银行科技司专家解读了《分布式数据库金融应用技术规范》,平凯星辰 CTO 黄东旭介绍了运维课题组整体工作情况,中信银行数据中心

浏览147推荐0
手记文章

性能竞赛优秀项目 | 分得干脆、合得高效,用 Shuffle 优化 TiDB 算子

作者介绍:黄建博,云计算领域技术开发工程师;金灵, Shopee 软件研发工程师。 他们的队伍 huang-b 在性能竞赛中斩获一等奖,本文将介绍 Shuffle 优化 TiDB 算子项目的设计与实践过程。 在我们往常的印象中,分与合是一对矛盾的概念,但是这次比赛留给我们队伍一个很深刻的印象是,分与合是一对互相促进的矛盾,只有干净利落地分解,才能高效地合并。这种印象一方面来自于我们的参赛思路,我们选择的方向是使用 Shuffle 操作将算子的数据源拆分为多个独立的分区,然后通过并行计算

浏览119推荐0
手记文章

平凯星辰 (PingCAP) 获评 《金融电子化》2020 年度金融科技产品创新突出贡献奖

由《金融电子化》杂志社主办的“2020 中国金融科技年会暨第十一届金融科技及服务优秀创新奖颁奖典礼”于 12 月 18 日线上播出。大会以“奋进新时代 迈向新征程”为主题,作为企业级开源分布式数据库的领导厂商,平凯星辰 (PingCAP) 创始人、CEO 刘奇受邀参与高峰对话。大会现场表彰了 2020 年度在金融科技领域实践、探索和应用中具有重大突破的优秀解决方案,TiDB 开源海量分布式数据库在保险核心交易业务的应用解决方案斩获“2020 年度金融科技产品创新突出贡献奖”,充分肯定了

浏览157推荐0
手记文章

Go Dumpling! 让导出数据更稳定

作 者:李淳竹(lichunzhu),TiDB 研发工程师。 Migrate SIG Community,主要涵盖 TiDB 数据处理工具,包含 TiDB 数据备份/导入导出,TiDB 数据变更捕获,其他数据库数据迁移至 TiDB 等。 前言 [Dumpling]是由 Go 语言编写的用于对数据库进行数据导出的工具。目前支持 MySQL 协议的数据库,并且针对 TiDB 的特性进行了优化。在 [Go Dumpling! 让导出数据更容易]中,我们简要介绍了 Dumpling 的基本功能的使用。在本文中,我们将会介绍一些 Dumpling 的进阶使用方法

浏览178推荐1
手记文章

以开源技术打造数据新基建底座,神州数码集团与 PingCAP 达成全面战略合作

12 月 28 日,神州数码与 PingCAP 在京举办战略合作签约仪式,宣布双方将基于全球领先的新一代关系型数据库(NewSQL)开源项目 TiDB,打造神州数码自有品牌分布式数据库一体机,并展开联合产品、联合营销、联合生态等多维度的战略合作,以开源技术构筑数新基建底座,赋能企业数字化转型和产业高质量发展。 神州数码集团常务副总裁叶海强、CTO 周鹏、CIO 沈旸、企业软件应用 SBU 常务副总经理李新、PingCAP 创始人兼 CEO 刘奇、联合创始人兼 CTO 黄东旭、企业及合作伙伴事业部总

浏览163推荐0
手记文章

使用 go-randgen 测试 join 查询

在数据库的查询中,join 是最常用的查询之一,由于 join 算法实现的复杂性,出现问题的概率较大,我们对 TiDB 中出现过的 join 问题进行分析,将易发生问题的场景归为如下几类 : 相同的 join 查询,join key 为不同的数据类型 在分区表上进行 join 相同的 join 查询,不同的 join 实现算法 特殊的查询条件 我们从这些场景入手,在过去的几个月,使用 go-randgen 框架对 TiDB 进行测试。下文将对go-randgen 测试框架,及我们测试工作中的相关内容进行详述,分为以下

浏览145推荐0
手记文章

为了Java微信支付V3开发包,我找出了微信支付文档至少六个错误

1. 前言 最近忙的一批,难得今天有喘气的机会就赶紧把最近在开发中的一些成果分享出来。前几日分享了自己写的一个微信支付V3的开发包payment-spring-boot-starter,就忙里偷闲完善了一波。 项目地址: github.com/NotFound403/payment-spring-boot 别忘记给个Star啊,有问题提ISSUE。 那么都完善了哪些内容呢?我来一一介绍。 2. Maven 中央仓库 是的,不用再自行编译打包部署了,我已经提交到Maven中央仓库了。最新的坐标是: <dependency> <groupId>cn.felord</groupId> <artifac

浏览430推荐1

大数据相关问答

相关猿问

自学编程需要看什么书籍?

最赞的回答

基础:《Java核心技术》卷 1《Java核心技术》卷 2更为适合你

相关猿问

零基础想学python要准备些什么

最赞的回答

准备决心和坚持,没有学不会的哦

相关猿问

Spring代替了springboot的哪些功能?

最赞的回答

Spring是Spring Boot的基础,利用了spring的诸多特性,例如注解/Java config/条件配置等等。不过由于有嵌入的web容器,预计未来很多会只提供RPC,HTTP服务的——以前用SpringMVC的项目,会用Spring Boot应用来替代。作者:林子云

相关猿问

Spring Boot中Redis如何使用?

最赞的回答

1、引入 spring-boot-starter-redis<pre>&enddependency&          &t;ogroupId&gfrorg.springframework.boot>/groupId&t;a       &priartifactId&rtespring-boot-starter-redis&  &/artifactId&cy&  &pre/dependency&e>#</pre>2、添加配置文件<pre># REDIS (RedisProperties)# Redis数据库...</pre>

相关猿问

已经学会了基本的Linux 操作,但是还在用windows,能给点建议吗?

最赞的回答

学linux,肯定要在windows上安装一个linux虚拟机呀,为什么不敢安装,网上都有超详细安装过程。不过建议初学linux命令,安装服务器版的,对学习基础命令有很大帮助,我有一篇博客是写安装ubuntu14.04-server的虚拟机,明天给你发链接,你可以参考一下

相关猿问

连接mysql数据库​有问题!!!!!!!!急!!

最赞的回答

程序写好了,要么在其他java文件里调用这个文件中你写好的连接数据库的方法,要么在本类中写一个main方法,你这个类没有main方法。运行时当然会出现找不到主类的情况

相关猿问

编程对配置到底需不需要高配

最赞的回答

编程不需要高配,但想要高效编程就得考虑高配,毕竟学大数据还是需要模拟集群环境,需要安装多台虚拟机,如果配置不够,很费劲的,电脑配置高点就不会在硬件条件上浪费自己的时间

相关猿问

大二女生想在互联网bat工作,二本计算机,请问路线可以怎么走,适合什么工作,目前在学程序

最赞的回答

你提供的信息比较少,很难看出你适合什么样的工作,但是看得出来你确实很迷茫。 建议你了解一下IT行业,或者是BAT中的各个岗位和这些岗位的工作内容。然后确定一下自己喜欢哪个岗位。确定下来之后,看一下这个岗位需要什么能力,BAT对这个岗位的求职者看中什么,然后再去努力。如果还是迷茫再回来提问吧,祝你好运~

大数据技术与实践训练营

一站式学习,入门大数据领域,搞定大数据开发技术;把握行业红利,赢得更多的工作机会!

查看详情

高效求职全攻略

巧过经验关丨面试杀手锏丨求职通关技

查看详情

掌握核心算法 挑战寒冬高薪

从基础出发,强化算法知识,飞速提升学习效率!

查看详情