Hadoop

没有描述

今天这篇文章源于上周在工作中解决的一个实际问题,它是个比较普遍的问题,无论做什么开发,估计都有遇到过。具体是这样的,我们有一份...
本文主要记录Mac下如何进行Hadoop伪分布模式安装,并通过词频统计Demo程序(WordCount)理解MapReduce的原理。 学习资料汇总 Hadoop官网 ...
使用场景 hadoop大文件块序列化传输 Spark-netty Shuffe机制序列化传输 大文件块序列化传输,大Payload的RPC序列化 什么是序列化:将对...
摘要:个人最近一段时间一直在使用oozie,从刚开始的各种别扭到现在越来越觉得有意思的情况下,想整理一下关于oozie的认知,整理出来一个ooz...
Hadoop官方指导传送门 传送门 截止当前(2020年01月08日),Hadoop最新版本是3.2.1,本文依据3.2.1部署安装 本篇文章只介绍了如何安装和...
咳咳,大家好,我是韩数,祝大家圣诞节快乐啊啊啊啊啊,我来晚了。 前言: 在上一篇文章Hadoop伪分布式环境搭建中,我们可谓事无巨细地...
前言: 我又回来了,这两天学校事情有点多,所以没有怎么勤快更新,昨天看到有小伙伴留言催更,别说,第一次被催更的感觉还是挺幸福的,...
前言: 在在上一篇文章写给后端的Hadoop初级入门教程:Hadoop组成部分中我们初略地叙述了Hadoop的三个重要组成部分 Map - Reduce , Yar...
前言: 在上一篇文章写给后端的Hadoop初级入门教程:概念篇中,我们主要讲了大数据的简单概念,什么是大数据,大数据的特点是什么?之后...
前言 因为大家读源码的方式都各有千秋,这里的阅读过程并不代表最佳实践,只是一个自身阅读过程的再现而已。所以如果有一些遗漏的重点,...