为了账号安全,请及时绑定邮箱和手机立即绑定
已成功关注Ta

关注后可及时了解Ta的动态,并可向Ta发送即时消息。

关注Ta

关注后可及时了解Ta的动态信息

大数据框架Hadoop主要模块介绍

本文涉及到的所有模块,都是属于Apache组织,不包括其他第三方的模块。 核心模块: Hadoop Common: 包括Hadoop常用的工具类,由原来的Hadoop core部分更名而来。主要包括系统配置工具Configuration、远程过程调用RPC、序列化机制和Hadoop抽象文件系统FileSystem等。它们为在通用硬件上搭建云计算环境提供基本的服务,并为运行在该平台上的...

288浏览
4推荐
2评论

机器学习实战Ubuntu环境搭建 原创

看了慕课网的机器学习实战启蒙课程,课程本身做的很不错。但是在搭建环境方面有一些坑,这里整理一份Ubuntu 17.04 64bit系统搭建开发环境的经验。 只适用于Linux 64位的。 安装anaconda anaconda是Python的一个加强版,它本身并无任何特殊之处,只是整合了很多库和工具,广泛应用于科学计算领域。 GraphLab Create 官方的建议是安装ana...

3485浏览
35推荐
4评论

未来的你,会感谢现在拼命努力的自己 原创

在还没有进入程序员圈子的时候,程序员对我来说就是非常神秘的,感觉应该是一群穿的跟黑客帝国一样的人们,坐在电脑前噼里啪啦的一个程序就做出来了。 后来进入这个行业以后,才发现。原来程序员都是,厚厚的眼睛,发油的卷发,满脸的胡茬,左手一个鸡蛋灌饼,右手一个天堂伞,背后一个双肩包,以及一双人字拖。 还有因为熬夜加班而导致的,黑...

1338浏览
73推荐
12评论

怀旧鸡汤系列:匆匆那年 原创

故事发生在遥远的一个小县城,一个少年渴望着更广阔,更遥远的城市。一次偶然的事件,少年的游戏账号被别人盗了,当时少年很生气,下定决心,也要做一个黑客。于是少年开始自己学习VB编程语言,还经常混迹与黑客论坛。果然,没多久,少年就能够盗别人的账号,能够随意控制别人的电脑,能够在小网站的服务器上来无影去无踪。 有一天,在一个论坛...

397浏览
18推荐
3评论

2014年写的两篇日志之二:光辉岁月 原创

送给现在,属于我,属于你们的光辉岁月! 在来深圳的时候,我其实就想写这篇日志了,但是那时候没有那个资格。我记得这句话曾经有一个对我说过,是谁我也不想再提起,我只想说,现在的我有资格了。进了这个行业,说实话就拥有无限多的可能,同样是程序员,有人2000,有人5000,有人10000,有人年薪20万,有人100万,有人一百万美金。但是没有进...

240浏览
14推荐
2评论

2014年写的两篇日志之一:Hello 2015

光阴似箭,日月如梭,就像小学生作文一样,先来一段废话。2014即将离我们而去,我们也进入了新的一年,希望大家新年都有新气象,回想2014,我们经历了很多。我们从学生到员工,我们从学校走向了社会。褪去了青涩,多了一份成熟和稳重。 或许2014你过的并不是那么的如意,或许你现在感觉你的生活非常的困惑,感觉自己的工作不是自己喜欢做的,感...

184浏览
5推荐
2评论

React-Native中props使用详解 原创

React-Native中props使用详解 props解释 props就是属性,是为了描述一个组件的特征而存在的。它是父组件传递给子组件的。 使用props 通过上一个页面传递 新建一个 PropsTest.js 文件 exprot default class PropsTest extendes Component{ render(){ return <Text>{this.props.name}</Text> } } 在上一个页面中使用PropsTest...

268浏览
1推荐
1评论

React-Native中组件、变量、方法的导入导出 原创

React-Native 中组件、变量、方法的导入和导出 组件 导出组件 export default class TestComponent extends Component{ render(){ return <Text>Hello, World.</Text> } } 使用export default关键字,来导出默认的组件。 导入组件 import TestComponent from './TestComponent' 变量和常亮 导出变量和常亮 // 变量 e...

277浏览
2推荐
0评论

RabbitMQ教程之一:安装及简介 原创

RabbitMQ到底是什么? RabbitMQ是一个程序与程序之间通信的方法,或者可以理解为一种专用的通道,专门用来负责消息的读取和写入。应用程序通过在RabbitMQ中读写消息来通信,程序与程序之间无需专门的链接,而是直接通过RabbitMQ来进行数据的读写。RabbitMQ将会采用异步的方式来分发消息,是一种经典的生产者与消费者的模式,多个消费者由Rabbit...

3684浏览
25推荐
5评论

Linux 进程管理工具:supervisor 原创

Linux 进程管理工具:supervisor supervisor简介 在Linux服务器中,有时候我们需要一个进程需要可靠的在后台运行,并且能够监控进程状态,在意外结束时能够自动重启等。此时就可以使用supervisor。 supervisor 是使用Python开发的一套通用的进程管理程序,能够将一个普通的命令行进程变成后台的守护进程,并且监控进程的状态,异常退出时能...

2587浏览
15推荐
1评论

Python装饰器进阶之二 原创

Python装饰器进阶之二 保存被装饰方法的元数据 什么是方法的元数据 举个栗子 def hello(): print('Hello, World.') print(dir(hello)) 结果如下: ['__annotations__', '__call__', '__class__', '__closure__', '__code__', '__defaults__', '__delattr__', '__dict__', '__dir__', '__doc__', '__eq__', '__format__', ...

751浏览
1推荐
0评论

Python装饰器进阶之一 原创

Python装饰器进阶之一 先看例子 网上有很多装饰器的文章,上来说半天也没让人看明白装饰器到底是个什么,究竟有什么用,我们直接来看几个例子。 Python递归求斐波那契数列 def fibonacci(n): if n <= 1: return 1 return fibonacci(n - 1) + fibonacci(n - 2) print(fibonacci(50)) 这是一个很常见的求斐波那契数列的例子...

1772浏览
20推荐
1评论

Python多线程----线程池 原创

Python多线程----线程池 需求:假设我们现在有一个多线程项目,每有一个用户连接进来,我们的服务器就会创建一个线程。而我们的服务器最多能够承载100个线程,再多就会崩溃。为了防止恶意用户伪装真实用户构建大量的访问来让我们的服务器崩溃,现在需要对线程数量进行限制,一共只有100个线程,并且当一个用户访问结束以后线程会自动归还,等待...

1879浏览
12推荐
2评论

Python多线程之threading.Thread实现 原创

Python多线程之threading.Thread 并行和串行 串行 所谓串行,就好比我们走路一样,一条马路,一次只能过一辆车,这样速度就会很受限制。 并行 理解了串行,并行就更好理解了,就是好多条路。路越多,车流量就越大。 多线程就是并行的一种。当然,实际发生在计算机内部的时候,并不能单纯的理解为多了一条路。因为我们的计算机一个CPU核心...

2297浏览
8推荐
1评论

精通Python爬虫-02-初遇 原创

精通Python爬虫-02-初遇 声明: 本系列文章原创于慕课网,作者秋名山车神,任何人不得以任何形式在不经作者允许的情况下,进行任何形式的印刷以及销售,转载需注明出处及此声明。 本系列文章更新至少每周一更,将涉及Python爬虫基础,Requests,Scrapy等主流爬虫技术。同时会介绍图片验证码,语音验证码的识别以及我自己设计的一个高并发可扩...

6694浏览
30推荐
8评论

精通Python爬虫-01-不断前行的蜘蛛 原创

精通Python爬虫-01-不断前行的蜘蛛 声明: 本系列文章原创于慕课网,作者秋名山车神,任何人不得以任何形式在不经作者允许的情况下,进行任何形式的印刷以及销售,转载需注明出处及此声明。 本系列文章更新至少每周一更,将涉及Python爬虫基础,Requests,Scrapy等主流爬虫技术。同时会介绍图片验证码,语音验证码的识别以及我自己设计的一个...

7374浏览
68推荐
4评论

算法实战课--Python实现之选择排序 原创

算法+数据结构=编程 算法实际上是依托于数据结构的,没有数据结构就没有算法。 以下代码在Python3.5上正常运行,转载请注明出处。 给Python学习算法实战课的同学,一个参考。 By.秋名山车神 算法与数据结构C++精解 O(n^2)级别的排序算法 选择排序 将一个列表:10, 9, 8, 7, 6, 5, 4, 3, 2, 1 进行从小到大排序: 普通实现 #...

3574浏览
18推荐
6评论

如何成为一名程序员? 原创

如何成为一名程序员 为什么会有这篇文档? 之前有幸看过Eric Raymond(埃里克·史蒂文·雷蒙德)写的一篇文章《如何成为一名黑客》,感觉像黑夜里的灯塔一样,能够给人很多的启迪。在计算机这条道路上,无论是程序员,黑客,网管,还是其他任何相关的角色,有一个老司机带你,能让你看清自己的方向,不至于迷失自我。记得在初二那一年因为老师...

4762浏览
180推荐
31评论

学而不思则罔:新手猿问指南 原创

哐哐哐,又和大家见面了,好久不见。不是不想给大家分享东西,只是没想到什么好的题材,写出来不是砸我招牌呢... 看到很多慕课网的小伙伴们,遇到不懂得问题,都喜欢去猿问提问,这是一个非常好的习惯。因为学习就是要这样,不耻下问。但是很多小伙伴不知道如何去科学的提问,导致自己的问题没有人回答,或者是答非所问,不能得到很好的解决,...

2299浏览
29推荐
7评论

夜空中最亮的星:慕课网新手学习指南 原创

首先标题是为了凑够标准的十个字,如果你这会去数了一下然后想评论说不是十个字,那我佩服你的求知精神...进来的肯定不是看我瞎扯淡的,我们步入正题。 慕课网作为国内不能说是最大,但是起码口碑最好的一个IT学习的网站,受到了很多人的欢迎,但是在推荐给朋友的过程中,我就发现了一些问题,那就是纯小白根本不知道怎么开始学习。这里我要说...

9181浏览
408推荐
65评论
首页上一页12下一页尾页
意见反馈 常见问题 APP下载
官方微信