为了账号安全,请及时绑定邮箱和手机立即绑定

使用Aria2c+Aria2Ng自建服务器下载器 首发

以前写爬虫,都是自己傻fufu写下载器下载静态资源。最近写一个爬虫将资源路径写数据库后,想使用aria2c来下载,于是就有了下面这些操作。 哦,之前的Nas搭建我已经弄完了,一直没写文章分享,那天心情好把之前的系列补全。下面这些都是在我自建的Nas环境操作的。 安装Aria2 yay -S aria2 启动RPC 创建config文件 sudo mkdir /etc/aria2c cd /etc/aria2c sudo touch /etc/aria2c/aria2.session sudo vim aria2c.conf 编辑aria2c.conf # /etc/aria2c/aria2c.conf # 文件保

4319浏览
1推荐
0评论

物联网——Nodejs与树莓派玩转K型热偶器 首发

之前还没玩树莓派之前,网上经常看到python与树莓派成对出现,我一直很奇怪难道别的语言就不能在树莓派上调用Gpio了吗?之前别人说用python写爬虫比较方便的时候,我也不是用node写爬虫了吗? 昨天帮一个做测量的朋友做一个树莓派检测热偶数值的工具。我是电气自动化毕业,对热偶还是听说过的。但是学校都没教过怎么样去把电偶的电势差信号转为数字信号。于是朋友就给了一份C++的树莓派驱动Max6675芯片代码。代码不长,所以我想用node重写一份,到时候写api也比较容易。 <!-- more --> 写代

4015浏览
0推荐
1评论

树莓派配置篇 首发

2019-2-11 00:42:24 by bubao 经过上一篇的入门安装,接下来就要开始树莓派的基础配置了。 使用VNC访问树莓派 直接这样抛出一个莫名其妙的VNC,萌新很懵逼。如果没有VNC,我们配置会有多麻烦?如果没有这个东西,那么我们就需要使用外接一块屏幕来操作树莓派。VNC可以让我们直接通过网络和一台计算机就能操作树莓派,而且还是有界面的。 树莓派最新的版本已经内置了VNC Server,但是默认是不开启的,上一篇最后的配置文件是启动VNC Server的。 另外,我们需要在我们的计算机上安装 VN

1978浏览
0推荐
0评论

投稿011期|编程!我到底在做什么? 首发

2018年12月20日04:46:37 匆匆一年又过去了?这一年我工作了(其实是2017年末开始的),我在广州到底在做些什么?忙些什么?现在回想起来好像也不曾想起有什么深刻的东西,也没做出什么成绩。在大城市忙忙碌碌过完一年,难道这就是我要的生活吗?编程!我到底在做什么? 为什么写此文 我闲来无事的时候,总会去技术群逛一逛,看看别人有什么新话题,自己也找下乐子玩一玩新技术。每次到一些群里都会有人叫我大佬,表示真的不太习惯,毕竟我觉得群里的真大佬可比我厉害多了。直到离职后在家的某

1723浏览
1推荐
0评论

没有屏幕和键盘也能给树莓派装系统——树莓派安装篇 首发

很久之前就对树莓派感兴趣了,但是一直没找到买树莓派的理由。最近因为在家想玩玩物联网,所以才下决心买一块E14版的树莓派3B+。然而我买的是裸板+外壳,就是只有一个板子,没有屏幕没有键盘,也没有其他模块。 按照常理,装系统是需要屏幕键盘的吧?至少我装NAS的时候是需要的。要是我本来就没有外接键盘,鼠标,屏幕。只要一块树莓派和一台电脑,我是不是就没办法装树莓派了?然而答案是否定的。下面就是我无需屏幕和键盘,只需要一条microUSB数据线和手机电源供电给树莓派,就完成系统安装的

13881浏览
1推荐
0评论

使用Docker在自家的服务器上搭建gitlab 首发

好久都没写文章了,昨晚熬夜改了下喜马拉雅爬虫并整合到nodc里面,推送代码的时候,发现个人服务器上的gitlab的时间不在东八区,所以又搞了一下。 其实这个也没什么好写的,只是最近发现慕课网上出了svn的新课《SVN从入门到放弃》,心想:难道那些公司还在用svn吗?虽然并不觉得svn有什么不好,但是个人就是习惯用git,而且我大部分的个人项目都放在github上,私人项目都放在自己搭的个人服务器上。 前提 想要搭建gitlab私人代码仓库,是需要条件的。 首先,你得有一个内存大于4G的服务器,

5076浏览
8推荐
0评论

动手写一个人人影视的docker镜像 首发

前不久入手一台机子搭私有服务器后,一直在往这个服务器里加入各种服务。起初是搭一个蚂蚁笔记,接着有用gogs和gitea搭了两个git远程仓库。 本来是想在发完带你使用Docker搭建私有云笔记后接着写一个gogs和gitea搭建,后来发现慕课网上已经有大佬发过了,图文并茂,我就不再写了。想看怎么搭建gogs的远程仓库的点这里 。当然还有很多大佬写过这个话题,可以在慕课网搜索gogs查看。 今天发现人人影视的客户端网页有Linux版web客户端,于是想自己封装一个镜像,放在自己的服务器上跑。(虽然最

7837浏览
3推荐
0评论

带你使用Docker搭建私有云笔记 首发

之前买了主机搭Nas服务器后,寻思着把一些服务也挂在服务器上。因为我并没有使用黑群辉,而是使用ArchLinux做服务器系统,所以什么都得自己来。 既然能自己部署一个私有云,数据还是存在自己硬盘比较好,第一个开刀的云笔记。不过开源的云笔记貌似只找到蚂蚁笔记(leanote),不过这开源都不走心,将就用吧。 找了些资料,感觉使用docker安装比较省力,于是就现学现用,并和镜像作者协商,做了一个leanote和数据库分离的的镜像。这样能多个容器共用相同的数据库,管理、持久化和迁移起来都方便

24283浏览
4推荐
10评论

投稿006期|面试?不存在的 原创

2018-7-16 10:03:10 大约在一年前,我还没有工作,我也像大多数想成为程序员的小白一样迷茫。因为自知自己非计算机专业,而且是硬件跨界做编程,要是盲目投简历,HR这关都很难过去。然而,我在自学编程的时候我做了一件事——写博客。也是因为写博客,让我免面试入职。 在开始看下文之前,不妨问几个问题。 为什么写博客就能免面试入职 是不是只要写博客就能入职自己喜欢的公司 免面试入职的博客是怎么炼成的 emmmm,如果上面这三个问题不是你想问的,请在手记留言区给我提问,我会回复的

2470浏览
8推荐
1评论

从零开始搭建Nas——购买硬件的那些坑 原创

先扯一下皮 大概是去年(2017)的12月底的时候,跟随我很多年的U盘挂了,心想着这老伙计终于可以退役了,也好有个理由买个新的存储设备了。本来是想买个移动硬盘的,毕竟容量大嘛。 然而我想能无线传输,大容量的移动硬盘,几番打探过后,一个Linux群的老哥说,你大概需要的不是移动硬盘,是像My Passport Wireless Pro一样的东西。 之后上TESTV看了下体验,想买的心都没了。完全不是我脑子里该有的样子嘛,这样子怎么能让我剁手呢。又回去群里问大佬,有是Linux群的另一个大佬说,那弄个N

20972浏览
8推荐
2评论

投稿005期 | 自学者的编程之路 原创

有的人是我的老师,却把我逼到了另一条路,有的人不是我的老师,却引导我一点一点的进步。2018-6-26 18:00:52作为一个在慕课网自学,非计算机专业的程序员,我貌似都没有编程路上的老师的(那你来凑什么热闹,gun)。但是仔细想想,貌似不缺指导我和让我迫不得已走上这条不归路的人。模仿臧克家...

2225浏览
7推荐
0评论

Nodejs爬喜马拉雅音频 原创

最近忙着组NAS,一直没有时间更新。昨天忘了从哪理翻出了喜马拉雅的API,顺藤摸瓜就花了一个小时写了这个爬虫。大概你们觉得听喜马拉雅直接开web或者app就能满足了呀,合并爬硬盘到本地呢?如果我说,喜马拉雅会下架一些我喜欢的音频,然后再也听不到了呢?放在自己的盘里,虽然保不准哪天盘烧了,安全性不高,但是至少在盘没烧之前,控制权在自己手上呀。 第一步:找API 本来我是想找人人影视的api的,想搭好NAS就下载订阅的美剧,发现加密方式没弄懂,哪位小伙伴知道的麻烦教教我哈。所以想

2953浏览
1推荐
0评论

精通 Node 爬虫 -03- 知乎专栏爬虫实战 原创

精通 Node 爬虫 -03- 知乎专栏爬虫实战 2018 年 6 月 6 日 15:35:00 一年多前在慕课网手记里发布了篇 《nodejs 爬虫——知乎专栏》,并没有详细的说明这个爬虫的全部工作原理,只是贴了一份代码。经过了一年,原来的代码已经做了很多优化,并使用了知乎的 api 模块,后来发现 api 模块的作者很久没有维护导致API不可以,所以自己手动维护了知乎专栏的一小部分,不过并没PR(作者issues都不回复了,PR也没人理的)。 使用到的模块 由于知乎专栏现在使用的是API,抓取直接请求

3243浏览
3推荐
0评论

投稿004期 | 慕课网没有让我成为大牛,但是给了我成为大牛的机会 原创

2018-5-29 13:33:43 最近几年因为支付宝的年终账单,各个平台也除了自己的用户报告,2017年慕课网也出了一份《2017年度用户学习报告》,打开自己的报告第一页,一个日期吸引了我。 如果不是这个账单,可能我都忘了自己是什么时候认识这个帮我从一个和程序员不搭边专业的大专生,从向往到爱好,再到现在成为一个码农,一步一步成长的网站。 我 我是94年出生的双子座,用罗振宇的话说,是互联网时代的原著民。高中时玩游戏时,模仿别人的辅助自己复制粘贴也模仿了一个,看到手机游戏的素材好

3270浏览
15推荐
2评论

精通Node爬虫-02-听说你想写爬虫 原创

本文食用前准备:什么都不需要 前言 在写这篇文章之前,我悄咪咪地在百度搜索“爬虫”这个词,在第一页居然没有Node这个关键词,绝大多数是Python爬虫,很容易让想学爬虫的萌新觉得只有Python能写爬虫。关于这个问题我已经在精通Node爬虫-01-给门外汉说明白什么是爬虫中给出了答案。这次讲讲Node爬虫是怎么一步一步实现的,虽然没有实现代码,但绝对干货。 首先你得准备好工具 要写爬虫,首先要有一个趁手的浏览器了,为了方便调试和使用插件,Chrome浏览器肯定是首选了。不是看不起其他浏览

2827浏览
2推荐
0评论

精通Node爬虫-01-给门外汉说明白什么是爬虫 原创

记得我刚刚入职不久,我就接到一个爬虫任务。当时负责设计的同事就问我到底什么是爬虫,当时我的解释是:“程序模仿人访问网页数据的行为,获取想要的数据。”这个解释是没问题的,但是门外汉肯定听得一脸懵逼。而且更让我惊讶的是,同样是敲代码的同行,也不是每一个人都会写爬虫(之前我一直都觉得爬虫应该每一个敲代码的都会吧),不少的人还对爬虫有很多误解。 到底什么是爬虫 在说明白这个问题之前,我想先问一个问题:你是怎么看到这篇文章的?这个问题很重要,因为它是回答什么是爬虫以

6441浏览
11推荐
2评论

投稿003期|一个老爷爷带你看未来 原创

这个时代发展的太快,我们每个人的时间都紧巴巴的,我们为了防止被时代抛弃,还要在这紧巴巴的时间里挤出时间读书学习。每个人都有自己读书的方式,而我赖上了做自媒体的罗胖。 一副奸商嘴脸的罗胖(这是他自己说的,不赖我),现在做《得到》爱piapia收费了,我还是很感谢他的,让我很充实地度过我的大学时光。罗胖推过很多有趣的书,其中有一本是我正准备在这里推荐给大家的。 作者凯文·凯利老爷爷之前写过一本《失控》也很有名,在此引用豆瓣目前评分最高的短评 粒煞白。 2015-11-21 今

1970浏览
4推荐
1评论

使用Node.js做出自己的CLI工具 原创

最近自己用 Node 写了很多的小工具,然而并不能全局使用。上网找了下答案,发现了 TJ 大神写的 Commander.js 可以很方便的制作命令行工具。于是就照着 API 把之前的 知乎专栏爬虫 给整成 CLI 工具。我把工具命名为nodc,意思是node collection。除了知乎专栏爬虫,我还把中央天气预报加到里面。以后有用空还会加入跟多的小工具。 commander: 命令行模块 这个模块是TJ大神封装好的模块,能快速开发命令行工具。官网有很多例子,我直接上我用到的方法。 #!/usr/bin/env node va

4111浏览
0推荐
0评论

基于结巴分词做的全文分词统计词频小脚本 原创

受朋友之托,写一个小脚本,断断续续做了两天,写一下两天的收获。 起因 有个朋友说专业文档很枯燥难懂,需要一个能把全文的关键词找出来并排序的东西,找不到现成的,问我能不能做一个。我前些天也听车神说有关分词的东西,用这个机会认识一下中文分词也不错。本来还想弄下 PDF 2 TXT的,不过没找到合适的工具,先弄这个吧。 要实现把全文的关键词找出来并排序,就需要识别文中的词而不是字,有了词才能进行排序。中文和其他语言不同,没有明确的词分界,不像英语有空格作为词边界。分词

8134浏览
1推荐
0评论

nodejs爬虫——知乎专栏 原创

知乎是一个好地方,最近翻阅知乎官网,发现知乎专栏藏的很隐蔽,如果不知道专栏名,只能在搜索中找关键词。而对于我们不知道的领域,我们几乎是认为知乎是没有这方面的专栏的。关于这个会用Google的朋友应该会知道怎么样在网上找到所有的知乎专栏 爬虫诞生 作为一个收藏癖,看到好东西不藏在本地就不爽,虽然存起来大多时候是忘记它的存在的。再者,最近发现有些知乎专栏的文章确实不错,就萌生了爬专栏文章的念头。在github上找了很久,发现没有爬专栏的爬虫,只找到爬某用户回答的爬虫。模仿

7980浏览
8推荐
3评论
首页上一页12下一页尾页
意见反馈 帮助中心 APP下载
官方微信