为了账号安全,请及时绑定邮箱和手机立即绑定

aardio 网页简单爬虫

标签:
深度学习

 


今天学了超神奇的网页爬虫!之前一直觉得网络上的信息密密麻麻,想要啥都得自己手动翻找,没想到用代码就能让程序帮忙自动采集。

第一:向网页“要”内容

就像去店里买东西得先告诉老板你想要啥,程序想拿到网页上的信息,也得先发个“请求”。在 aardio 里,用 http.get 函数就能发请求。我试着给一个示例网址 https://www.example.com 发请求,代码是这样的:

import console;  import inet.http;var http = inet.http();var data,err,errCode = http.get( "https://www.example.com");if( http.statusCode ==200 ){   console.log(data);}elseif(http.statusCode ){    console.log( http.lastResponse(), "HTTP错误代码:" + http.statusCode )}else{    console.log( err,errCode );  }http.close();console.pause();

https://img1.sycdn.imooc.com/551cc4680950ef1312770770.jpg


运行后发现,要是请求成功(状态码是 200),程序就会把网页内容打印出来;要是失败了,也会告诉我是哪里出了问题。

第二:从网页里“挑”信息

拿到网页内容后,里面全是密密麻麻的代码,怎么才能找到自己想要的东西呢?这就像在一堆水果里挑出苹果,得用专门的工具。在 aardio 里,html 库就是这个“工具”。

import console;  import inet.http;import string.html;var http = inet.http();var data,err,errCode = http.get( "https://www.example.com");if( http.statusCode ==200 ){    var htmlDoc = string.html(data)    var doc = htmlDoc.queryEles( tagName = "body" );    var links = doc[1].queryEle(tagName = "a");     console.log(links.href)    }else{    console.log( err,errCode );  }http.close();console.pause();

https://img1.sycdn.imooc.com/033535680950ef1612770770.jpg
这段代码能帮我从网页里找到所有的链接标签 <a>,然后把链接地址打印出来,感觉自己马上就能当“信息小侦探”了!

总结

通过今天对网页爬虫的学习,我了解到在 aardio 中,先是使用 http.get 函数向网页发送请求获取内容,依据状态码判断请求是否成功。接着,利用 html 库对获取到的网页内容进行解析,能够精准提取像链接标签 <a> 等所需信息。这让我感受到编程在处理网络信息方面的强大能力,原本繁琐的手动查找信息的方式被高效的代码采集所替代。虽然目前只是初步接触,但已经打开了一扇通往高效信息获取的大门。后续我会继续深入学习相关知识,不断练习,提升自己运用 aardio 进行网页爬虫的技能,更好地探索网络信息的世界。

 


点击查看更多内容
TA 点赞

若觉得本文不错,就分享一下吧!

评论

作者其他优质文章

正在加载中
软件测试工程师
手记
粉丝
1
获赞与收藏
2

关注作者,订阅最新文章

阅读免费教程

  • 推荐
  • 评论
  • 收藏
  • 共同学习,写下你的评论
感谢您的支持,我会继续努力的~
扫码打赏,你说多少就多少
赞赏金额会直接到老师账户
支付方式
打开微信扫一扫,即可进行扫码打赏哦
今天注册有机会得

100积分直接送

付费专栏免费学

大额优惠券免费领

立即参与 放弃机会
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号

举报

0/150
提交
取消