为了账号安全,请及时绑定邮箱和手机立即绑定

精仿今日头条

标签:
Android

由来篇

当初的梦想

  一直都想尝试开发自己还没接触过的某类APP,以前刚入门的时候,就有一个梦想:开发社交类、地图类、新闻类、支付、电商类、直播类、游戏类这些APP。社交类的大二的时候已经开发过一款即时通讯的APP,用的是网易云信的SDK;地图、支付、电商也接触过了;游戏的话做过一个植物大战僵尸的demo,算是Cocos2D的入门;新闻和直播之前公司还没有接到过这些项目的开发,所以一直没机会接触,所以一直很想把当初的梦想实现,做完新闻类和直播类的APP。

  今日七月份告别了母校,正式毕业了,同时也辞职了,大二时和同学们一起创建公司接项目做,现在已经一年了,想着出去闯一闯,所以辞去了工作,这个项目是6月份多的时候动工的,那时候下班就挤出时间写代码,用的是目前的流行框架,RxJava + Retrofit + MVP,本来在七月份上旬就接近完成自己定下的那些功能,只是期间遇到一些问题。

遇到的问题

  问题一:今日头条封闭了老接口,原先是参考大神 wey ye做过的今日头条,根据他以前抓包知道的接口来获取新闻列表,后台接口都获取不到数据了,所以只好想办法解决,之前虽然有使用过fidder抓包,可是用得不是很熟悉,遇到一些https加密过的数据包就束手无策,后来了解到fidder可以解https的数据包,今日头条的新闻数据获取问题就迎刃而解了;

  问题二:新闻数据的规律,新闻列表的item布局有好多种,在没有接口文档的前提下,需要根据返回的json数据进行分析,找出规律,知道根据哪个字段来判断属于哪个布局,这个也是相当耗时间。

  问题三:视频解析,原先参考的项目中,用到的解析视频方法,这个时候也莫名失效了,所以只好自己去寻找新的解析视频的方法,找到不少的方法,有的是读取新闻详情页的html页面,通过正则匹配出对应视频的地址,还有其他的一些方法,但是觉得还是不合心意,知道找到了一个解析今日头条视频地址的网站,通过传入详情页的网址就能够获取到对应视频的地址,所以开始抓包获取那个接口,视频解析的问题迎刃而解。

时运不齐,命途多舛

  可是问题总是接踵而来,本想着今天可以高高兴兴地写博客,分享自己写的这个开源项目,彼此交流下,谁知早上播放视频的时候,视频地址又解析出错了,此时,我的内心是崩溃的。调试以后才知道原来那个解析视频的接口,作者对接口的访问做了验证,估计是为了防止别人直接调用他的接口,一定要通过他的网站来访问,分析了他的js代码后,发现他接口新增了两个参数,参数名没有什么意义,是"r"和"s","r"是一段随机产生的数字,"s"则是根据 视频地址 + "@" + r拼接后,进行一系列的处理,与运算、左移、右移,然后生成的对应的一端数字,后台应该也是根据这个算法进行验证,验证r和s是否有效。

  知道作者新增了验证后,也知道了其加密的js代码,本想将加密的js函数转换成java代码写的方法,可最后发现太过复杂,所以放弃了这个念头,找到了java可以读取js脚本,不过在android中用不了,没有对应的ScriptEngine类,只好通过WebView加载本地的js脚本进行解析
,实现java代码与js互调,然后获取js产生的加密后的哪两个参数"r"和"s"的值。

完工

  目前已经完成之前顶下的那些功能,比如新闻的多item布局展示(新闻列表)、视频列表、新闻详情、视频详情、点击页签下拉刷新、查看评论列表等。非常高兴可以做自己喜欢做的项目,并非为了工作而做在,纯粹为了接触一些新的事物,尝试做自己没有开发过的APP,最近也在找新的工作,虽然已经面试了几个工作,但最后还是由于薪资不符合自己的要求以及公司的发展前景,从而拒绝了,觉得找工作不应该求急,应该一直找,找到自己心中心仪的工作,这样工作的时候才会愉快,事半功倍。

介绍

精仿今日头条,数据是抓取今日头条App的数据。使用RxJava + Retrofit + MVP开发的开源项目,仅供学习用途。

项目github地址:https://github.com/chaychan/TouTiao

感谢大神 wey ye,项目中参考到他做过的仿今日头条项目

Apk下载地址

[点击下载体验

使用到的第三方库

现有功能

1.获取各种频道的新闻列表,包括视频和非视频新闻;

2.查看新闻详情,包括视频和非视频新闻的详情;

3.查看新闻评论列表;

4.新闻数据本地存储,已经获取到的新闻数据保存在本地数据库中,上拉加载更多时可查看历史新闻;

5.底部页签点击下拉刷新;

6.视频列表播放中的视频不可见时停止播放。

7.查看和保存图片。(8.23更新)

技术要点

1.新闻数据的抓取和分析,使用fidder抓取,具体使用可参考下面的网址:

http://www.tuicool.com/articles/BJjQZf

2.新闻列表多种Item布局的展示,使用的是BaseRecyclerViewAdapterHelper,ReclerView万能适配器,多布局使用可参考下面的网址:

https://github.com/CymChad/BaseRecyclerViewAdapterHelper/issues/968

3.视频源地址的解析,原先参照大神 wey ye的解析已经失效,目前是通过今日头条视频解析这个网址解析的,传入新闻详情页地址,获取到对应视频下载地址的json数据。

声明

这个属于个人开发作品,仅做学习交流使用,如用到实际项目还需多考虑其他因素如并发等,请多多斟酌。诸位勿传播于非技术人员,拒绝用于商业用途,数据均属于非正常渠道获取,原作公司拥有所有权利。

原文链接:http://www.apkbus.com/blog-917385-68382.html

点击查看更多内容
TA 点赞

若觉得本文不错,就分享一下吧!

评论

作者其他优质文章

正在加载中
  • 推荐
  • 评论
  • 收藏
  • 共同学习,写下你的评论
感谢您的支持,我会继续努力的~
扫码打赏,你说多少就多少
赞赏金额会直接到老师账户
支付方式
打开微信扫一扫,即可进行扫码打赏哦
今天注册有机会得

100积分直接送

付费专栏免费学

大额优惠券免费领

立即参与 放弃机会
意见反馈 帮助中心 APP下载
官方微信

举报

0/150
提交
取消