webmagic学习,爬取CSDN博客,爬取爱奇艺视频,使用redis缓存爬虫爬过的url
目标:获取新闻列表 和 列表中的新闻页详情,并存入数据库; 爬取地址:https://www.pkufh.com/Html/News/Columns/1064/1.html 说明: 使用webmagic通过两种方式爬取列表页和列表详情页; 存储时用了两种方式存到数据库:1、列表页和列表详情页分别存入两个表 。2、列表页和列表详情页存入一个表
Android MVVM是一款基于MVVM框架,以Jetpack组件DataBinding+LiveData+ViewModel为基础,整合Retrofit+RxJava网络模块的快速开发框架。