|
|||||
|
|
| 互联网数据挖掘与分析平台设计与实现 | |
| 引用本文： | 李翔坤.互联网数据挖掘与分析平台设计与实现[J].科技风,2022(10):71-73. |
| 作者姓名： | 李翔坤 |
| 摘 要： | 面对移动互联网中庞大的数据量,如何进行挖掘和可视化的分析是当前大数据研究的一个热点.本文搭建了一个互联网数据挖掘与分析平台,首先采用基于Scrapy框架搭建的爬虫系统从互联网络爬取了大量新闻数据与招聘数据,通过Sphinx和CoreSeek经过google-diff-match-patch算法去重,最后利用R语言对这些... |
| 关 键 词： | 互联网数据 R语言 Scrapy 可视化分析 |