|
|||||
|
|
| 全国高职专业点数据爬虫的设计与实现 | |
| 引用本文： | 邓子云.全国高职专业点数据爬虫的设计与实现[J].南方职业教育学刊,2021,11(1):95-102. |
| 作者姓名： | 邓子云 |
| 作者单位： | 长沙商贸旅游职业技术学院 湘商学院,湖南 长沙 410116 |
| 基金项目： | 湖南省自然科学基金;教育部天诚汇智基金课题 |
| 摘 要： | 为能对全国高职专业点设置作大数据分析,需要设计与实现一个爬虫来爬取全国职业院校专业设置管理与公共信息服务平台中的专业点设置和专业名录数据.为此,给出了该爬虫的功能架构和技术架构、数据库设计的ER图和数据表.设计并实现了该爬虫的项目管道、数据项、网站爬虫、异常处理中间件、伪装中间件等技术模块,使用该爬虫爬取了275,87... |
| 关 键 词： | 高职专业点 爬虫 架构设计 数据库设计 中间件 |
| 本文献已被 万方数据 等数据库收录！ | |