数据采集与融合技术2021 (福州大学)

  • 数据采集与融合技术实践作业三

    作业① 要求:指定一个网站,爬取这个网站中的所有的所有图片,例如中国气象网(http://www.weather.com.cn)。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) 输出信息:将下载的Url信息在控制台输出,并将下载的图片存储在images子文件夹中,并给出截图。 实
    抱着欣欣看月亮   2022-01-11 15:27   0   47
  • 数据采集实践作业四

    作业① 1)爬取当当网站图书数据 要求:熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法;Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据 候选网站:http://search.dangdang.com/?key=python&act=input
    抱着欣欣看月亮   2022-01-11 15:18   0   61
  • 数据采集与融合技术-第五次作业

    作业① 1.1作业内容 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架爬取京东商城某类商品信息及图片。 候选网站:http://www.jd.com/ 输出信息:MYSQL的输出信息如下 mNomMarkmPricemN
    抱着欣欣看月亮   2022-01-04 03:01   0   76
  • 数据采集第二次实验

    #作业①: Gitee 要求:在中国气象网,给定城市集的7日天气预报,并保存在数据库。 http://www.weather.com.cn 输出信息: 序号 地区 日期 天气信息 温度 1 北京 7日(今天) 晴间多云,北部山区有阵雨或雷阵雨转晴转多云 31℃/17℃ 2 北京 8日(明天) 多云转
    抱着欣欣看月亮   2021-10-26 22:33   0   65
  • 「数据采集」实验二

    一、作业① 要求:在中国气象网给定城市集的7日天气预报,并保存在数据库。 输出信息:Gitee链接:2_1 序号 地区 日期 天气信息 温度 1 北京 7日(今天) 晴间多云,北部山区有阵雨或雷阵雨转晴转多云 31℃/17℃ 2 北京 8日(明天) 多云转晴,北部地区有分散阵雨或雷阵雨转晴 34℃/
    Sevennnn   2021-10-13 22:48   0   100
  • 数据采集与融合技术_实验一

    码云地址:https://gitee.com/a2625113421/data-acquisition-practice-i 作业①: 1)、大学软工排名信息的爬取 – 要求:用urllib和re库方法定向爬取给定网址https://www.shanghairanking.cn/rankings/b
    oxoxoox   2021-10-12 20:12   0   15
  • 数据采集第一次大作业

    第一次作业 一、作业内容 作业①: – 要求:用urllib和re库方法定向爬取给定网址(https://www.shanghairanking.cn/rankings/bcsr/2020/0812 )的数据。 – 输出信息: 2020排名 2019排名 全部层次 学校类型 总分 1 2 前2% 中
    抱着欣欣看月亮   2021-10-12 19:28   0   52
  • 数据融合与采集技术第一次实验

    作业①: 1)大学软工排名信息的爬取 – 要求:用urllib和re库方法定向爬取给定网址https://www.shanghairanking.cn/rankings/bcsr/2020/0812的数据。 2020排名 全部层次 学校名称 总分 1 前2% 清华大学 1661.0 部分代码展示:
    鸿影虹影   2021-10-12 18:00   0   44
  • 「数据采集」实验一

    ##一、作业① **要求:**用urllib和re库方法定向爬取给定网址中国最好学科排名(计算机科学与技术)的数据。 输出形式: 2020排名 全部层次 学校类型 总分 1 前2% 中国人民大学 1069.0 2 .... ........... ...... ###1.获取网页源码:getHTML
    Sevennnn   2021-09-29 15:56   0   196