×

爬虫

100道爬虫面试题以及答案(宝典级别的)(爬虫工程师面试问题及答案)

金百丰广告 金百丰广告 发表于2024-05-13 浏览6136 评论0
1. http 基于 tcp/ip 协议 2. 百度是通用性爬虫 3. http 返回的状态码代表成功的是 200 4. 网页编码使用的函数式 encode() 5. 解码使用的函数式是 decode() 6. 爬虫又叫 网页蜘蛛、网络机器人 7. 什么是爬虫并解释其概念? (1) 爬虫又叫网页蜘蛛,是模拟人操作客户端向服务器发起请求,抓取数据的自动化程序或脚本 (2) 说明:   ① 模拟:用爬虫程序伪装出人的行为,避免被服务器识别为爬虫程序   ② 客户端:浏览器、app 都可

爬虫

Python|使用 scrapy 框架爬取山东各城市天气预报

悠悠然 悠悠然 发表于2024-05-11 浏览4629 评论0
实验内容: 安 装 Python 扩 展 库 scrapy , 然 后 编 写 爬 虫 项 目 , 从 网 站 http://www.weather.com.cn/shandong/index.shtml 爬取山东各城市的天气预报数 据,并把爬取到的天气数据写入本地文本 weather.txt。实验步骤: 在命令提示符环境使用 pip install scrapy 命令安装 Python 扩展库 scrapy。 2. 在命令提示符环境使用 scrapy startproject sdWeat

django

2022黑马程序员Java学习路线图

时间差O 时间差O 发表于2024-04-30 浏览5614 评论0
原文转自:2022黑马程序员Java学习路线图  初学者可按以下路线学习: 入门:Java SE基础-->Java Web(含数据库+H5+js+vue) 中级:Maven-->Git-->SSM框架 -->MybatisPlus-->Spring Boot-->传智健康【项目实战】-->  瑞吉外卖【项目实战】 进阶:Spring Cloud(微服务开发,学这一套就够了)  也可分技术点学: (Dubbo-->Zookeeper-->