123
社区成员
发帖
与我相关
我的任务
分享2023年秋软件工程第二次作业
| 这个作业属于哪个课程 | 2023年秋-福州大学软件工程 |
|---|---|
| 这个作业要求在哪里 | 2023秋软工实践个人作业 |
| 这个作业的目标 | 编写爬虫爬取洛谷题目 |
| 学号 | 102101230 |
github仓库链接
介绍项目
- 前端：第一次用Tkinter，虽然页面比较简陋，但是足够满足搜索条件的输入和日志的呈现
- 爬虫使用Python实现，代码写起来比较简单，调用requests,json库就行了。我认为爬虫真正难的点在与对请求的分析和对响应数据的解析(虽然也不是很难)
- 单元测试, 针对每个功能模块,我都在__main__函数里实现了简单的功能测试,例如
AIGC表格
| 子任务 | 预估哪些部分使用AIGC | 实际中哪些部分使用AIGC |
|---|---|---|
| 分析请求 | 不用 | 不用 |
| 解析数据 | 可能用 | 不用 |
| 编写Gui | 可能用 | 不用 |
| 总结 | 免费使用权限都申请了两年办,总结不了 |
心得体会
- Python写起来挺方便
- 学到了一点爬虫技巧
PSP表格
| 子任务 | 预估耗时 | 实际耗时 |
|---|---|---|
| 分析请求 | 2-3小时 | 6小时左右 |
| 编写爬虫 | 1-2小时 | 3小时 |
| 编写Gui | 1小时 | 2小时 |
| 测试 | 4小时 | 半天左右 |
自我评价
- 前端做的比较潦草，其他还行
- 完成情况自我感觉良好，基本能做到跟洛谷一模一样的搜索
附加分
- 不会前端，所以只做了gui开发
- 日志部分可以实时显示爬取进度(如下图)
...全文
请发表友善的回复…
发表回复
