Skip to content

Releases: oldshensheep/v2ex_scrapy

2023-07-22-full

24 Jul 03:33
Compare
Choose a tag to compare

帖子总数:958,810
评论总数:13,174,113
用户总数:345,317 (暂未爬完)
数据库原始大小3.7GB

包含需要登录的信息,比如水深火热的帖子,收藏数等信息

2023-07-08-flamewar

09 Jul 11:16
Compare
Choose a tag to compare

帖子总数:10,992
评论总数:475,669
用户总数:45153

只包含flamewar节点的数据

新增字段
Topic:
thank_count
favorite_count
reply_count

Comment:
no

爬取的数据变化
topic_content 和 comment_content 均爬原始的HTML而不是文本。

2023-07-04-database

06 Jul 01:56
27245da
Compare
Choose a tag to compare
Delete t.py