Vinted-Scraper

这是一个从 Vinted 和 Depop 下载图片和抓取数据并存储到 SQLite 数据库中的工具。

-- 目前正在开发 版本 2.0 (进行中) --

如何使用

1. 下载/克隆此仓库
2. 使用 pip install -r requirements.txt 安装依赖项
3. 运行脚本 python scraper.py

Vinted

将账户的用户ID放入 users.txt 文件中，然后运行脚本。
脚本会下载所有图片并将其放在 downloads 文件夹中。
数据将被存储在 SQLite 数据库中。

Depop

将账户的用户名放入 users.txt 文件中，并使用 -d 参数运行脚本。
脚本会下载所有的图片和视频并将其放在 downloads 文件夹中。
数据将被存储在 SQLite 数据库中。

参数

-p [Vinted] 抓取您私信中的所有图片。（需要使用 -s 登录以及 -u 设置您的用户ID）
-s "your_vinted_fr_session" [Vinted] 登录您的账户。如何获取 sessionid？
-u [Vinted] 设置您的用户ID
-i [Vinted] 定义要下载的最大图片数量。至少为 1 张图片。（例如：-i 1 将仅下载产品的第一张图片）
-n [Depop] 禁用文件下载（仅抓取产品信息）
-g [Depop] 同时下载已售出的物品
-b [Depop] 从特定项目开始。（例如：python3 scraper.py -d -n -b "coose-navy-lee-sweatshirt-amazing-lee"）

示例：

从您的 Vinted 账户私信中下载所有图片
python scraper.py -p -u 123456789 -s "RS9KcmE1THMxV3NlclRsbEVRdU52ZVp4UG.......ASFe26"

将要抓取的数据

所有用户的商品图片都将被下载。同时也会下载用户的头像。

所有信息将被存储在 SQLite 数据库中的以下表中：

Vinted 用户

用户名
用户ID
性别
给出的商品数量
收到的商品数量
关注者数量
正在关注的数量
正面反馈数量
负面反馈数量
反馈声誉
头像
创建时间
最后登录时间戳
城市ID
城市
国家标题
电子邮件验证
Facebook 验证
Google 验证
电话验证

Vinted 商品

ID
用户ID
网址
收藏
性别
类别
尺寸
状态
品牌
颜色
价格
图片
描述
标题
平台

Depop 用户

用户名
用户ID
简介
名字
粉丝数
关注人数
首字母缩写
已售出物品数
姓氏
最后上线时间
头像
评论评分
总评论数
是否认证
网站

Depop 商品

ID
已售
用户ID
性别
类别
尺寸
状态
品牌
颜色
价格
图片
描述
标题
平台
地址
折扣价金额
更新日期

如果你有任何功能请求，请不要犹豫，随时提出问题 :)

免责声明

此脚本仅供教育用途设计。它旨在展示网络爬虫技术，不应用于任何商业或个人利益。请注意，使用此软件可能违反Vinted和Depop网站的服务条款，您需自行承担使用该软件可能产生的所有后果。此脚本的创建者不对使用该软件过程中发生的任何损害、伤害或损失负责。使用风险自负。