img2dataset

name	img2dataset
description	网络图像抓取 - 高并发抓取并打包为WebDataset格式
category	vision
emoji	🕸️
github_url	https://github.com/rom1504/img2dataset
triggers	["图像抓取","网络爬虫","webdataset","img2dataset"]
inputs	["txt","csv"]
outputs	["webdataset","tar"]
use_cases	["网络图像抓取","数据集构建"]

img2dataset

高并发网络图像抓取工具。

安装

pip install img2dataset

使用

img2dataset --url_list urls.txt --output_folder images/