【开源】天猫店整店商品图片采集工具:屠刀(包含题图、颜色图、内容图,适用于服装类,按货号保存商品图片)...

本文主要是介绍【开源】天猫店整店商品图片采集工具:屠刀(包含题图、颜色图、内容图,适用于服装类,按货号保存商品图片)...,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

废话少说,先上程序运行时的图片

 

开源地址:

https://github.com/xland/TuDao

 

编译好的版本下载地址:

https://github.com/xland/TuDao/blob/master/%E5%8F%91%E5%B8%83%E5%8C%85/%E5%B1%A0%E5%88%80.zip?raw=true

 

说明:

天猫店整店商品图片采集工具(包含题图、颜色图、内容图,适用于服装类,按货号保存商品图片),目前只测试了一个店铺,可能会存在一些问题,收费负责解决问题。

 

关键代码

下载图片的关键代码:

        static void getPic(string url,string name){ServicePointManager.ServerCertificateValidationCallback = ValidateServerCertificate;HttpWebRequest request = WebRequest.Create(url) as HttpWebRequest;request.UseDefaultCredentials = true;HttpWebResponse response = request.GetResponse() as HttpWebResponse;Stream stream = response.GetResponseStream();var fileStream = new FileStream(name, FileMode.Create, FileAccess.Write);stream.CopyTo(fileStream);fileStream.Dispose();stream.Close();}

 

获取HTML的关键代码:

        static string getHtml(string url){ServicePointManager.ServerCertificateValidationCallback = ValidateServerCertificate;HttpWebRequest request = WebRequest.Create(url) as HttpWebRequest;request.UseDefaultCredentials = true;HttpWebResponse response = request.GetResponse() as HttpWebResponse;Stream stream = response.GetResponseStream();StreamReader reader = new StreamReader(stream, Encoding.Default);string html = reader.ReadToEnd();stream.Close();return html;}

请注意里面有一句UseDefaultCredentials,因为天猫整站都是https的,所以这一句还是挺有用的

 

下面是程序的业务逻辑代码:

            Console.ForegroundColor = ConsoleColor.Green;Console.WriteLine("本程序分三步完成采集工作(每完成一部需要重启程序):");Console.WriteLine("第1步:根据商户商品列表页面地址,采集商品编号");Console.WriteLine("第2步:根据商品编号,采集商品图片地址");Console.WriteLine("第3步:根据图片地址,下载图片");Console.WriteLine("请问您现在需要执行第几步操作:(请输入1、2或3然后按任意键开始)");var key = Console.ReadLine();if(key == "1"){Console.WriteLine("请先输入目标商户的商品列表页面地址:");baseListUrl = Console.ReadLine();getId();Console.WriteLine("第1步操作执行完毕,按任意键退出程序");}else if(key == "2"){Console.WriteLine("开始执行第2步操作:");prepareData();Console.WriteLine("第2步操作执行完毕,按任意键退出程序");}else if(key == "3"){Console.WriteLine("开始执行第3步操作:");downloadPic();Console.WriteLine("第3步操作执行完毕,按任意键退出程序");}Console.ReadKey();

 

其他的代码请到GITHUB上去看吧,喜欢的请帮忙点个推荐,或者给我一颗GITHUB的星星!多谢!

转载于:https://www.cnblogs.com/liulun/p/4863159.html

这篇关于【开源】天猫店整店商品图片采集工具:屠刀(包含题图、颜色图、内容图,适用于服装类,按货号保存商品图片)...的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/473972

相关文章

Python实现AVIF图片与其他图片格式间的批量转换

《Python实现AVIF图片与其他图片格式间的批量转换》这篇文章主要为大家详细介绍了如何使用Pillow库实现AVIF与其他格式的相互转换,即将AVIF转换为常见的格式,比如JPG或PNG,需要的小... 目录环境配置1.将单个 AVIF 图片转换为 JPG 和 PNG2.批量转换目录下所有 AVIF 图

详解如何通过Python批量转换图片为PDF

《详解如何通过Python批量转换图片为PDF》:本文主要介绍如何基于Python+Tkinter开发的图片批量转PDF工具,可以支持批量添加图片,拖拽等操作,感兴趣的小伙伴可以参考一下... 目录1. 概述2. 功能亮点2.1 主要功能2.2 界面设计3. 使用指南3.1 运行环境3.2 使用步骤4. 核

使用Python自建轻量级的HTTP调试工具

《使用Python自建轻量级的HTTP调试工具》这篇文章主要为大家详细介绍了如何使用Python自建一个轻量级的HTTP调试工具,文中的示例代码讲解详细,感兴趣的小伙伴可以参考一下... 目录一、为什么需要自建工具二、核心功能设计三、技术选型四、分步实现五、进阶优化技巧六、使用示例七、性能对比八、扩展方向建

Java图片压缩三种高效压缩方案详细解析

《Java图片压缩三种高效压缩方案详细解析》图片压缩通常涉及减少图片的尺寸缩放、调整图片的质量(针对JPEG、PNG等)、使用特定的算法来减少图片的数据量等,:本文主要介绍Java图片压缩三种高效... 目录一、基于OpenCV的智能尺寸压缩技术亮点:适用场景:二、JPEG质量参数压缩关键技术:压缩效果对比

使用Python开发一个简单的本地图片服务器

《使用Python开发一个简单的本地图片服务器》本文介绍了如何结合wxPython构建的图形用户界面GUI和Python内建的Web服务器功能,在本地网络中搭建一个私人的,即开即用的网页相册,文中的示... 目录项目目标核心技术栈代码深度解析完整代码工作流程主要功能与优势潜在改进与思考运行结果总结你是否曾经

Python将博客内容html导出为Markdown格式

《Python将博客内容html导出为Markdown格式》Python将博客内容html导出为Markdown格式,通过博客url地址抓取文章,分析并提取出文章标题和内容,将内容构建成html,再转... 目录一、为什么要搞?二、准备如何搞?三、说搞咱就搞!抓取文章提取内容构建html转存markdown

Python FastAPI+Celery+RabbitMQ实现分布式图片水印处理系统

《PythonFastAPI+Celery+RabbitMQ实现分布式图片水印处理系统》这篇文章主要为大家详细介绍了PythonFastAPI如何结合Celery以及RabbitMQ实现简单的分布式... 实现思路FastAPI 服务器Celery 任务队列RabbitMQ 作为消息代理定时任务处理完整

使用C#代码在PDF文档中添加、删除和替换图片

《使用C#代码在PDF文档中添加、删除和替换图片》在当今数字化文档处理场景中,动态操作PDF文档中的图像已成为企业级应用开发的核心需求之一,本文将介绍如何在.NET平台使用C#代码在PDF文档中添加、... 目录引言用C#添加图片到PDF文档用C#删除PDF文档中的图片用C#替换PDF文档中的图片引言在当

详解C#如何提取PDF文档中的图片

《详解C#如何提取PDF文档中的图片》提取图片可以将这些图像资源进行单独保存,方便后续在不同的项目中使用,下面我们就来看看如何使用C#通过代码从PDF文档中提取图片吧... 当 PDF 文件中包含有价值的图片,如艺术画作、设计素材、报告图表等,提取图片可以将这些图像资源进行单独保存,方便后续在不同的项目中使

Java实现文件图片的预览和下载功能

《Java实现文件图片的预览和下载功能》这篇文章主要为大家详细介绍了如何使用Java实现文件图片的预览和下载功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... Java实现文件(图片)的预览和下载 @ApiOperation("访问文件") @GetMapping("