淘宝天猫搜索爬取-被子类商品

业务场景

【适用人群】

需要此类商品信息的人，比如电商从业者、行业研究者、消费者等

【解决痛点】

人工低效；手工可能有错漏

【核心价值】

效率翻倍；减少人手操作风险（比如漏采）；自动筛选店铺、选择尺寸；

提供浏览器（Edge & Google）选择；初步应对了反爬验证。

功能介绍(使用说明)

RPA应用功能

根据来源Excel，RPA应用将自动切换到已打开的淘宝网页版（含天猫），搜索被子类商品搜索词，进入详情页筛选店铺、调整尺寸并采集商品的折扣前后价、链接、尺寸、款式/颜色、填充纤维种类、填充物净重、被套面料。

注：每日采集的次数不要太多，频繁采集容易触发淘宝平台对账号的安全限制；如需进行大量采集，建议每次替换账号或者环境进行采集

启动参数说明

通过多参数实现了极其灵活的使用，可以自动搜索并采集，可以直接从搜索结果页开始采集，还可以直接从详情页开始采集。全面的参数截图如下。

这里仅对必要的，作简要的说明。运行前参数输入界面的问号里会有详细说明（含格式要求）。

• Edge_false或Google_true：你要使用的浏览器
• 淘宝_false或天猫_true：淘宝网页版上搜索后，要采集淘宝区还是天猫区。
• 品牌名、通用搜索词：{品牌名}+{通用搜索词}={最终搜索词}；品牌名还用于筛选店铺。
• 直接爬取：如果你在电商平台上已手动搜索并完成必要的筛选，只剩下爬取，那么就将此开关打开。
• 爬取已打开1个详情页：直接爬取这个详情页
• 跳过前几项：不爬取搜索结果中的前几个
• 面料列：存放面料要求的列号。其他列同理。
• 间歇秒数：关闭详情页前的等待时间
• 验证轮询秒数：有时会跳出验证界面（反爬机制），这时就要人手操作。每隔这么多秒，RPA应用就检查一次验证问题是否解决，未解决则继续等待。
• test_不点进详情：为分步测试使用，可忽略

注意事项

1. 当前本应用用于被子类。其他类别商品是否行得通，要看商品信息的排布、采集字段是否不同；
2. 浏览器界面比例 最好提前调为90%；
3. 本应用在win11上开发，也可在win10专业版上运行；
4. 有调整、定制的需求者请联系本开发者

来源Excel示例

运行结果预览

注意，由于更新迭代，实际得到结果的表头会有所不同；

相同的搜索词词，每次搜索得到的结果也不同。