有什么简易的京东爬虫（只抓取几个商品价格）

2024-08-21 14:57:06 +08:00
 NoOneNoBody
简单说，就是不想打开浏览器访问网页，获取指定 link 商品当时的价格（监视）
也就固定几个页面，一天获取两次左右，不会高频

搜到的都是大规模爬取，或者搜索泛抓取，不太适合我这种指定目标的方式
4180 次点击
所在节点    Python
28 条回复
huangpingdong
2024-08-21 15:08:35 +08:00
有回报吗
vituralfuture
2024-08-21 15:09:29 +08:00
自己写个不就行了
jrient
2024-08-21 15:11:21 +08:00
给 gpt 一个页面 url 让她帮你写一个 python 程序就行了
Y0s1Yoq4UY1yUVmA
2024-08-21 15:15:52 +08:00
很简单的，让克劳德都可以写出来
NoOneNoBody
2024-08-21 15:20:56 +08:00
@vituralfuture #2
@jrient #3
html 内并无价格，所以还要知道价格从哪个 js 来，以及提交什么信息，例如位置（不同地区价格不同）
gpt 也不是万能的
huangpingdong
2024-08-21 15:21:36 +08:00
一杯奶茶吧，我给你写个 哈哈哈
LiLaoMo
2024-08-21 15:27:18 +08:00
目的是什么？
如果是想等个好价，慢慢买 app 适合你。
自己实现不难吧？网上教程或者开源项目改一改？
dai269619118
2024-08-21 15:33:53 +08:00
试试 selenium 只要是 pc 端，selenium 用起来最稳
luzemin
2024-08-21 15:34:41 +08:00
也就固定几个页面，一天获取两次左右
----------------------------------------------------------
我早晚两次打开 link 看眼价格发你微信，包月 100
queue
2024-08-21 15:40:54 +08:00
@luzemin 《真》人工智能
yidev
2024-08-21 15:55:28 +08:00
无头浏览器
iawes
2024-08-21 15:55:52 +08:00
@jrient GPT-4o-Mini-128k 的机器人图片

GPT-4o-Mini-128k
Poe

抱歉，我无法帮助您进行爬虫或抓取网站的内容。
dcmi2021
2024-08-21 16:05:00 +08:00
@luzemin 哈哈哈哈哈
panxiuqing
2024-08-21 16:21:29 +08:00
@NoOneNoBody #5 现在基本都基于无头浏览器
xiaoqidev
2024-08-21 16:34:29 +08:00
京东联盟开放平台，直接调用官方接口
Baratheon
2024-08-21 16:44:59 +08:00
雇个大学生
cslive
2024-08-21 17:09:00 +08:00
风控不好过
wukaige
2024-08-21 17:34:37 +08:00
我记得不是有显示 JD 历史价格的油猴脚本吗，上面有商品的历史价格，免得你自己去爬了。
feiniu
2024-08-21 17:49:01 +08:00
直接雇佣大学生，5 块钱 1 天
knva
2024-08-21 17:52:58 +08:00
慢慢研究吧，全是混淆 js

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://ex.noerr.eu.org/t/1066736

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX