时间:2021-05-22
复制代码 代码如下:
from creepy import Crawler
from BeautifulSoup import BeautifulSoup
import urllib2
import json
class MyCrawler(Crawler):
def process_document(self, doc):
if doc.status == 200:
print '[%d] %s' % (doc.status, doc.url)
try:
soup = BeautifulSoup(doc.text.decode('gb18030').encode('utf-8'))
except Exception as e:
print e
soup = BeautifulSoup(doc.text)
print soup.find(id="product-intro").div.h1.text
url_id=urllib2.unquote(doc.url).decode('utf8').split('/')[-1].split('.')[0]
f = urllib2.urlopen('http://p.3.cn/prices/get?skuid=J_'+url_id,timeout=5)
price=json.loads(f.read())
f.close()
print price[0]['p']
else:
pass
crawler = MyCrawler()
crawler.set_follow_mode(Crawler.F_SAME_HOST)
crawler.set_concurrency_level(16)
crawler.add_url_filter('\.(jpg|jpeg|gif|png|js|css|swf)$')
crawler.crawl('http://item.jd.com/982040.html')
声明:本页内容来源网络,仅供用户参考;我单位不保证亦不表示资料全面及准确无误,也不保证亦不表示这些资料为最新信息,如因任何原因,本网内容或者用户因倚赖本网内容造成任何损失或损害,我单位将不会负任何法律责任。如涉及版权问题,请提交至online#300.cn邮箱联系删除。
京东怎么看价格走势?网购的目的是为了买到最划算的商品,很多买家说京东价格的变化太快了,想要查看京东价格走势和历史价格,所以在咨询京东怎么看价格走势?京东上怎
大家经常在京东购物。那个商品有质量保证,但是网上的商品价格随着市场价格的上涨和下降。因此,此时可以申请京东价格保护。你知道京东家具的保险价格吗?接下来,让我们解
大家经常会在京东上购物,因为它的商品是有质量保证的,但是网上的商品价格会随着市场价格上升或者下降。所以这个时候大家就可以申请京东价格保护了,那么大家知道京东
作为京东的卖家,知道怎么才能利用快车推广吗?投放中商品价格高,转化率比较低,首要优化推广素材和商品详情页,随时监测数据变化,进行整体优化;如果你的商品价格适
京东全球购网店涉及的都是一些国外的商品,所以在转让的时候,除了网店本身的价格之外,它的商品价格和渠道也会占据一部分的网店转让费用,所以它整体的价格会比普通的京东