Requests爬取智联京东商城

简介:   #coding=utf-8  import requests  from pymongo import MongoClient  #数据库建立  c=MongoClient(host='127.0.0.1',port=27017)  db=c['zhilian']  collection=db['zhilianhtml']

  #coding=utf-8

  import requests

  from pymongo import MongoClient

  #数据库建立

  c=MongoClient(host='127.0.0.1',port=27017)

  db=c['zhilian']

  collection=db['zhilianhtml']

  def zhilian(company,page):

  for i in xrange(1,page):

  #京东商城 北京

  url="sou.zhaopin/jobs/searchresult.ashx?jl=%E5%8C%97%E4%BA%AC&kw=company=2&p=i"

  header={

  'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/61.0.3163.100 Safari/537.36'

  }

  res=requests.get(url=url,headers=header)

  #存入数据库中

  collection.insert({'charles':res.content})

  if __name__=='__main__':

  company=raw_input('请输入您要查询的二手游戏账号买号平台:')

  page=int(raw_input('请输入您要查找的页数:'))

  if page<1:

  print '输入错误!!!'

  else:

  zhilian(company,page)

目录
相关文章
|
12天前
|
监控 搜索推荐 API
京东按图搜索京东商品(拍立淘)API接口的开发、应用与收益
京东通过开放商品详情API接口,尤其是按图搜索(拍立淘)API,为开发者、企业和商家提供了创新空间和数据支持。该API基于图像识别技术,允许用户上传图片搜索相似商品,提升购物体验和平台竞争力。开发流程包括注册账号、获取密钥、准备图片、调用API并解析结果。应用场景涵盖电商平台优化、竞品分析、个性化推荐等,为企业带来显著收益,如增加销售额、提高利润空间和优化用户体验。未来,随着数字化转型的深入,该API的应用前景将更加广阔。
56 1
|
2月前
|
数据采集 存储 Web App开发
利用Python 的爬虫技术淘宝天猫销量和库存
使用 Python 爬虫技术获取淘宝天猫商品销量和库存的步骤包括:1. 安装 Python 和相关库(如 selenium、pandas),下载浏览器驱动;2. 使用 selenium 登录淘宝或天猫;3. 访问商品页面,分析网页结构,提取销量和库存信息;4. 处理和存储数据。注意网页结构可能变化,需遵守法律法规。
|
2月前
|
JSON API 数据格式
如何使用Python开发天猫获得淘宝买家秀API接口?
本文介绍了如何使用Python开发天猫和淘宝买家秀API接口,包括注册开放平台账号、创建应用获取API权限、构建请求URL、发送请求获取响应及解析数据等步骤,帮助开发者高效获取和处理商品信息与用户评价数据。
44 0
|
JavaScript 大数据 应用服务中间件
Python网络爬虫(JSON, Phantomjs, selenium/Chromedirver,豆瓣电影、斗鱼直播、京东商城爬取)
python、python爬虫、网络爬虫、爬虫框架、selenium、requests、urllib、数据分析、大数据、爬虫爬取静态网页、爬虫基础、自动化测试、json、动态加载、反爬虫
3537 0
|
8月前
|
C#
c#网页抓取京东商城首页案列
c#网页抓取京东商城首页案列
52 0
|
XML 数据采集 JSON
Shopee|Lazada|ebay|aliexpress|kaola东南亚电商平台API接口文档示例
Shopee|Lazada|ebay|aliexpress|kaola东南亚电商平台API接口文档示例,包括:关键词搜索商品列表接口,根据商品ID获取商品详情数据,根据 店铺ID获取店铺所有商品数据,根据商品ID获取商品评论数据,根据商品ID获取跨境属性数据。
|
小程序
京东联盟-怎么跳转到京东购物小程序领券下单
我们在自己的小程序里接入京东联盟,实际上模式是用户点击商品详情页下单,然后跳转到“京东购物”小程序领券下单(像下面那样),但是这个接口是需要申请的,且自有小程序日均访问人数>1万。
479 0
京东联盟-怎么跳转到京东购物小程序领券下单
|
JSON 小程序 JavaScript
Laravel8.5+微信小程序实现京东商城秒杀方案
一、商品秒杀涉及的知识点 鉴权策略封装 接口访问频次限制 小程序设计 页面防抖 接口调用 订单创建事务使用 超卖防御
|
XML 数据采集 Web App开发
学习XPath助力爬取中秋各大电商平台数据
学习XPath助力爬取中秋各大电商平台数据
128 0
学习XPath助力爬取中秋各大电商平台数据
|
网络协议 Java 数据处理
京东七鲜一面总结
京东七鲜一面总结
197 0