当前位置: 首页 > news >正文

好的做淘宝详情页的网站有哪些合肥seo建站

好的做淘宝详情页的网站有哪些,合肥seo建站,网站设计论文5000,做网站的材料万方数据库爬虫简单开发(自用)(一) 使用Python爬虫实现万方数据库论文的搜索并获取信息1.获取url2.输入关键词3.使用BeautifulSoup解析4.获取文章标题信息 使用Python爬虫实现万方数据库论文的搜索并获取信息 后续会逐步探索更新…

万方数据库爬虫简单开发(自用)(一)

  • 使用Python爬虫实现万方数据库论文的搜索并获取信息
    • 1.获取url
    • 2.输入关键词
    • 3.使用BeautifulSoup解析
    • 4.获取文章标题信息

使用Python爬虫实现万方数据库论文的搜索并获取信息

后续会逐步探索更新万方,谷歌学术的爬虫写法

1.获取url

driver = webdriver.Chrome() #加载驱动
driver.get('https://www.wanfangdata.com.cn/')

2.输入关键词

wait = WebDriverWait(driver, 10) 
search_box = wait.until(EC.presence_of_element_located((By.ID, 'search-input'))) #等待搜索框加载完成

注意这里的EC是导入的包起的别名

from selenium.webdriver.support import expected_conditions as EC

在这里插入图片描述
先获取搜索框的id,在搜索框上右键->selectorsHub->copy id.selectorsHub是一个很好用的edge浏览器扩展,功能丰富,直接在edge扩展商店搜索即可。
在这里插入图片描述

# 输入搜索关键词
search_box.send_keys(keyword)
# 模拟回车按钮
search_box.send_keys(Keys.RETURN)
time.sleep(5)
windows = driver.window_handles
# 切换到当前最新打开的窗口
driver.switch_to.window(windows[-1])

driver.switch_to.window(windows[-1])这句话是为了保证后面的BeautifulSoup获取到的信息来自当前页面而不是网站首页。

3.使用BeautifulSoup解析

content = driver.page_source.encode('utf-8')
soup = BeautifulSoup(content, 'lxml')

4.获取文章标题信息

这里打开F12并分析页面结构:
在这里插入图片描述
可以看到文章标题在class='adjust’下的span标签里边。

titles_bf=soup.find_all('span',{'class':'title'})
titles=BeautifulSoup(str(titles_bf),'lxml')
papers=titles.get_text().strip().split(',')
for paper in papers:print(paper)

这样我们就获取到文章的标题信息了。各位可以根据自己的需要再稍作修改即可。

http://www.khdw.cn/news/67350.html

相关文章:

  • 163手机移动网站苏州关键词优化软件
  • 条形码生成器在线制作二维码游戏优化大师官方下载
  • 开发游戏用什么软件优化网站排名解析推广
  • 程序员怎么做自己的网站app有哪些推广方式
  • 网站开发成本预算价目表邯郸今日头条最新消息
  • 网站建网站建设百度seo快速提升排名
  • 网站开发规格微信卖货小程序怎么做
  • 建筑工人找活平台东莞seo推广
  • 哪些网站是做b2b的怎么样推广自己的产品
  • 哪个网站做logo免费seo视频教程
  • 徐州网站制作需要多少钱商品热搜词排行榜
  • 网站建设与网络编辑综合实训课程指导手册品牌建设
  • 福田企业网站建设可以免费发广告的网站有哪些
  • web如何做网站关键词竞价排名
  • 高端建设网站公司宝鸡seo外包公司
  • wordpress 自定义注册表单北京seo网站优化公司
  • 淘宝可做的团购网站腾讯企业邮箱登录入口
  • 深圳电商网站制作外链网盘
  • 厦门网站建设哪好开发网站建设公司
  • 专业模板建站价格网络营销广告案例
  • 黄埔网站建设门户网站制作
  • 网站怎么做图片放映效果搜索排名提升
  • 做公司网站大概需要多少钱啊网上接单平台
  • 丰台怎样做网站百度爱采购推广怎么收费
  • 网站排名提升工具信息流优化师培训机构
  • 蝉知cmsseo实战培训学校
  • 网站信息发布和内容建设自查报告企业网站排名优化方案
  • 国外网站建设素材库网络优化培训骗局
  • 天津网站建设技术百度资源分享网
  • 广州专业网站网络营销特点