使用python实现抓取中国银行外汇牌价首页数据实现
利用requests、BeautifulSoup、xlwings库抓取中国银行外汇牌价首页数据
1. 利用requests、BeautifulSoup、xlwings库抓取中国银行外汇牌价首页数据。
(1)中国银行外汇牌价网址如下。
https://www.bankofchina.com/sourcedb/whpj/
文章图片
(2)调用requests模块中get方法访问上述网址,获取Response 对象。
url = "https://www.bankofchina.com/sourcedb/whpj/"web=re.get(url)
(3)利用BeautifulSoup类解析。
#BeautifulSoup将字节流转换为utf-8编码bs_obj=BeautifulSoup(web.text,'lxml')
(4)利用find_all方法查找table、tr、td等标签对象。
#查找数据所在表格
table=bs_obj.find_all('table')[1]all_th=all_tr.find_all('th')#print(all_th)all_td=all_tr.find_all('td')#print(all_td)
(5)将找到的相应标签内容依次添加到列表中。
if len(all_th)>0:dataRow=[]for item in all_th:dataRow.append(item.text)dataAll.extend([dataRow])if len(all_td)>0:dataRow=[]for item in all_td:dataRow.append(item.text)dataAll.extend([dataRow])
(6)利用xlwings库,将列表内容写入Excel文件。
wb=xw.Book()sht=wb.sheets('Sheet1')sht.range('a1').value=https://www.it610.com/article/dataAll#将数据添加到表格中
(7)利用这部分数据建立折线图。
chart=sht.charts.add(500,50,700,400)chart.set_source_data(sht.range('A1:A28,C1:C28,E1:E28'))#设置数据画图chart.chart_type='line_markers'chart.name='line_markersd'#chart.api[1].ChartTitle.Text='中国银行外汇牌价'
Code:
import requests as refrom bs4 import BeautifulSoupimport xlwings as xwurl = "https://www.bankofchina.com/sourcedb/whpj/"web=re.get(url)web.encoding=web.apparent_encoding#BeautifulSoup将字节流转换为utf-8编码bs_obj=BeautifulSoup(web.text,'lxml')#查找数据所在表格table=bs_obj.find_all('table')[1]#print(table)dataAll=[]for all_tr in table.find_all('tr'):#找到所有tr,返回一个列表all_th=all_tr.find_all('th')#print(all_th)all_td=all_tr.find_all('td')#print(all_td)if len(all_th)>0:dataRow=[]for item in all_th:dataRow.append(item.text)dataAll.extend([dataRow])if len(all_td)>0:dataRow=[]for item in all_td:dataRow.append(item.text)dataAll.extend([dataRow])wb=xw.Book()sht=wb.sheets('Sheet1')sht.range('a1').value=https://www.it610.com/article/dataAll#将数据添加到表格中chart=sht.charts.add(500,50,700,400)chart.set_source_data(sht.range('A1:A28,C1:C28,E1:E28'))#设置数据画图chart.chart_type='line_markers'chart.name='line_markersd'#chart.api[1].ChartTitle.Text='中国银行外汇牌价'
【使用python实现抓取中国银行外汇牌价首页数据实现】
文章图片
以上就是使用python实现抓取中国银行外汇牌价首页数据实现的详细内容,更多关于Python抓取中国银行外汇牌价的资料请关注脚本之家其它相关文章!
推荐阅读
- 实现一个博客系统----基于前后端分离
- 投稿|能源势动:电力行业的碳中和该如何实现?
- 前端|小程序内部引导关注公众号实现方法
- python|docker-compose命令及yaml文件
- 前端|微信小程序如何实现转发/分享功能
- 微信|微信小程序文件实现下载并预览(ios及安卓手机)
- 微服务|【云原生&微服务十】SpringCloud之OpenFeign实现服务间请求头数据传递(OpenFeign拦截器RequestInterceptor的使用)
- SpringCloud|SpringCloud Alibaba【微服务组件Feign&Nacos配置中心使用】
- 使用plist文件
- 没技能、没资源(每天20分钟,30天手把手带你摆脱死工资,实现收入翻倍!)