股票数据的网站抓取(二)
admin
2023-07-30 20:43:24
0

开发

使用python和selenium打开指定页面

#coding=utf-8
from selenium import webdriver
import time
import os
br=webdriver.Firefox()
baseurl=\"http://quote.eastmoney.com/\"
indexurl=\"stocklist.html\"
gourl=\"%s%s\"%(baseurl,indexurl)
br.get(gourl)
time.sleep(5)
br.quit()

获得该页全部股票链接代码

#coding=utf-8
from selenium import webdriver
import time
import os

def showlink(linklist):
    for x in linklist:
        print x.get_attribute(\'href\')
    print \"股票数:%d\"%(len(linklist))

br=webdriver.Firefox()
baseurl=\"http://quote.eastmoney.com/\"
indexurl=\"stocklist.html\"
gourl=\"%s%s\"%(baseurl,indexurl)
br.get(gourl)

shxpath=\"/html/body/div[9]/div[2]/div/ul[1]\"
szxpath=\"/html/body/div[9]/div[2]/div/ul[2]\"

shgupiao=br.find_element_by_xpath(shxpath)
szgupiao=br.find_element_by_xpath(szxpath)

shgupiaolist=shgupiao.find_elements_by_tag_name(\'a\')
szgupiaolist=szgupiao.find_elements_by_tag_name(\'a\')

showlink(shgupiaolist)
br.quit()

打开一个股票链接获得数据

#coding=utf-8
from selenium import webdriver
import time
import os
br=webdriver.Firefox()
gourl=\"http://quote.eastmoney.com/sz300401.html\"
gourlx=\"http://quote.eastmoney.com/sh166105.html\"
gourlxx=\"http://quote.eastmoney.com/sh201009.html\"
br.get(gourl)

hexinshujuxpath=\"/html/body/div[14]/div[1]/div[4]/div[1]\"
#原谅我用异常处里来代替了正常该进行判断的非股票类型数据吧
try:
    hexinshuju=br.find_element_by_class_name(\'pad5\')
    shujuhang=hexinshuju.find_elements_by_tag_name(\'tr\')
    print \"共有数据%d行\"%(len(shujuhang))
    for i in range(len(shujuhang)-2):
        shujulie=shujuhang[i].find_elements_by_tag_name(\'td\')
        print \"%s   %s\\n\"%(shujulie[0].text,shujulie[1].text)
    print \"%s\\n%s\"%(shujuhang[8].text,shujuhang[9].text)
except:
    print \"非股票数据放弃\"
finally:
    time.sleep(1)
    br.quit()

相关内容

热门资讯

500 行 Python 代码... 语法分析器描述了一个句子的语法结构,用来帮助其他的应用进行推理。自然语言引入了很多意外的歧义,以我们...
定时清理删除C:\Progra... C:\Program Files (x86)下面很多scoped_dir开头的文件夹 写个批处理 定...
65536是2的几次方 计算2... 65536是2的16次方:65536=2⁶ 65536是256的2次方:65536=256 6553...
Mobi、epub格式电子书如... 在wps里全局设置里有一个文件关联,打开,勾选电子书文件选项就可以了。
scoped_dir32_70... 一台虚拟机C盘总是莫名奇妙的空间用完,导致很多软件没法再运行。经过仔细检查发现是C:\Program...
小程序支付时提示:appid和... [Q]小程序支付时提示:appid和mch_id不匹配 [A]小程序和微信支付没有进行关联,访问“小...
pycparser 是一个用... `pycparser` 是一个用 Python 编写的 C 语言解析器。它可以用来解析 C 代码并构...
微信小程序使用slider实现... 众所周知哈,微信小程序里面的音频播放是没有进度条的,但最近有个项目呢,客户要求音频要有进度条控制,所...
python查找阿姆斯特朗数 题目解释 如果一个n位正整数等于其各位数字的n次方之和,则称该数为阿姆斯特朗数。 例如1^3 + 5...
Apache Doris 2.... 亲爱的社区小伙伴们,我们很高兴地向大家宣布,Apache Doris 2.0.0 版本已于...