前言：

编写一个爬虫脚本，用于爬取东方财富网的上海股票代码，并通过爬取百度股票的单个股票数据，将所有上海股票数据爬取下来并保存到本地文件中

系统环境：

64位win10系统，64位python3.6,IDE位pycharm

预备知识：

BeautifulSoup的基本知识，re正则表达式的基本知识

代码：

代码解释：

第一个getHTMLText函数的作用是获得所需的网页源代码

第二个getStockList函数的作用是获得东方财富网上面上海股票的全部代码，查看网页源代码可知，股票代码的数据放在'a'标签里面，如下图所示：

因此，首先用find_all方法遍历所有'a'标签，然后在'a'标签里面提取出href部分信息，在提取出来的href信息里面，用正则表达式匹配所需的信息，“sh\d{6}”，即徐亚匹配例如sh200010的信息

第三个函数需要根据第二个函数得到的股票代码，拼接出一个url，在这个特定的url的网页里，使用第一个函数解析网页，首先加一个判断，如果遇到html为空，那么要继续执行下去，同样，我们也需要再加一个判断（关键之处），遇到网页不存在，

但html源代码仍然是存在的，因此接下去这个命令

stockInfo = soup.find('div',attrs = {'class':'stock-bets'})

可能为空，如果不加判断，程序执行到这里就会报错而无法继续执行，因此添加：

if stockInfo == None:

continue

每经编辑：吴永久

粉丝朋友们，周三，主板指数低位徘徊，最亮眼的还是科创50指数，上涨0.91%。

板块概念方面，脑机接口概念出现降温。马斯克访华，人形机器人板块表现出色，其中机器视觉概念奥比中光、力鼎光电等涨停。在英伟达一度突破万亿美元市值后，人工智能分化加大，人气龙头鸿博股份盘中炸板后又封住涨停。一些资金流向科创板。

每日经济新闻APP举办的掘金大赛第11期比赛从周一开赛以来，虽然开赛才3天，且有仓位限制，即单只股票买入金额不超过总资产的50%，从总榜来看，第一名选手“每经网友37119”盈利达30.69%，他上午及时了结了脑机接口概念股，9:45卖出了立方数科，在9:57卖出了冠昊生物。第二名选手“货运站”只持有爱朋医疗，收盘盈利45.57%，盘中最高盈利50%。

今天前十名出现一位黑马选手“上古神兽”，他今天的单日收益就达17.2%，冲至第三名，今日名次上升263名。

对于今天的行情，有参赛选手认为，“今天人形机器人概念又起飞，这个值得研究的，密切注意马斯克访华的表态。”

对于大盘，有参赛选手认为，“这几天港股恒指跌得多，目前上证指数能够稳住不跌，或者小涨小跌就不错了，不期望它能涨多高。现在主要看科创50了，如果没有科创板权限的，可以关注科创50etf。”

在操作心得方面，有选手认为，“目前大盘方向不明，这个时期选股就要注重安全边际，不要贸然追涨，可以采用逆向投资，下跌时才买入，边涨边出货。不追求赚多少钱，有点利润就要注意锁定。要看长做短，就是选择那些中长线没有问题的股票，再短线交易。”

粉丝朋友们，为了方便投资者交流学习，提高投资水平，主办方设有专门的比赛微信交流群，方法是：在每经APP私人订制掘金大赛页面上，点击“客服”按钮，就会弹出客服手机号，点击微信主页右上角+号/添加朋友/企业微信联系人/输入手机号/添加企业微信火山君。

掘金大赛采用模拟炒股形式，模拟资金100万元。赛程10个交易日，参赛人人都能获奖。比赛结束收益为正就能获现金奖励，对负收益选手设置鼓励奖！第1名现金奖励1888元/人（税前），第2至第4名现金奖励688元/人（税前），第5至第10名现金奖励288元/人（税前）；其他收益为正的选手平分1000元现金奖池（税前）。只要报名就送100N币，比赛结束对负收益选手奖励100N币，待N币累积到一定数量，可在每经APP商城兑换礼品。

各位老铁，第11期正式赛的比赛时间5月29日到6月9日，报名时间是5月27日到6月7日24时。赛程短，参赛人人都能获奖！比赛结束，正收益选手获现金奖励，对负收益选手设置鼓励奖！赶快下载安装每日经济新闻APP报名参赛，和高手一起角逐大奖！

报名方式：

首先下载每日经济新闻APP，然后打开每日经济新闻APP，点击“私人订制”，点击左上角的“掘金大赛”，点击“免费参赛”，然后输入参赛昵称，选择知晓渠道，就能报名了。需要注意的是，只有在报名时才能取参赛昵称。

（本文内容仅供参考，不作为投资依据，据此入市，风险自担）

每日经济新闻

上一篇：炒股民间高手怎么赚钱和全国民间高手炒股大赛

下一篇：上证指数还有600988股吧