用beautifulsoup 不能select某一tag下的全部内容

Question

这是我用来抓取一则新闻文章时出现的问题
当我 soup.select('.bd')想要抓取整个文章时 它只抓取到第二条红线的位置 而后面的内容并没有被放进去

这是我的代码和结果

Answer 1

#-*- coding:utf-8 -*-

from bs4 import BeautifulSoup
import requests

html = requests.get("http://nbachina.qq.com/a/20170816/029879.htm")

soup = BeautifulSoup(html.content, 'lxml')

tag_list = soup.select('p')

for x in tag_list:
    print x.get_text()

执行结果：
您好~请您登录

联盟中有一些球员，虽然他们的实力足以成为一支NBA球队的合格先发，但为了球队的利益，他们却甘愿牺牲小我，在替补出战的时段默默为球队做出贡献。而为了嘉奖那些在巨星背后默默付出的英雄，联盟也会在每个赛季结束后为在当赛季表现最好的一名优秀替补授予最佳第六人奖。在今天NBA英文官网列出了新赛季最有可能夺得最佳第六人奖项的5个热门人选，来看看你是否认同他们的观点。

安德烈-伊戈达拉（金州勇士）
如果勇士能够在新赛季再取60+胜场，并最终夺冠，那么如果这台机器中的一个重要部件仍没有被视作是无价之宝，这只会让那些投票的选民感到难堪。因为伊戈达拉无论是在攻防两端都是如此高效而存在感十足，近些年在这一奖项的评选中，伊戈总是屈居第二，这就好比生涯拿到11枚总冠军戒指的菲尔-杰克逊却只拿到过一次最佳教练一样。在NBA征战13个赛季之后，这位全面的锋线强人仍可以在替补出战的时段里为球队做出巨大贡献。

埃里克-戈登（休斯敦火箭）
未来的17-18赛季，克里斯-保罗和詹姆斯-哈登将会不断为埃里克-戈登创造进攻良机，如果你觉得戈登在上赛季的表现已经足够亮眼（场均16.2分，三分命中率37.2%），那么你还可以再看戈登在保罗身边打球又会变成什么样。上赛季在德帅的跑轰体系下，他已经逐渐适应了去扮演一名板凳匪徒的角色。而且尤为主要的是，除了能够奉献高效的表现之外，他的身体状况也得到了极大的改善。上赛季是他自新秀赛季以来首次单赛季缺席场数未超过18场，而一旦戈登能够保证自己的身体状态，那么火箭便将变得愈发可怕。

贾马尔-克劳福德（明尼苏达森林狼）
作为联盟现役唯一一个三届最佳第六人奖得主，克六似乎并不需要再拿一次这个奖项来证明自己。虽然上赛季在快船克六的表现并不高产，但在一个新的环境下，克六仍有望成为新赛季最佳第六人奖项的热门候选者之一。

路-威廉姆斯（洛杉矶快船）
克里斯-保罗的离去意味着快船已经正式进入了“后保罗时代”，而除了保罗之外，快船在新赛季也将不再拥有JJ-雷迪克和贾马尔-克劳福德。就此里弗斯势必需要一名能够扛起球队进攻重担的火力点来在替补时段为球队分忧解难，而31岁的路威必能担此重任。这位曾在两年前夺得这一奖项的老将后卫在上赛季的评选中最终名列第三，当比赛进入攸关胜负的决战时刻，路威总会是对方的一个重大威胁。

罗伯特-卡温顿（费城76人）
上赛季当我们在为大帝的“横空出世”而感到惊叹不已时，勤奋的罗伯特-卡温顿也悄然锁定了在费城青年军中的位置。上赛季作为费城的首发三号位，卡温顿场均可以拿到12.9分6.5篮板，然而在新赛季由于本-西蒙斯的伤愈回归，他必然将被贬为替补。不过对卡温顿这种能投擅防的球员来说，在替补时段为球队做出贡献或许是最完美的处境。按照以往的评选标准，最佳第六人奖项往往会颁发给一些为“常胜之师”效力的替补球员。虽然76人目前还并不属于这一量级，但如果他们能够在未来的17-18赛季获得重大飞跃，那么卡温顿便有望成为这一奖项的候选人之一。
扫一扫，用手机看新闻！
用微信扫描还可以
分享至好友和朋友圈
©2017年著作权 NBA 中国 所有权保留。
NBA.com/China上除去使用条款中所特别提及的部分之外，其它任何内容都不得以任何形式被复制、再传播，或篡改。
进入NBA.com/China后，即表示阁下同意遵守NBA.com/China的隐私政策和使用条款。
有任何的建议和意见，都欢迎联络我们：[e-mail]
有关NBA商品授权合作事宜，敬请联系:[e-mail]