Beautiful Soup 获取不以逗号分隔的列表元素

Question

我正在尝试使用 Beautiful Soup 从网站解析城市列表

这是输出：门罗·马修斯瓦克斯霍印第安小径，马修斯

我需要的是： Monroe、Matthews、Waxhaw、Indian Trail、Matthews

这里是 HTML:

<div id="current_tab">
    <p class="view_label_type_geoserved" id="view_label_field_geoserved">Geographies Served</p>
    <ul>
        <li class="view_type_geoserved" id="view_field_geoserved">
            <p style="font-weight: bold; border-bottom: 1px dotted #CCC; font-size: .9em;">North Carolina (NC)<span style="float: right; font-size: 0.8em;">North Carolina (NC)</span></p>
            <p style="margin: 5px 0 3px 8px; border-bottom: 1px dotted #DDD; font-size:1em">Union<span style="float: right; font-size: 0.8em;">Union</span></p>
            <div class="view_type_geoserved">
                <table>
                    <tr>
                        <td style="width: 225px;">Monroe</td>
                        <td>Matthews</td></tr><tr>
                        <td style="width: 225px;">Waxhaw</td>
                        <td>Indian Trail</td>
                    </tr>
                </table>
            </div>
            </li>
                <p style="margin: 5px 0 3px 8px; border-bottom: 1px dotted #DDD; font-size:1em">Mecklenburg<span style="float: right; font-size: 0.8em;">Mecklenburg</span></p>
                <div class="view_type_geoserved">
                    <table>
                        <tr>
                            <td style="width: 225px;">Matthews</td><td></td>
                        </tr>
                    </table>
                </div>
            </li>
    </ul>
</div>

这是我用来获取结果的代码。

geoserved_muni = ', '.join(p.text for p in soup.findAll("div", {"class":"view_type_geoserved"}))
print geoserved_muni

在各个标签之间添加逗号我错过了什么？

Answer 1

将每个 td 元素的文本加入 div:

', '.join(td.get_text(strip=True) for td in soup.select("div.view_type_geoserved > table tr > td") if td.text)

soup.select()里面的表达式是CSS selector.

经过测试，对我来说它产生：

Monroe, Matthews, Waxhaw, Indian Trail, Matthews

Beautiful Soup 获取不以逗号分隔的列表元素

Beautiful Soup Get list elements not separating by commas

html

python

beautifulsoup

html-parsing