使用BeautifulSoup提取表行并将其与Pandas数据框同步

我正在尝试从以下网页的表中提取SMILES String和Repeat_Unit的值：https ://khazana.gatech.edu/module_search/material_detail.php?id =1& m =9

尽管这可能不是最有效的方法，但我可以从以下代码中成功提取这些值：

from bs4 import BeautifulSoup
import requests

link='https://khazana.gatech.edu/module_search/material_detail.php?id=1&m=9'
link=requests.get(link)
soup=BeautifulSoup(link.text)

data=[]
tables=soup.find_all('table')

#the desired table was selected based on list index because there is no other attributes
table_body=tables[9].find('tbody')
rows=table_body.findAll('tr')
for row in rows:
    cols=row.findAll('td')
    cols=[ele.text.strip() for ele in cols]
    data.append([ele for ele in cols if ele])

print (data[13][1])
print (data[14][1])

在我的应用程序中，我需要从相似网页的1000s中提取SMILES String和Repeat_Unit的值，其中html地址仅在id =之后出现的数字不同（在本示例中为1）。

我有熊猫数据框，其中一列具有数据ID。为了获得给定ID的SMILES字符串和重复单元，我将上面的代码修改为：

data=[]
SMILES=[]
Repeat_Unit=[]
for index, prow in df.iterrows():
    a=prow['#id']
    link='https://khazana.gatech.edu/module_search/material_detail.php?id='+str(a)+'&m=9'
    link=requests.get(link)
    soup=BeautifulSoup(link.text)
    tables=soup.find_all('table')
    for table in tables:
        table_body=tables[9].find('tbody') 
        rows=table_body.findAll('tr')
        for row in rows:
            cols=row.findAll('td')
            cols=[ele.text.strip() for ele in cols]
            data.append([ele for ele in cols if ele])
            SMILES.append(data[13][1])
            Repeat_Unit.append(data[14][1])

现在，当我调用SMILES或RepeatUnit时，出现以下错误：

IndexError                                Traceback (most recent call last)
<ipython-input-55-74f7ef016c59> in <module>()
     36             cols=[ele.text.strip() for ele in cols]
     37             data.append([ele for ele in cols if ele])
---> 38             SMILES.append(data[13][1])
     39             Repeat_Unit.append(data[14][1])

IndexError: list index out of range

即使我在追加到SMILES之前遍历数据，仍然会遇到相同的错误。

预先感谢您的帮助！