标签：openaccess 05 text pymysql bs2 数据 find connect

代码：

import requests

import pymysql

from bs4 import BeautifulSoup

connect = pymysql.Connect(

    host = 'localhost',

    port = 3306,

    user = 'root',

    passwd = 'root',

    db = 'python',

    charset = 'utf8'

)

r = requests.get("http://openaccess.thecvf.com/CVPR2019.py")

r.encoding = "utf8"

result = r.text

bs = BeautifulSoup(result, 'html.parser')

data = bs.find_all('dt', 'ptitle')

j = 0

cursor = connect.cursor()

for i in data:

    j = j + 1

    id = j

    link = 'http://openaccess.thecvf.com/' + i.find('a')['href']

    r2 = requests.get(link)

    r2.encoding = "utf8"

    result2 = r2.text

    bs2 = BeautifulSoup(result2, 'html.parser')

    data1 = bs2.find_all(id="papertitle")

    for k in data1:

        title = k.text

    data2 = bs2.find_all('i')

    for l in data2:

        c = l.text

        author = pymysql.escape_string(c)

    data3 = bs2.find_all(id="abstract")

    for m in data3:

        b = m.text

        abstract = pymysql.escape_string(b)

    data4 = bs2.find_all('dd')

    for n in data4:

        address = 'http://openaccess.thecvf.com/' + n.find('a')['href']

    connect.commit()

    connect.close()

print('成功')

运行结果：

 

标签：openaccess,05,text,pymysql,bs2,数据,find,connect
来源： https://www.cnblogs.com/Lhxxx/p/13237765.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。