本身設計大學排名-數據庫實踐

 

1、操做數據庫（以SQLite3爲例） 　　

SQLite3 可以使用 sqlite3 模塊與 Python 進行集成。它提供了一個與 PEP 249 描述的 DB-API 2.0 規範兼容的 SQL 接口。咱們不須要單獨安裝該模塊，由於 Python 2.5.x 以上版本默認自帶了該模塊。 爲了使用 sqlite3 模塊，首先必須建立一個表示數據庫的鏈接對象，而後能夠有選擇地建立光標對象，這將幫助執行全部 的 SQL 語句。

二.本身設計大學排名-數據庫實踐

代碼以下：

 # -*- coding: utf-8 -*-
"""
 Created on Wed May 29 23:13:27 2019
 
 @author: @foldline
"""
 
import requests
import csv
import os
from bs4 import BeautifulSoup
alluniv = []
def getHTMLText(url):
    try:
        r = requests.get(url,timeout = 30)
        r.raise_for_status()
        r.encoding = 'utf-8'
        return r.text
    except:
        return "error"
def fillunivlist(soup):
    data=soup.find_all('tr')
    for tr in data:
        ltd =tr.find_all('td')
        if len(ltd)==0:
            continue
        singleuniv=[]
        for td in ltd:
            singleuniv.append(td.string)
        alluniv.append(singleuniv)
def writercsv(save_road,num,title):
    if os.path.isfile(save_road):
        with open(save_road,'a',newline='')as f:
            csv_write=csv.writer(f,dialect='excel')
            for i in range(num):
                u=alluniv[i]
                csv_write.writerow(u)
    else:
         with open('rank.csv','w',newline='')as f:
            csv_write=csv.writer(f,dialect='excel')
            csv_write.writerow(title)
            for i in range(num):
                u=alluniv[i]
                csv_write.writerow(u)
title=["排名","學校名稱","省市","總分","生源質量","培養結果","科研規模","科研質量","頂尖成果","頂尖人才","科技服務","產學研究合做","成果轉化"]
save_road="D:\Anaconda\rank.csv"
def main(num):
    url = "http://www.zuihaodaxue.cn/zuihaodaxuepaiming2019.html"
    html=getHTMLText(url)
    soup=BeautifulSoup(html,"html.parser")
    fillunivlist(soup)
    writercsv(save_road,10,title)
main(10)

　結果以下：