十分鐘，Python 帶你看遍世界足球俱樂部沉浮

時間 2020-01-15

標籤十分 10分 python 世界足球俱樂部沉浮欄目 Python 简体版

原文原文鏈接

做爲一名足球迷，在年終盤點中，怎麼能少了足球呢。若是你是關注歐洲足球的球迷（沒辦法，人家歐洲是足球的世界的中心），那麼你必定知道，2019年是屬於利物浦的一年，很少說，紅軍的首個英超冠軍已經遙遙在望了，fighting！html

數據獲取

咱們仍是先來看看如何拿到咱們須要的數據呢，咱們這裏選擇的是一個國外的統計網站，能夠查看歷年的足球俱樂部得分和排名app

https://footballdatabase.com/ranking/world/1ide

獲取俱樂部信息

首先咱們須要拿到俱樂部相關的信息，這裏選取前200名俱樂部，使用 BeautifulSoup 解析網頁便可網站

for name in name_list:
        rank_list = []
        try:
            rank_point = name.find_all('td', attrs={'class': 'rank'})
            rank = rank_point[0].text
            point = rank_point[1].text
            club_info = name.find('td', attrs={'class': 'club text-left'}).find_all('a')
            club_url = club_info[0]['href']
            club_name = club_info[0].find('div', attrs={'class': 'limittext'}).text
            club_country_url = club_info[1]['href']
            club_country_name = club_info[1].text
            rank_list.append([rank, club_name, club_country_name, club_url, club_country_url, point])
            list_rank.append(rank_list)
            save_club_name(rank_list)

        except:
            pass

拿到各個俱樂部的信息後，就能夠遍歷該列表，獲取俱樂部歷年的得分和排名數據url

獲取俱樂部歷史數據

俱樂部的歷史數據也是保存在網頁的 Javascript 變量中的，對於如何獲取這種數據，咱們在前面的文章中也都有介紹，這裏就不過多贅述了3d

his_rank_list = []
    for data in data_list:
        print(data)
        url = data[0][3]
        his_res = requests.get(base_url + url)
        his_content = BeautifulSoup(his_res.text, "html.parser")
        js = his_content.find_all('script')[1].string
        src_text = js2xml.parse(js)
        src_tree = js2xml.pretty_print(src_text)
        data_tree = BeautifulSoup(src_tree, 'html.parser')
        array_list = data_tree.find_all('array')
        club_name = data[0][1]
        for array in array_list[2:-2]:
            his_rank_list = []
            array_date = array.find('string').text
            date = array_date
            try:
                month = month_map[array_date.split(' ')[0]]
                year = array_date.split(' ')[1]
                date = str(year) + '-' + str(month)
            except:
                pass
            array_data = array.find_all('number')
            try:
                point = array_data[0]['value']
                rank = array_data[1]['value']
                his_rank_list.append([rank, point, date])
                save_his_data(club_name, his_rank_list)
            except:
                raise

這樣咱們就能夠獲得兩個文件，分別是 club_data.csv 和 rank_his_data.csvcode