「docker實戰篇」python的docker-抖音分析接口數據分析（21）

時間 2019-12-13

標籤 docker 實戰 python 分析接口數據欄目 Docker 简体版

原文原文鏈接

原創文章，歡迎轉載。轉載請註明：轉載自IT人故事會，謝謝！
原文連接地址：「docker實戰篇」python的docker-抖音分析接口數據分析（21）python

上節xposed已經安裝完畢，設置對應的android的版本和代理服務器。android

準備工做

1.xposed和JustTruestMe的安裝
2.抖音安裝完畢mongodb

啓動fildder

點擊進入指定的粉絲界面

查看數據

獲取到的請求鏈接

api.amemv.com/aweme/v1/us…docker

GET https://api.amemv.com/aweme/v1/user/follower/list/?user_id=108719454702&max_time=1549012794&count=20&retry_type=no_retry&iid=62172089966&device_id=66011631779&ac=wifi&channel=aweGW&aid=1128&app_name=aweme&version_code=251&version_name=2.5.1&device_platform=android&ssmix=a&device_type=MI+6+&device_brand=Xiaomi&language=zh&os_api=19&os_version=4.4.2&uuid=863254011212197&openudid=1d4bed921e800405&manifest_version_code=251&resolution=1080*1920&dpi=320&update_version_code=2512&_rticket=1549012860987&ts=1549012860&as=a165c0050cb76ccf644355&cp=017bcd54cc4b54f4e1gkoo&mas=01cb98bea6c9a2c3a8d5faf856a795b13dacaccc2c2c6c66c6c66c HTTP/1.1
Accept-Encoding: gzip
Cache-Control: max-stale=0
Host: api.amemv.com
Connection: Keep-Alive
Cookie: install_id=62172089966; ttreq=1$c26b0505a13059d50206f39916d5eaee910a25e9; qh[360]=1; odin_tt=e7eabe3bd71cee75718b6ab8dea9e67e78b97933017ff975f92ca1198179dfea0553012386575dce721502cc0d378c0c65a733783a7888440928643796139b6c
User-Agent: okhttp/3.10.0.1

複製代碼

在瀏覽器根本沒法獲取，嘗試在瀏覽器內輸入網址，查看數據。json

以前說過一個工具叫mitmdump方式，能夠添加python腳本

若是使用的pycharm的話，我建議使用命令api

pip install mitmproxy
複製代碼

mitmdump -s 文件名稱.py -p 端口號
複製代碼

能夠打印出來後臺的python後臺輸出的列表。瀏覽器

import json
try:
    from douyin.handle_mongo import save_task
except:
    from handle_mongo import save_task

def response(flow):
    #經過fildder的方式獲取到請求接口
    if 'aweme/v1/user/follower/list' in flow.request.url:
        #數據的分析獲取節點中的followers
        for user in json.loads(flow.response.text)['followers']:
            douyin_info = {}
            #分享的id
            douyin_info['share_id'] = user['uid']
            douyin_info['douyin_id'] = user['short_id']
            douyin_info['nickname'] = user['nickname']
            print(douyin_info)
            save_task(douyin_info)

複製代碼

PS：找到項目的目錄，執行mitmdump -s python文件 -p指定端口。而後就能夠將對應的代理吐出來的數據獲取到。流程fildder就是獲取url地址，mitmdump出去response吐出來的數據。而後進行處理在存儲到mongodb中。技術目標就是不須要人的參與！慢慢的獲取完數據後下一步使用appium來進行機器模擬人來點擊滑動！bash