網絡基礎、ftp任務（進度條、計算文件大小、斷點續傳、搭建框架示例）

時間  2019-12-13
標籤 網絡 基礎 ftp 任務 進度 計算 文件大小 斷點 搭建 框架 示例 欄目 系統網絡 简体版
原文   原文鏈接

1、網絡基礎python

一、端口，是什麼？爲何要有端口？linux

　　端口是爲了將同一個電腦上的不一樣程序進行隔離。程序員

　　IP是找電腦；端口是找電腦上的應用程序；編程

　　端口範圍：1 – 65535 ；    1 - 1024 不要用  ；  通常程序員用8000、8001……json

二、OSI  七層模型（記住哪七層）windows

　　應用層，使用軟件；                 打開軟件或網站網絡

       表示層，看到數據，如圖片和視頻；   生產原始數據框架

       會話層，保持登陸或連接狀態；       應用偷偷攜帶一點其餘數據： 令牌 19rRNAwf8gsocket

       傳輸層，TCP/UDP；                [TCP][原始數據|19rRNAwf8g]ide

       網絡層，IP；                      【IP】【[TCP][原始數據|19rRNAwf8g]】

       數據鏈路層，MAC；                [MAC][ 【IP】【[TCP][原始數據|19rRNAwf8g]】]

       物理層，將數據轉換成電信號發送；

三、TCP三次握手，四次揮手

　　socket客戶端向服務端發起鏈接請求：三次握手（只能先由客戶端向服務端發起請求）

　　　　client.connect((……))

              客戶端                           服務端

              我能打你嗎

                                                 來呀來呀

              好的，我這就來

              ----------------------------------------

              client.send(收發數據)

              收發數據                     收發數據

　　客戶端和服務端斷開鏈接：四次揮手（客戶端和服務端均可以主動斷開鏈接）

　　　　client.close() 或者 conn.close()

              ------------------------------------------------------------

              我要斷開鏈接

                                          斷開就斷開，等我處理一些手頭的事情

                                          ……

                                          我處理完了，斷開吧

              拜拜

　　補充：斷開鏈接時，反應到代碼上：拋出異常（windows）/發送空內容（linux和mac系統）

總結：必須瞭解網絡相關知識。

2、FTP任務分析（進度條、計算文件大小、斷點續傳、搭建框架示例）

一、進度條（\r移動到行首、print不換行end=」」）

    import time
    def jdt(now,all): # 進度條函數
        per = int(now / all * 100)
        print('\r%s %s%%' % ('*'*per , per) ,end='')
        time.sleep(0.05)

    for i in range(101):
        jdt(i,100) # 執行進度條函數

二、計算文件大小

　　以前咱們學過一種計算文件大小的方式：os.path.getsize(file_path)，如今再來學習一種方式：

    import os
    size1 = os.path.getsize('server.py')
    size2 = os.stat('server.py').st_size
    print(size1,size2)  # 1844 1844

三、斷點續傳

　　咱們先來寫一個斷點續傳（腳本主要實現了客戶端向服務端上傳文件，上傳過程當中中斷的話，再次上傳此文件時接着上次中斷的地方繼續上傳）的簡單示例，而後從中提取一些編程思想：

    import os
    import json
    import socketserver
    import shutil

    CODE = {
        '1001':'上傳文件，從頭開始上傳'
    }

    def upload(cmd_dict,conn,username):
        """
        服務端完成上傳文件（含斷點續傳）
        :param cmd_dict:
        :param conn:
        :return:
        """
        # 2. 獲取文件信息
        file_md5 = cmd_dict['md5']
        file_name = cmd_dict['file_name']

        file_md5_path = os.path.join(username, file_md5)
        file_name_path = os.path.join(username, file_name)
        upload_file_size = cmd_dict['size']

        # 3. 判斷文件是否存在
        exist = os.path.exists(file_md5_path)
        if not exist:  # 不續傳
            # 3.1.1 能夠開始上傳了，我已經準備好。
            response = {'code': 1001}
            conn.sendall(json.dumps(response).encode('utf-8'))

            # 3.1.2 接收上傳的文件內容
            f = open(file_md5_path, 'wb')
            recv_size = 0
            while recv_size < upload_file_size:
                data = conn.recv(1024)
                f.write(data)
                f.flush()
                recv_size += len(data)
                return
            f.close()

            # 3.1.3 更名字
            shutil.move(file_md5_path, file_name_path)

        else:  # 續傳
            # 3.2 續傳+大小
            exist_size = os.stat(file_md5_path).st_size
            response = {'code': 1002, 'size': exist_size}
            conn.sendall(json.dumps(response).encode('utf-8'))

            f = open(file_md5_path, 'ab')
            recv_size = exist_size
            while recv_size < upload_file_size:
                data = conn.recv(1024)
                f.write(data)
                f.flush()
                recv_size += len(data)
            f.close()

            # 3.1.3 更名字
            shutil.move(file_md5_path, file_name_path)

    class NbServer(socketserver.BaseRequestHandler):
        def handle(self):
            """
            self.request 是客戶端的socket對象
            :return:
            """
            # 1. 接收命令
            upload_cmd_bytes = self.request.recv(8096)
            cmd_dict = json.loads(upload_cmd_bytes.decode('utf-8'))

            if cmd_dict['cmd'] == 'upload':
                upload(cmd_dict,self.request,'lili')  # 服務端代碼有個文件夾（lili）才能運行
            elif cmd_dict['cmd'] == 'download':
                pass

    if __name__ == '__main__':
        server =     socketserver.ThreadingTCPServer(('127.0.0.1',8001),NbServer)
        server.serve_forever()
服務端 
    import os
    import socket
    import json
    import hashlib
    CODE = {
        '1001':'上傳文件，從頭開始上傳'
    }

    def file_md5(file_path):
        """
        文件進行md5加密
        :param file_path:
        :return:
        """
        obj = open(file_path,'rb')
        m = hashlib.md5()
        for line in obj:
            m.update(line)
        obj.close()
        return m.hexdigest()

    def jdt(size,total_size):
        """
        顯示進度條
        :return:
        """
        val = int(size / total_size * 100)
        print('\r%s%%|%s' % (val, "#" * val,), end='')

    def send_file(exist_size,file_total_size):
        """
        發送文件
        :param exist_size:開始讀取字節的位置
        :param file_total_size: 文件總字節大小
        :return:
        """
        f = open(file_path, 'rb')
        f.seek(exist_size)
        send_size = exist_size
        while send_size < file_total_size:
            data = f.read(1024)
            sk.sendall(data)
            send_size += len(data)
            jdt(send_size,file_total_size)
        f.close()
        print('上傳成功')

    def upload(file_path):
        """
        文件上傳（含斷點）
        :param file_path:
        :return:
        """
        file_md5_val = file_md5(file_path)
        file_name = os.path.basename(file_path)
        file_size = os.stat(file_path).st_size

        cmd_dict = {'cmd': 'upload', 'file_name': file_name, 'size': file_size, 'md5': file_md5_val}
        upload_cmd_bytes = json.dumps(cmd_dict).encode('utf-8')
        sk.sendall(upload_cmd_bytes)

        # 2. 等待服務端的響應
        response = json.loads(sk.recv(8096).decode('utf-8'))
        if response['code'] == 1001:
            send_file(0, file_size)
        else:
            # 短點續傳
            exist_size = response['size']
            send_file(exist_size,file_size)

    sk = socket.socket()
    sk.connect(('127.0.0.1',8001))

    while True:
        # upload|文件路|徑
        user_input = input("請輸入要執行的命令")
        # 1. 自定義協議{'cmd':'upload','file_path':'.....'}
        cmd,file_path = user_input.split('|',maxsplit=1)
        if cmd == 'upload':
            upload(file_path)
        elif cmd == 'download':
            pass
客戶端

總結：

　　1）CODE 自定義狀態碼；

       2）自定義規範： {'code':1000 }；

       3）if…else… 分支用 反射；

　　4）其餘：刪除修改文件，以下示例：

　

    import os
    import shutil

    # py2 + win：報錯
    os.rename('a.txt','b.txt')

    # py2 + py3 都不會報錯
    shutil.move('c.txt','a.txt')  # 若a.txt已經存在，則會將其覆蓋掉
    shutil.rmtree('E:\@Lily\pythonDemo\classic') # 遞歸刪除一個目錄以及目錄內的全部內容

　　

四、搭建框架示例

# myProject/

　　 # ├── bin   （當前項目的啓動腳本在這裏）

　　 # │   ├── start.py
　　 # ├── core   （核心代碼都在這裏）
　　 # │   └── main.py
　　 # └── db
　　 #     └── userInfo.json

　　 # └── lib（不是內置和第三方模塊，多是本身寫的，較完善且跟此程序相關性小）
　　 #     └── models.py

　　 # └── conf（配置文件，多處用到某個值之後可能會被修改，則寫到配置文件中）
　　 #     └── settings.py

　　 # └── log（日誌文件，供用戶查看追責或者公司分析數據）
　　 #     └── all.log

        # ├── readme （對程序做說明，說明如何使用此程序）

相關文章
相關標籤/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公眾號
   歡迎關注本站公眾號,獲取更多信息
聯繫我們 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程