時間複雜度和空間複雜度詳解

算法的時間複雜度和空間複雜度合稱爲算法的複雜度。

1.時間複雜度

（1）時間頻度 一 個算法執行所耗費的時間，從理論上是不能算出來的，必須上機運行測試才能知道。但咱們不可能也沒有必要對每一個算法都上機測試，只需知道哪一個算法花費的時間 多，哪一個算法花費的時間少就能夠了。而且一個算法花費的時間與算法中語句的執行次數成正比例，哪一個算法中語句執行次數多，它花費時間就多。一個算法中的語 句執行次數稱爲語句頻度或時間頻度。記爲T(n)。

（2） 時間複雜度 在剛纔提到的時間頻度中，n稱爲問題的規模，當n不斷變化時，時間頻度T(n)也會不斷變化。但有時咱們想知道它變化時呈現什麼規律。爲此， 咱們引入時間複雜度概念。 通常狀況下，算法中基本操做重複執行的次數是問題規模n的某個函數，用T(n)表示，如有某個輔助函數f(n),使得當n趨近於無窮大 時，T（n)/f(n)的極限值爲不等於零的常數，則稱f(n)是T(n)的同數量級函數。記做T(n)=Ｏ(f(n)),稱Ｏ(f(n)) 爲算法的漸進時間複雜度，簡稱時間複雜度。

     時間頻度不一樣，但時間複雜度可能相同。如：T(n)=n2+3n+4與T(n)=4n2+2n+1它們的頻度不一樣，但時間複雜度相同，都爲O(n2)。

    按數量級遞增排列，常見的時間複雜度有：常數階O(1),對數階O(log2n),線性階O(n), 線性對數階O(nlog2n),平方階O(n2)，立方階O(n3),...， k次方階O(nk),指數階O(2n)。隨着問題規模n的不斷增大，上述時間複雜度不斷增大，算法的執行效率越低。

 （3）最壞時間複雜度和平均時間複雜度 　最壞狀況下的時間複雜度稱最壞時間複雜度。通常不特別說明，討論的時間複雜度均是最壞狀況下的時間複雜度。 這樣作的緣由是：最壞狀況下的時間複雜度是算法在任何輸入實例上運行時間的上界，這就保證了算法的運行時間不會比任何更長。

     在最壞狀況下的時間複雜度爲T(n)=0(n)，它表示對於任何輸入實例,該算法的運行時間不可能大於0(n)。 平均時間複雜度是指全部可能的輸入實例均以等機率出現的狀況下，算法的指望運行時間。

    指數階0(2n)，顯然，時間複雜度爲指數階0(2n)的算法效率極低，當n值稍大時就沒法應用。

（4）求時間複雜度

【1】若是算法的執行時間不隨着問題規模n的增長而增加，即便算法中有上千條語句，其執行時間也不過是一個較大的常數。此類算法的時間複雜度是O(1)。

x=91; y=100;
while(y>0) if(x>100) {x=x-10;y--;} else x++;
解答： T(n)=O(1)，
這個程序看起來有點嚇人，總共循環運行了1100次，可是咱們看到n沒有?
沒。這段程序的運行是和n無關的，
就算它再循環一萬年，咱們也無論他，只是一個常數階的函數

 

【2】當有若干個循環語句時，算法的時間複雜度是由嵌套層數最多的循環語句中最內層語句的頻度f(n)決定的。

 x=1; 

for(i=1;i<=n;i++) 

        for(j=1;j<=i;j++)

           for(k=1;k<=j;k++)

               x++; 　　

該程序段中頻度最大的語句是(5)，內循環的執行次數雖然與問題規模n沒有直接關係，可是卻與外層循環的變量取值有關，而最外層循環的次數直接與n有關，所以能夠從內層循環向外層分析語句(5)的執行次數：  則該程序段的時間複雜度爲T(n)=O(n3/6+低次項)=O(n3)

 

【3】算法的時間複雜度不單單依賴於問題的規模，還與輸入實例的初始狀態有關。

在數值A[0..n-1]中查找給定值K的算法大體以下：   

i=n-1;            

while(i>=0&&(A[i]!=k))       

      i--;        

return i;        

此算法中的語句(3)的頻度不只與問題規模n有關，還與輸入實例中A的各元素取值及K的取值有關: ①若A中沒有與K相等的元素，則語句(3)的頻度f(n)=n； ②若A的最後一個元素等於K,則語句(3)的頻度f(n)是常數0。

（5）時間複雜度評價性能 

有兩個算法A1和A2求解同一問題，時間複雜度分別是T1(n)=100n2，T2(n)=5n3。（1）當輸入量n＜20時，有T1(n)＞T2(n)，後者花費的時間較少。（2）隨着問題規模n的增大，兩個算法的時間開銷之比5n3/100n2=n/20亦隨着增大。即當問題規模較大時，算法A1比算法A2要有效地多。它們的漸近時間複雜度O(n2)和O(n3)從宏觀上評價了這兩個算法在時間方面的質量。在算法分析時，每每對算法的時間複雜度和漸近時間複雜度不予區分，而常常是將漸近時間複雜度T(n)=O(f(n))簡稱爲時間複雜度，其中的f(n)通常是算法中頻度最大的語句頻度。

 

2.空間複雜度

一 個程序的空間複雜度是指運行完一個程序所需內存的大小。利用程序的空間複雜度，能夠對程序的運行所須要的內存多少有個預先估計。一個程序執行時除了須要存 儲空間和存儲自己所使用的指令、常數、變量和輸入數據外，還須要一些對數據進行操做的工做單元和存儲一些爲現實計算所需信息的輔助空間。程序執行時所需存 儲空間包括如下兩部分。　　

（1）固定部分。這部分空間的大小與輸入/輸出的數據的個數多少、數值無關。主要包括指令空間（即代碼空間）、數據空間（常量、簡單變量）等所佔的空間。這部分屬於靜態空間。

（2）可變空間，這部分空間的主要包括動態分配的空間，以及遞歸棧所需的空間等。這部分的空間大小與算法有關。

一個算法所需的存儲空間用f(n)表示。S(n)=O(f(n))　　其中n爲問題的規模，S(n)表示空間複雜度。