一、算法和數據結構
什么是算法和數據結構?如果將最終寫好運行的程序比作戰場,我們程序員便是指揮作戰的將軍,而我們所寫的代碼便是士兵和武器。
那么數據結構和算法是什么?答曰:兵法!故,數據結構和算法是一名程序開發人員的必備基本功,不是一朝一夕就能練成絕世高手的。冰凍三尺非一日之寒,需要我們平時不斷的主動去學習積累。
二、算法的引入
先來看一道題:如果 a+b+c=1000,且 a*a+b*b=c*c(a,b,c 為自然數),如何求出所有a、b、c可能的組合?
普通解法:
import time # 用於記錄計算開始的時間 start_time = time.time() for a in range(0,1001): for b in range(0,1001): for c in range(0,1001): if a*a+b*b == c*c and a+b+c == 1000: print("a=%d,b=%d,c=%d"%(a,b,c)) # 用於記錄計算結束的時間 end_time = time.time() print("本次運算用時總計%f秒"%(end_time-start_time))
運行結果為:
a=0,b=500,c=500 a=200,b=375,c=425 a=375,b=200,c=425 a=500,b=0,c=500 本次運算用時總計397.615515秒
請注意運行時間是397.615515秒那么,如果本題稍微改一下,改為先來看一道題:如果 a+b+c=2000,且 a*a+b*b=c*c(a,b,c 為自然數),如何求出所有a、b、c可能的組合?這個時候他們解題思路和a+b+c=1000是一樣的,無非就是將1000改為2000,而這種解決問題的思路就叫做算法,只不過算法也有好壞而已。
三、算法的概念
算法是計算機處理信息的本質,因為計算機程序本質上是一個算法來告訴計算機確切的步驟來執行一個指定的任務。一般地,當算法在處理信息時,會從輸入設備或數據的存儲地址讀取數據,把結果寫入輸出設備或某個存儲地址供以后再調用。算法是獨立存在的一種解決問題的方法和思想。對於算法而言,實現的語言並不重要,重要的是思想。算法可以有不同的語言描述實現版本(如C描述、C++描述、Python描述等)
四、算法的五大特性
- 輸入: 算法具有0個或多個輸入
- 輸出: 算法至少有1個或多個輸出,算法必須要有輸出,不然算法有什么意義,鬧着玩呢?所以一定要把算出了數據輸出使用。
- 有窮性: 算法在有限的步驟之后會自動結束而不會無限循環,並且每一個步驟可以在可接受的時間內完成
- 確定性:算法中的每一步都有確定的含義,不會出現二義性
- 可行性:算法的每一步都是可行的,也就是說每一步都能夠執行有限的次數完成
五、案例算法優化
還是針對上面的例子:如果 a+b+c=1000,且 a*a+b*b=c*c(a,b,c 為自然數),如何求出所有a、b、c可能的組合?優化解法:
import time # 用於記錄計算開始的時間 start_time = time.time() # 注意這里是兩重循環 for a in range(0,1001): for b in range(0,1001-a): c=1000-a-b if a*a+b*b == c*c: print("a=%d,b=%d,c=%d"%(a,b,c)) # 用於記錄計算結束的時間 end_time = time.time() print("本次運算用時總計:%f秒"%(end_time-start_time))
運行結果為:
a=0,b=500,c=500 a=200,b=375,c=425 a=375,b=200,c=425 a=500,b=0,c=500 本次運算用時總計316.337260秒
六、算法效率的衡量
1、執行時間反應算法效率
對於同一問題,我們給出了兩種解決算法,在兩種算法的實現中,我們對程序執行的時間進行了測算,發現兩段程序執行的時間相差懸殊(397.615515秒相比於316.337260秒),由此我們可以得出結論:實現算法程序的執行時間可以反應出算法的效率,即算法的優劣。
2、單靠時間絕對可信嗎?
假設我們將第二次嘗試的算法程序運行在一台配置古老性能低下的計算機中,情況會如何?很可能運行的時間並不會比在我們的電腦中運行算法一的397.615515秒快多少。單純依靠運行的時間來比較算法的優劣並不一定是客觀准確的!程序的運行離不開計算機環境(包括硬件和操作系統),這些客觀原因會影響程序運行的速度並反應在程序的執行時間上。那么如何才能客觀的評判一個算法的優劣呢?
3、時間復雜度與“大O記法”
我們假定計算機執行算法每一個基本操作的時間是固定的一個時間單位,那么有多少個基本操作就代表會花費多少時間單位。當然對於不同的機器環境而言,確切的單位時間是不同的,但是對於算法進行多少個基本操作(即花費多少時間單位)在規模數量級上卻是相同的,由此可以忽略機器環境的影響而客觀的反應算法的時間效率。
對於算法的時間效率,我們可以用“大O記法”來表示。
“大O記法”:對於單調的整數函數f(),如果存在一個整數函數g()和實常數c>0,使得對於充分大的n總有f(n)<=c*g(n),就說函數g是f的一個漸近函數(忽略常數),記為f(n)=O(g(n))。也就是說,在趨向無窮的極限意義下,函數f的增長速度受到函數g的約束,亦即函數f與函數g的特征相似。
時間復雜度:假設存在函數g(),使得算法A處理規模為n的問題示例所用時間為T(n)=O(g(n)),則稱O(g(n))為算法A的漸近時間復雜度,簡稱時間復雜度,記為T(n)
- 算法完成工作最少需要多少基本操作,即最優時間復雜度
- 算法完成工作最多需要多少基本操作,即最壞時間復雜度
- 算法完成工作平均需要多少基本操作,即平均時間復雜度
4、時間復雜度的基本計算規則
- 基本操作,即只有常數項,認為其時間復雜度為O(1)
- 順序結構,時間復雜度按加法進行計算
- 循環結構,時間復雜度按乘法進行計算
- 分支結構,時間復雜度取最大值
- 判斷一個算法的效率時,往往只需要關注操作數量的最高次項,其它次要項和常數項可以忽略
- 在沒有特殊說明時,我們所分析的算法的時間復雜度都是指最壞時間復雜度
七、案例的算法分析
for a in range(0,1001): for b in range(0,1001): for c in range(0,1001): if a*a+b*b == c*c and a+b+c == 1000: print("a=%d,b=%d,c=%d"%(a,b,c))
時間復雜度:T(n) = O(n*n*n) = O(n^3)
優化后:
for a in range(0,1001): for b in range(0,1001-a): c=1000-a-b if a*a+b*b == c*c: print("a=%d,b=%d,c=%d"%(a,b,c))
時間復雜度:T(n) = O(n*n) = O(n^2), 由此可見,我們嘗試的第二種算法要比第一種算法的時間復雜度好多的。
八、常見的時間復雜度
注意:經常將log2n(以2為底的對數)簡寫成logn
所消耗的時間從小到大:O(1) < O(logn) < O(n) < O(nlogn) < O(n2) < O(n3) < O(2n) < O(n!) < O(n^n)
九、拿時間換空間,用空間換時間
算法的時間復雜度和空間復雜度是可以相互轉化的。谷歌瀏覽器相比於其他的瀏覽器,運行速度要快。是因為它占用了更多的內存空間,以空間換取了時間。
算法中,例如判斷某個年份是否為閏年時,如果想以時間換取空間,算法思路就是:當給定一個年份時,判斷該年份是否能被4或者400整除,如果可以,就是閏年。
如果想以空間換時間的話,判斷閏年的思路就是:把所有的年份先判斷出來,存儲在數組中(年份和數組下標對應),如果是閏年,數組值是1,否則是0;當需要判斷某年是否為閏年時,直接看對應的數組值是1還是0,不用計算就可以馬上知道。