人生苦短，我用Python！

一、程序分析

　　1、读取文件到缓冲区

     def process_file():     # 读文件到缓冲区
         try:     # 打开文件
             f = open("C:\\Users\\panbo\\Desktop\\A_Tale_of_Two_Cities.txt", "r")
         except IOError  as e:
             print (e)
             return None
         try:     # 读文件到缓冲区
             bvffer = f.read()
         except:
             print ("Read File Error!")
             return None
         f.close() #关闭文件
         return bvffer    

　　2、缓冲区字符串分割成带有词频的字典

 def process_buffer(bvffer):
     if bvffer:
         word_freq = {}
         # 下面添加处理缓冲区 bvffer代码，统计每个单词的频率，存放在字典word_freq
         #文本字符串前期处理
         strl_ist = bvffer.replace(punctuation, '').lower().split(' ')
         #如果单词在字典里，则字典值加1，不在则添加该单词到字典里
         for str in strl_ist:
             if str in word_freq.keys():
                 word_freq[str] = word_freq[str] + 1
             else:
                 word_freq[str] = 1
         return word_freq

　　3、将字典按词频排序并输出排名前十的键值对

 def output_result(word_freq):
     if word_freq:
         sorted_word_freq = sorted(word_freq.items(), key=lambda v: v[1], reverse=True)
         for item in sorted_word_freq[:10]:  # 输出 Top 10 的单词
             print (item)

　　4、主程序输出前十结果和分析结果

 if __name__ == "__main__":
     bvffer = process_file()
     word_freq = process_buffer(bvffer)
     output_result(word_freq)
     import cProfile
     import pstats;
     p=pstats.Stats('word_freq.out');
     #输出调用此处排前十的函数
     p.sort_stats('calls').print_stats(10)
     #输出按照运行时间排名前十的函数
     p.strip_dirs().sort_stats("cumulative", "name").print_stats(10)
     #p.print_callers(0.5, "sre_parse.py")
     #查看每个函数分别调用了哪些函数
     p.print_callees("process_file")
     p.print_callees("process_buffer")
     p.print_callees("output_result")
     #查看有哪些函数调用了builtins.print
     p.print_callers(0.5, "builtins.print")
     p.print_callers(0.5, "builtins.exec")
     #p.strip_dirs().sort_stats("name").print_stats(3)
     #p.strip_dirs().sort_stats("cumulative", "name").print_stats(0.5)
     #p.print_callers(0.5, "built-in")

二、代码风格说明

　　1、python3与python2在print函数的使用上有着细微的区别，在python3中print函数要加上（），如上第一段代码的第五行。

　　2、使用4个空格进行缩进（即一个tab键），并且缩进符相同的代码属于同一个级别

　　3、模块级函数和类定义之间空两行。

　　  4、类成员函数之间空一行。

　　  5、不要使用太多的连续空行来区分代码的逻辑块。

三、程序运行结果截图

　　本程序，运行命令全都写在程序中，而非通过dos窗口执行。

　　 1、A_Tale_of_Two_Cities文本词频统计结果

　　

　　2、Gone_with_the_wind文本词频统计结果

　　

四、性能分析及改进

　　1、性能分析

　　1.1、执行时间最多的部分代码

　　

1.2、执行次数最多的部分代码

　　

　　1.3、找到耗时最多的调用函数为

　　

　　即为：  sorted_word_freq = sorted(word_freq.items(), key=lambda v: v[1], reverse=True)

　　2、尝试改进程序代码？