Python怎么統(tǒng)計(jì)字母出現(xiàn)的次數(shù)
發(fā)表時間:2023-07-14 來源:明輝站整理相關(guān)軟件相關(guān)文章人氣:
[摘要]這次給大家?guī)鞵ython怎么統(tǒng)計(jì)字母出現(xiàn)的次數(shù),Python統(tǒng)計(jì)字母出現(xiàn)次數(shù)的注意事項(xiàng)有哪些,下面就是實(shí)戰(zhàn)案例,一起來看一下。題目:統(tǒng)計(jì)一個文件中每個單詞出現(xiàn)的次數(shù),列出出現(xiàn)頻率最多的5個單詞。前...
這次給大家?guī)鞵ython怎么統(tǒng)計(jì)字母出現(xiàn)的次數(shù),Python統(tǒng)計(jì)字母出現(xiàn)次數(shù)的
注意事項(xiàng)有哪些,下面就是實(shí)戰(zhàn)案例,一起來看一下。
題目:
統(tǒng)計(jì)一個文件中每個單詞出現(xiàn)的次數(shù),列出出現(xiàn)頻率最多的5個單詞。
前言:
這道題在實(shí)際應(yīng)用場景中使用比較廣泛,比如統(tǒng)計(jì)歷年來四六級考試中出現(xiàn)的高頻詞匯,記得李笑來就利用他的編程技能出版過一本背單詞的暢銷書,就是根據(jù)詞頻來記單詞,深受學(xué)生喜歡。這就是一個把編程技能用來解決實(shí)際問題的典型場景。另外,在數(shù)據(jù)分析時,那些詞云效果本質(zhì)上都是基于詞頻統(tǒng)計(jì)來調(diào)整字體的大小,如果你能熟練運(yùn)用Python中的知識來解決問題的話,說明你真的入門Python了。
分析
本題主要考察以下幾個方面的知識點(diǎn):
1、如何正確讀寫文件
在python中讀寫文件可以使用內(nèi)置函數(shù)open(),而 open 函數(shù)在python2 和 python3 中有一定的區(qū)別,比如 Python 中可以指定讀寫文件的編碼格式,而 Python 則不可以,為了同時兼容2和3,我們通常會使用io模塊下面的 open 函數(shù),大家可以查文檔搞清楚它們之間的區(qū)別,培養(yǎng)主動學(xué)習(xí)能力和查資料的習(xí)慣。
另外一點(diǎn)是讀寫文件完成之后是需要關(guān)閉文件描述符的,除了可以使用 try...except...finally的語法之后,我們還可以使用更優(yōu)雅的 with … as 的語法來自動關(guān)閉文件。
2、如何對數(shù)據(jù)進(jìn)行排序
sorted函數(shù)是一個使用頻率很高的內(nèi)置函數(shù),它的用法也很強(qiáng)大,因?yàn)樗梢酝ㄟ^指定參數(shù) key 來進(jìn)行自定義排序,也就意味著你不僅可以對數(shù)字排序、對字母排序、還可以對列表、字典、自定義的對象進(jìn)行排序,你只需要要告訴 sorted 函數(shù)的排序規(guī)則是什么,比如一個people對象,我既可以根據(jù)年齡排序也可以根據(jù)身高體重來排序,所以這個函數(shù)時非常靈活的,另外,對于列表對象有自帶的 sort 方法,如果能區(qū)分清楚 list.sort 與 sorted 之間區(qū)別那說明你已經(jīng)能靈活運(yùn)用了。
3、字典數(shù)據(jù)類型的運(yùn)用
做詞頻統(tǒng)計(jì),用字典無疑是最合適的數(shù)據(jù)類型,單詞作為字典的key, 單詞出現(xiàn)的次數(shù)作為字典的 value,很方便地就記錄好了每個單詞的頻率,字典很像我們的電話本,每個名字關(guān)聯(lián)一個電話號碼。另外,字典最大的特點(diǎn)就是它的查詢速度會非?。理想情況下時間復(fù)雜度為O(1),我是說理想情況,如果你想深入了解字典的話,建議看看這篇文章 https://www.laurentluce.com/posts/python-dictionary-implementation/
4、正則表達(dá)式的運(yùn)用
對文本、字符串處理,正則表達(dá)式簡直是神器,無論是做數(shù)據(jù)爬蟲還是數(shù)據(jù)清洗使用非常廣泛,當(dāng)然,正則表達(dá)式并不是Python特有的東西,所有編程語言都支持,我們要做的除了學(xué)習(xí)正則表達(dá)式還有他的API,只有熟悉了API我們才能運(yùn)用到實(shí)際場景中去。關(guān)于正則表達(dá)式推薦一篇文章:http://www.cnblogs.com/huxi/archive/2010/07/04/1771073.html ,另外我還發(fā)現(xiàn)有同學(xué)引入了jieba分詞庫,這個庫在做中文分詞非常有用,感興趣的可以去了解一下。
實(shí)現(xiàn)
分析完之后,我們實(shí)現(xiàn)起來其實(shí)是非?斓摹K晕覀冊谀玫揭粋需求的時候,首先肯定是把需求弄清楚,想想大概可以用哪些技術(shù)來實(shí)現(xiàn),隨后才是動手寫代碼,其實(shí)我們在工作上,真正寫代碼的時間還不到一半。
# -*- coding:utf-8 -*-
import io
import re
class Counter:
def init(self, path):
"""
:param path: 文件路徑
"""
self.mapping = dict()
with io.open(path, encoding="utf-8") as f:
data = f.read()
words = [s.lower() for s in re.findall("\w+", data)]
for word in words:
self.mapping[word] = self.mapping.get(word, 0) + 1
def most_common(self, n):
assert n > 0, "n should be large than 0"
return sorted(self.mapping.items(), key=lambda item: item[1], reverse=True)[:n]
if name == 'main':
most_common_5 = Counter("importthis.txt").most_common(5)
for item in most_common_5:
print(item)
打印結(jié)果:
('is', 10)
('better', 8)
('than', 8)
('the', 6)
('to', 5)
總結(jié)
我在看大家代碼的時候,很多代碼依然存在有命名不規(guī)范(建議讀PEP8),代碼的排版混亂(閱讀起來很困難,建議用Pycharm進(jìn)行格式化)。還有不少代碼的實(shí)現(xiàn)方式看起來很復(fù)雜(往往越復(fù)雜的代碼Bug越多)。當(dāng)然,實(shí)現(xiàn)方法不是唯一。
比如Python模塊本身就提供了一個collections.Counter的類,它繼承自dict類,就是用于做統(tǒng)計(jì)的,我發(fā)現(xiàn)有部分同學(xué)使用的就是這個類來實(shí)現(xiàn)的,細(xì)心的你可能發(fā)現(xiàn)了,我實(shí)現(xiàn)的這個Counter和collections下面那個Counter很像,其實(shí)這就是造輪子,造輪子可以鍛煉我們的編程思維,當(dāng)然在工作上有現(xiàn)成的東西就沒必要自己造輪子了,除非你有信心做得更好。你也可以思考思考,假如Python沒有提供Counter這個工具,你該怎么做。
另外,該模塊還提供一個有序的字典對象 OrderedDict,使用它可以免去我們手動排序的操作。最后建議大家學(xué)習(xí)總結(jié)上面我提到的所有內(nèi)容。如果你能堅(jiān)持100天,相信你對Python的掌握程度是游刃有余的。
相信看了本文案例你已經(jīng)掌握了方法,更多精彩請關(guān)注php中文網(wǎng)其它相關(guān)文章!
推薦閱讀:
Python中怎樣把矩陣轉(zhuǎn)換為列表
在python中列表,數(shù)組,矩陣互相轉(zhuǎn)換的方法
以上就是Python怎么統(tǒng)計(jì)字母出現(xiàn)的次數(shù)的詳細(xì)內(nèi)容,更多請關(guān)注php中文網(wǎng)其它相關(guān)文章!
學(xué)習(xí)教程快速掌握從入門到精通的SQL知識。