首頁 > 軟體

Python爬取網易雲歌曲評論實現詞雲圖

2022-06-02 18:01:05

前言

emmmm 沒什麼說的，想說的都在程式碼裡

環境使用

Python 3.8 直譯器 3.10

Pycharm 2021.2 專業版

selenium 3.141.0

本次要用到selenium模組，所以請記得提前下載好瀏覽器驅動，設定好環境

程式碼實現

先是安裝、匯入所需模組

from selenium import webdriver  # 匯入瀏覽器的功能
import re   # 正規表示式模組, 內建
import time   # 時間模組, 程式延遲

1. 建立一個瀏覽器物件

driver = webdriver.Chrome()

2. 執行自動化

driver.get('https://music.163.com/#/song?id=488249475')
# selenium無法直接獲取到巢狀頁面裡面的資料
driver.switch_to.frame(0)  # switch_to.frame()  切換到巢狀網頁
driver.implicitly_wait(10)  # 讓瀏覽器載入的時候, 等待渲染頁面

下拉頁面, 直接下拉到頁面的底部

js = 'document.documentElement.scrollTop = document.documentElement.scrollHeight'
driver.execute_script(js)

3.解析資料

divs = driver.find_elements_by_css_selector('.itm') 
# 所有div  css語法: 定位到 html 資料/xpath/正則
for div in divs:
    cnt = div.find_element_by_css_selector('.cnt.f-brk').text
    cnt = re.findall('：(.*)', cnt)[0]  # 中英文有區別
    print(cnt)

儲存資料

翻頁

for page in range(10):  # 控制翻頁  速度太快
    # 翻頁 , 找到下一頁標籤, 點選?
    driver.find_element_by_css_selector('.znxt').click()
    time.sleep(1)
# selenium  欲速則不達

儲存為txt檔案

with open('contend.txt', mode='a', encoding='utf-8') as f:
    f.write(cnt + 'n')

執行程式碼得到結果

再做個詞雲

匯入相關模組

import jieba  # 中文分詞庫  pip install jieba
import wordcloud  # 製作詞雲圖的模組  pip install wordcloud
import imageio

讀取檔案資料

with open('contend.txt', mode='r', encoding='utf-8') as f:
    txt = f.read()
print(txt)

詞雲圖 分詞<中文(詞語)> 基於結果

txt_list = jieba.lcut(txt)
print('分詞結果:', txt_list)

合併

string_ = ' '.join(txt_list)  # 1 + 1 = 2   字串的基本語法
print('合併分詞:', string_)

建立詞雲圖

wc = wordcloud.WordCloud(
    width=1000,  # 圖片的寬
    height=800,  # 圖片的高
    background_color='white',  # 圖片的背景色
    font_path='msyh.ttc',  # 微軟雅黑
    scale=15,  # 詞雲圖預設的字型大小
    # mask=img,  # 指定詞雲圖的圖片
    # 停用詞&lt; 語氣詞, 助詞,....
    stopwords=set([line.strip() for line in open('cn_stopwords.txt', mode='r', encoding='utf-8').readlines()] )
)
print('正在繪製詞雲圖...')
wc.generate(string_)  # 繪製詞雲圖
wc.to_file('out.png')  # 儲存詞雲圖
print('詞雲圖繪製完成...')

最後效果

以上就是Python爬取網易雲歌曲評論實現詞雲分析的詳細內容，更多關於Python爬取歌曲評論詞雲分析的資料請關注it145.com其它相關文章！


相關文章

  • 德漢姆中學就讀條件 德漢姆中學就讀條件

    <em>Mac</em>Book项目 2009年学校开始实施<em>Mac</em>Book项目,所有师生配备一本<em>Mac</em>Book,并同步更新了校园无线网络。学校每周进行电脑技术更新,每月发送技术支持资料,极大改变了教学及学习方式。因此2011

    2021-06-01 09:32:01

  • 黑科技的輕簡出行，告別「電量焦慮症」：Anker氮化鎵超能充系列 黑科技的輕簡出行，告別「電量焦慮症」：Anker氮化鎵超能充系列

    综合看Anker超能充系列的性价比很高，并且与不仅和iPhone12/苹果<em>Mac</em>Book很配，而且适合多设备充电需求的日常使用或差旅场景，不管是安卓还是Switch同样也能用得上它，希望这次分享能给准备购入充电器的小伙伴们有所

    2021-06-01 09:31:42

  • 吳亦凡廠牌首秀，L4WUDU居然忘詞了，Rapper和明星比還是有差距！ 吳亦凡廠牌首秀，L4WUDU居然忘詞了，Rapper和明星比還是有差距！

    除了L4WUDU与吴亦凡已经多次共事，成为了明面上的厂牌成员，吴亦凡还曾带领20XXCLUB全队参加2020年的一场音乐节，这也是20XXCLUB首次全员合照，王嗣尧Turbo、陈彦希Regi、<em>Mac</em> Ova Seas、林渝植等人全部出场。然而让

    2021-06-01 09:31:34

  • IPFS、Chia、Bzz和ICP挖礦該怎麼選？哪一個更有優勢？ IPFS、Chia、Bzz和ICP挖礦該怎麼選？哪一個更有優勢？

    目前应用IPFS的机构：1 谷歌<em>浏览器</em>支持IPFS分布式协议 2 万维网 (历史档案博物馆)数据库 3 火狐<em>浏览器</em>支持 IPFS分布式协议 4 EOS 等数字货币数据存储 5 美国国会图书馆，历史资料永久保存在 IPFS 6 加

    2021-06-01 09:31:24

  • 有哪些事是買了雪佛蘭後才知道的？美事偷著樂，開拓者車主隨聊 有哪些事是買了雪佛蘭後才知道的？美事偷著樂，開拓者車主隨聊

    开拓者的车机是兼容苹果和<em>安卓</em>，虽然我不怎么用，但确实兼顾了我家人的很多需求：副驾的门板还配有解锁开关，有的时候老婆开车，下车的时候偶尔会忘记解锁，我在副驾驶可以自己开门：第二排设计很好，不仅配置了一个很大的

    2021-06-01 09:30:48

  • iPhone12在618最新定價，跌價幅度超過1400元，還等iPhone13嗎？ iPhone12在618最新定價，跌價幅度超過1400元，還等iPhone13嗎？

    不仅是<em>安卓</em>手机，苹果手机的降价力度也是前所未有了，iPhone12也“跳水价”了，发布价是6799元，如今已经跌至5308元，降价幅度超过1400元，最新定价确认了。iPhone12是苹果首款5G手机，同时也是全球首款5nm芯片的智能机，它

    2021-06-01 09:30:45

IT145.com E-mail:sddin#qq.com