from selenium.webdriver.common.by import By
import time

# 初始化Chrome瀏覽器
driver = webdriver.Chrome()

# 打開小紅書登錄頁面
driver.get("https://www.xiaohongshu.com/user/profile/")

# 等待頁面加載
time.sleep(5)

# 輸入用戶名和密碼
username = driver.find_element(By.NAME, "username")
password = driver.find_element(By.NAME, "password")

username.send_keys("your_username")
password.send_keys("your_password")

# 點擊登錄按鈕
login_button = driver.find_element(By.XPATH, "http://button[@type='submit']")
login_button.click()

# 等待登錄完成
time.sleep(10)

2.2 抓取內容數據

登錄成功后,我們可以開始抓取小紅書的內容數據。以下是一個抓取用戶發布筆記的示例代碼:

from bs4 import BeautifulSoup

# 獲取用戶主頁內容
driver.get("https://www.xiaohongshu.com/user/profile/your_user_id")
time.sleep(5)

# 解析頁面內容
soup = BeautifulSoup(driver.page_source, 'html.parser')

# 查找筆記列表
notes = soup.find_all('div', class_='note-item')

# 遍歷筆記列表并提取信息
for note in notes:
title = note.find('div', class_='title').text
content = note.find('div', class_='content').text
likes = note.find('div', class_='likes').text
print(f"Title: {title}\nContent: {content}\nLikes: {likes}\n")

2.3 數據存儲

抓取到的數據可以存儲到CSV文件中,方便后續分析。以下是使用Pandas庫將數據存儲到CSV文件的示例代碼:

import pandas as pd

# 創建數據列表
data = []

for note in notes:
title = note.find('div', class_='title').text
content = note.find('div', class_='content').text
likes = note.find('div', class_='likes').text
data.append([title, content, likes])

# 創建DataFrame
df = pd.DataFrame(data, columns=['Title', 'Content', 'Likes'])

# 保存到CSV文件
df.to_csv('xiaohongshu_notes.csv', index=False)

3. 注意事項

3.1 反爬蟲機制

小紅書和其他大型平臺一樣,都有反爬蟲機制。為了避免被封禁IP或賬號,建議在抓取數據時設置合理的請求間隔時間,并使用代理IP。

3.2 數據隱私

在抓取和使用小紅書數據時,務必遵守相關法律法規,尊重用戶隱私,不得將數據用于非法用途。

4. 總結

通過本文的介紹,我們了解了如何通過模擬登錄和抓取技術獲取小紅書的內容數據,并將數據存儲到CSV文件中。雖然小紅書官方并未提供公開的API接口,但通過Selenium和BeautifulSoup等工具,我們仍然可以實現數據的抓取和分析。對于TikTok難民來說,小紅書不僅是一個新的內容發布平臺,更是一個充滿機遇的數據分析寶庫。希望本文對你在小紅書數據抓取和分析方面的學習和實踐有所幫助。

上一篇:

Java 接口文檔大模型:實現高效的多模型調用

下一篇:

如何使用問卷調查API對提升數據管理效率
#你可能也喜歡這些API文章!

我們有何不同?

API服務商零注冊

多API并行試用

數據驅動選型,提升決策效率

查看全部API→
??

熱門場景實測,選對API

#AI文本生成大模型API

對比大模型API的內容創意新穎性、情感共鳴力、商業轉化潛力

25個渠道
一鍵對比試用API 限時免費

#AI深度推理大模型API

對比大模型API的邏輯推理準確性、分析深度、可視化建議合理性

10個渠道
一鍵對比試用API 限時免費