位置: IT常识 - 正文

游戏玩的多，陪玩你了解的多吗？用Python来采集陪玩数据，看看行情和美照(玩很多游戏的人)

编辑：rootadmin

游戏玩的多，陪玩你了解的多吗？用Python来采集陪玩数据，看看行情和美照前言

推荐整理分享游戏玩的多，陪玩你了解的多吗？用Python来采集陪玩数据，看看行情和美照(玩很多游戏的人)，希望有所帮助，仅作参考，欢迎阅读内容。

文章相关热门搜索词:多陪孩子玩游戏的好处,游戏玩的多,陪得少,玩游戏玩的好累,陪我玩游戏怎么办,游戏玩的好累,游戏玩的多,陪得少,游戏很无聊陪你玩游戏的人,游戏玩的多,陪得少,内容如对您有帮助，希望把文章链接给更多的朋友！

(｡･∀･)ﾉﾞ嗨大家好

现在应该每个人都玩过游戏吧，有些的上瘾，天天玩停不下来，有些的倒是没啥感觉

有游戏就肯定有陪玩啊，毕竟当朋友忙的时候，自己一个人玩着多没意思，所以就是说，总得找个人陪，尤其是嘿嘿，人美声甜的啊

没太多了解这个行业，今天就用python来采集采集，这行的行情怎么样，并且瞧瞧都有哪些靓仔靓妹~

数据来源分析:确定需求, 采集那个网站上面什么数据抓包分析, 通过开发者工具进行抓包分析代码实现步骤过程:发送请求, 对于刚刚分析得到url地址发送请求获取数据, 获取服务器返回响应数据解析数据, 提取我们想要数据内容,音频试音,陪玩照片, 基本陪玩数据保存数据, 保存本地文件夹涉及知识点游戏玩的多，陪玩你了解的多吗？用Python来采集陪玩数据，看看行情和美照(玩很多游戏的人)

游戏玩的多，陪玩你了解的多吗？用Python来采集陪玩数据，看看行情和美照(玩很多游戏的人)

图片数据采集 / 音频数据采集 / csv数据保存

开发环境python 3.8pycharm模块使用import os: 文件操作import re: 正则import requests: 数据请求import json:json数据转换import csv: 保存csv数据代码实现【文末名片领取】请求数据

对于分析得到url地址发送请求 headers是否添加, 看网站, 网站没什么反爬的话, 可以不用加

url = 'https://***.com/api'# 请求参数data = { 'act': 'userList', 'page': page, 'type': '1', 'sex': '2', 'voice': '1', 'order': '1',}# 发送请求response = requests.post(url=url, data=data)解析数据

提取我们想要数据内容, 音频试音, 陪玩照片, 基本陪玩数据键值对取值：返回数据字典数据类型, 字典取值根据冒号左边的内容[键],提取冒号右边的内容[值]

for index in response.json()['data']['rows']: # 基本数据获取 --> 保存表格里面 dit = { '昵称': index['nickname'], '价格': index['price'], '热度': index['exp'], # replace() 字符串替换的方法 replace('替换之前的内容', '替换之后的内容') '简介': index['summary'].replace('\n', ''), # f'{}' 字符串格式化方法 format '详情页': f'https://****.com/user/{index["uid"]}', }690643772 ### 源码领取 audio_url = 'https://****/' + json.loads(index['voice'])['url'] img_url = f'https://****'

保存数据

陪玩详情数据

import os.pathc = open('data.csv', mode='a', encoding='utf-8-sig', newline='')# c 文件对象 fieldnames 字段名csv_writer = csv.DictWriter(c, fieldnames=[ '昵称', '价格', '热度', '简介', '详情页',])# 写入表头csv_writer.writeheader()# 保存表格数据csv_writer.writerow(dit)print(dit)保存试音音频、图片数据img_content = requests.get(url=img_url).content # 图片二进制数据audio_content = requests.get(url=audio_url).content # 音频二进制数据title = index["nickname"]# 自动创建文件夹 data\\憨憨\\file = f'data\\{title}\\'# 判断如果没有文件夹if not os.path.exists(file): # 自动创建文件夹 os.makedirs(file)with open(file + title + '.jpg', mode='wb') as img: img.write(img_content)with open(file + title + '.mp3', mode='wb') as audio: audio.write(audio_content)