丝袜并非女性专属！用python采集某东丝袜数据，一起看看丝袜的起源与发展

大家好，我是才哥。

国庆长假一结束，这个冷空气就开始席卷大陆了。

全国降温进程图

最近在大街上也开始常见丝袜这一道具的出场，那么今天，我们就用python来研究研究丝袜的故事~

目录：

[toc]

1. 数据采集

参考《》，这里我们也算是取样操作，仅采集在京东销量最高的某莎品牌的某款产品的数据。由于都是均码，区别在于color，所以采集的是各color产品的大致销量分布。这部分数据采集这里不做介绍，和此前推文一致。

不过，这里我们将对评论进行采集，做简单的评价分析。

页面分析

在开发者模式，我们通过翻页找到了评论数据源地址。

找到评论数据源

某页的地址如下：https://club.jd.com/comment/productPageComments.action?callback=fetchJSON_comment98&productId=100002080143&score=0&sortType=6&page=1&pageSize=10&isShadowSku=0&rid=0&fold=1

解析如下：

url = 'https://club.jd.com/comment/productPageComments.action?'
params = {
        'callback': 'fetchJSON_comment98',
        'productId': productId,
        'score': 0,
        'sortType': 6,
        'page': page, # 变量，页码
        'pageSize': 10,
        'isShadowSku': 0,
    	'rid': 0,
        'fold': 1,
        }
复制代码

采集过程

根据对页面分析及所需数据的解析，我们可以构造获取评论信息的函数如下，得到的是某页的评论列表数据

# 获取评论信息
def get_comments(productId, page, proxies=None):
    # time.sleep(0.5)
    url = 'https://club.jd.com/comment/productPageComments.action?'
    params = {
            'callback': 'fetchJSON_comment98',
            'productId': productId,
            'score': 0,
            'sortType': 6,
            'page': page,
            'pageSize': 10,
            'isShadowSku': 0,
            'fold': 1,
            }
    # print(proxies)
    r = requests.get(url, headers=headers, params=params, 
                     # proxies=proxies, 
                     timeout=6)
    comment_data = re.findall(r'fetchJSON_comment98\((.*)\)', r.text)[0]
    comment_data = json.loads(comment_data)
    comments = comment_data['comments']
    
    return comments
复制代码

数据预览

由于请求次数过多可能触发反爬，为了尽可能采集更多数据，实际操作中我会用到代理ip的方法。

对于采集到的数据，我们做了简单的清洗处理

df = pd.DataFrame(commentsList)
df.drop_duplicates(subset='guid',inplace=True)
df = df[~(df['content']=='此用户未填写评价内容')]
df = df[['id', 'content', 'creationTime', 'score', 'plusAvailable',
       'mobileVersion', 'productColor',  'referenceTime', 'nickname']]
复制代码

数据预览

2. 统计展示

本部分我们主要看丝袜的颜色分布，购买丝袜的用户评价词云、用户属性以及丝袜市场份额

2.1. 颜色分布

由于采集到的原始数据中是按组合卖的，我们做简单的处理后拆分出每个颜色的数量，然后进行统计展示。

肤色（也就是肉色）占比最高，达到62.9%，其次是黑色占比23.3%。

原始数据大家可以后台回复 955，在 丝袜数据 文件夹领取。

import pandas as pd

df = pd.read_excel('丝袜数据.xlsx')
df['颜色'] = df.颜色.str.replace('双','').str.split('+')
df = df.explode('颜色')
df[['颜色','单件数']] = df.颜色.str.extract('(?P<颜色>.*?)(?P<单件数>\d)')
df['单件数'] = df['单件数'].astype('int')
df['数量'] = df['单件数']*df['commentCount']
colorNum = df.groupby('颜色')['数量'].sum().to_frame('数量')
colorNum
复制代码

颜色	数量
咖啡色	34334
灰色	44372
肤色	359305
黑色	133268

# 饼图绘制
import matplotlib.pyplot as plt
from matplotlib import font_manager as fm

plt.rcParams['font.sans-serif'] = ['Microsoft YaHei']
plt.rcParams['axes.unicode_minus'] = False

labels = colorNum.index
sizes = colorNum['数量']
explode = (0, 0, 0, 0.1) 

fig1, ax1 = plt.subplots(figsize=(6,5))
patches, texts, autotexts = ax1.pie(sizes, explode=explode, labels=labels, autopct='%1.1f%%',
                                    shadow=True, startangle=90)
ax1.axis('equal') 

# 重新设置字体大小
proptease = fm.FontProperties()
proptease.set_size('large')
plt.setp(autotexts, fontproperties=proptease)
plt.setp(texts, fontproperties=proptease)
ax1.set_title('【丝袜 颜色】 分布')
plt.show()
复制代码

2.2. 评价词云

词云绘制参考《》，我们直接将评论数据导入即可。后台回复 955，在丝袜数据 文件夹领取评论数据。

2.3. 用户属性

会员分布

plus会员占比高达72.7%

评论时间分布

评论时间集中在上午10-11点和晚上的8-10点。。。

labels = timeNum.index
sizes = timeNum['数量']
plt.style.use('ggplot')
x = labels
plt.figure(figsize=(10,5))
plt.title("评论时间折线图")
plt.xlabel("时间")
plt.xticks(labels)
plt.ylabel("数量")
plt.plot(x,sizes,'-',color='coral',label="评论数")

plt.legend()
plt.show()
复制代码

2.4. 丝袜市场

购买丝袜较多的主要是集中在南方的城市

来源：丝袜消费流行趋势报告

随着时尚理念的不断更迭，丝袜的款式也不再单一，年轻人也越来越追求个性化的丝袜，这在最新发布的《丝袜消费流行趋势报告》中也有所体现，越来越多的人开始购买小众款丝袜。

丝袜市场规模

截止到2019年（2020年疫情特殊不做参考），中国年产丝袜39.73亿双，位居全球第一，其中国内销量33.94亿双，市场规模五年间从175亿跃升至266.4亿，说明国人对丝袜的接受度正越来越高。

不过值得一提的是，在这266.4亿中，有3.57亿是男性丝袜，且规模比2014年翻了一倍，或许在不远的将来，男性穿丝袜将变成新的时尚。

fig, ax = plt.subplots(figsize=(10,5))

y_data = [175.5, 190.2, 203.8, 224.2, 248.9, 266.4]
x_data = ['2014年', '2015年', '2016年', '2017年', '2018年', '2019年']

# 柱状图颜色
color = 'coral'

# 柱状图
bar = plt.bar(x_data, y_data, 0.5, color=color,edgecolor='grey')

# 设置标题
ax.set_title('丝袜市场规模（单位:亿）',fontsize=14,y=1.05)
# 设置坐标轴标题
ax.set_ylabel("",fontsize = 12,color = 'black',alpha = 0.7,rotation=360)
# 设置Y轴区间
ax.set_ylim(0,300)

# 显示数据标签
for a,b in zip(x_data, y_data):
    plt.text(a,b,
             b,
             ha='center', 
             va='bottom',
            )
复制代码

3. 丝袜起源与发展

虽然现在我们在大街小巷看到穿着丝袜的基本都是女性，并且我们聊到丝袜的时候都会和女性、性感挂钩。但是，其实我们追溯丝袜的起源会发现，最早丝袜是高质量男性的必备。

大家可以回忆在中学时代欧美历史里的知名人物的插图，是不是都是穿着丝袜的！！

拿破仑

16世纪，随着工业的发展，在欧洲出现了第一台手工针织机。当时丝袜是一种相当昂贵的产品，只有在皇宫中的男性才有资格穿丝袜！对，男性！！你没有看错！！！在法国，贵族男性争抢购买一条丝袜，仿佛丝袜成为一种高贵的象征。

当然在16世纪后期，英国人发明了更为先进的针织机，质量也有进一步提升。欧洲的贵妇名媛也开始穿起丝袜，而此时的丝袜以红色、橙色、紫色为上品，看见女人们穿丝袜的模样，男人们很自觉的不穿了，而是看女人们穿，这标志女人穿丝袜的时代到来了。

法国国王路易十四

20世纪初，随着两次技术革命的重新，尼龙丝袜一度风靡全球，在欧洲尼龙丝袜一度出现脱销。

二战爆发期间，尼龙被列为军需用品，尼龙丝袜生产瘫痪，只能限量发售，战争期间有人做了调查：女人们最想要的是什么？结果三分之二选择了丝袜，而选男人的，还不到三分之一。在丝袜面前，男人一文不值。在黑市上，一双丝袜的价格，一度被炒到四千美元。没钱的女人，只能用粉饼或眉笔在腿上画出丝袜来“画饼充饥”。

战争结束，尼龙丝袜恢复生产，女人们如愿以偿，男人们也如愿以偿了。