提取tsv数据并转化成json——致找不出怎么提取tsv文件中数据的五小时

这里使用的python3.6,pycharm2017profession(不知道其他版本是否适合)
接下来进入正题:

  1. 导入tsv、re、json库

首先,由于python3.6没有tsv库,所以使用命令行窗口,输入pip install tsv,安装tsv库,接着在pycharm中输入(re、json库同理如上)

import tsv
import re
import json

这样第一步的导入tsv、re、json库就成功了

  1. 对tsv数据进行处理
with open('hair_dryer.tsv','r',encoding='UTF-8') as fp: #这里的'hair_dryer.tsv'是你的tsv文件,记得跟这个文件放在同一文件夹哦!
    reader = tsv.TsvReader(fp) #对tsv进行读取
    list_Data = [] #建立一个列表,等下可以使用apppend()函数,对for循环中的数据进行承接
    for x in reader: #对每一行的数据进行处理 这个x是 map()类型
        data = list(x) #将map类型变成list类型
        need_data = data[-2] #这里的-2是列表的倒数第二个数据,你看你的需要,因为本文主要是提取数据中的文本,文本恰好位于倒数第二个
        deal_need_data = re.sub("<.+?>|[^a-zA-Z0-9' .,]","",need_data).strip() #去除标签内的内容,这里因为内容是英文的所以保留是英文、数字、和一些常用的符号
        list_Data.append(deal_need_data) #对数据进行承接,得到一个所需要的那一列数据的列表
    print(list_Data)
  1. 转化成json
with open('data.json','w',encoding='utf-8') as fp: #这里使用的是将数据转化成json,对文件进行命名‘data.json’,或者其他
    json.dump(list_Data,fp) #使用json.dump()函数,第一个参数是列表数据,第二个参数似乎是指针指向fp(即'data.json')

猜你喜欢

转载自blog.csdn.net/aec153/article/details/105175228