记一次excel数据整理
背景：现有1000多条客户数据生成的pdf文件。想要将成整理出来成可自由查询导入导出的excel格式，或者更进一步导入数据库中。
做法如下：
- Pdf分割
- 利用wps工具转化word格式
- 从word中将表格数据拷贝到excel中
- *整理excel中的数据
- 将excel的数据存入txt格式
- 将txt格式导入到mysql中
- 在mysql中操作数据
pdf分割
为什么要pdf分割，因为wps转化工具限制（免费版只能一次转化5页）。干这一步的原因主要是哥没有钱。
网上pdf分割工具有很多，如http://www.ilovepdf.com/zh_cn/fencai_pdf
这个操作就不多说了。
pdf转化为doc格式
这个网上有很多工具，但是最近发现wps这个广告弹窗不少的国产软件竟然推出的“金山PDF转Word”工具还不错。大家可以用一下。
我就是使用的该工具转化成的。基本上不变型，特别是表格。但是出现好多好多隐藏的单元格。这就不得不在拷入excel进行格式处理。而格式处理是一个很繁琐的工作。
将数据从doc中拷入excel中
该步不多说了。
整理excel数据格式
技巧一 定位功能的运用
定位 空值 删除 空行
技巧二 if的运用
=if(or(d1="男",d1="女"),d1,d1&e1)这个是用在下面这个情况
| D | E | F |
|---|---|---|
| 王 | 毅 | 男 |
| 李制 | 男 | 环科院 |
| 张红 | 女 | XX公司 |
| 钱 | 悦 | 女 |
这可以新建一列，在新建一列中输入判断语句就可以将一些单元格数据合并了。
技巧三 复制值
excel中，可以复制公式后，会引用原公式产生的值，可以选择式粘贴为值。
技巧四 存为txt格式
为了导入mysql中，可以将单张表存为txt格式
存储格式如下
1 张X 男 巡视员 住建部
2 徐X 男 董事长 XX设计研究总院
3 吴XX 男 副院长 XXX设计研究总院
4 张X 男 副院长 XXX设计研究总院
5 李XX 男 总工程师 XXX股份有限公司 中间空格实为’\t’
导入mysql
按excel中字段顺序建好mysql表格。
然后使用如下命令导入
use antdz_oa;/*使用antdz_oa数据库*/
load data local infile 'D:\data.txt' into table oa_customer fields terminated by '\t';| 835 | 丁彩娟 | 女 | 副编审 | 《中国给水排水》杂志社 | 022-27835913 |
| 836 | 彭秀华 | 女 | 编辑 | 《中国给水排水》杂志社 | 022-27835707 |
| 837 | 刘贵春 | 女 | 编辑 | 《中国给水排水》杂志社 | 022-27832819 |
| 838 | 金晟 | 男 | 会计 | 《中国给水排水》杂志社 | 022-27836823 |
| 839 | 孙磊 | 男 | 广告部 | 《中国给水排水》杂志社 | 022-27835592 |
优化数据库
上面的那个表格中单位重复太多，我想在mysql中建一个单位表用于储备单位
先建一个单位表（oa_unit）
| id | title |
|---|---|
| int(8) | varchar(100) |
mysql命令，将oa_customer中的单位写入oa_unit中
insert into oa_unit(title) select distinct unit from oa_customer;写入oa_unit表后，再把oa_unit的单位的id对于单位名称写入oa_customer中。
update oa_customer,oa_unit set oa_customer.unit_id = oa_unit.id where oa_customer.unit = oa_unit.title;