大数据的处理方案

群发邮件实现思路（异步调用，消息队列处理模型）
1、整理邮件所需相应的参数
2、调用发邮件接口，传输邮件参数信息msg
3、邮件接口收到msg，将msg存入任务消息队列，并立刻返回响应成功码（仅仅表示连接成功，不代表发送成功）
4、发邮件定时任务执行，监听到符合条件的msg，开始执行发邮件

大量插入数据，获取数据
往数据库中插入大量数据，会开启事务，当插入完毕后，才会commit。这时候的数据是存储在内存中，这对内存的占用率很高，不利用性能。所以就需要批量插入。