企业级大数据平台构建
一、平台基本功能 1. 数据接入 2. 数据存储和查询，存储模型应包括关系型模型，非关系型模型，文档模型等。 3. 数据计算，包括离线批处理，实时计算，机器学习，多维分析和全文检索。 4. 平台安全与管理，解决用户管理，数据隔离，访问授权，访问控制和集群服务安全等问题。 5. 平台辅助工具，如程序开发套件，任务管理，与调度系统，自助式数据探索分析系统。 二、集群服务器的角色分类 1. 主控节点 定义：不承担具体的数据存储和计算工作，而是负责全局统筹的任务分配，资源调配或是平衡集群负载，角色包括
JAVA开源B2C系统
前言 最近有人想面向境外销售商品，但是又不想依托于亚马逊这些平台，于是找我来帮忙想弄个B2C系统。因为刚开始只是打算试试水，也就不打算投入多少成本了。所以这边就考虑使用开源的B2C系统来直接使用了。 B2C开源系统选择 由于自己的主语言是JAVA，平时工作也都是用的JAVA。考虑到以后需要对系统进行二开、部署维护等。所以一开始就直接查找JAVA 的开源系统了，并且将是JAVA语言开发的作为了第一个必要选项。结果却是证明了自己的愚蠢啊。 在这里需要说明在选择一个开源系统作为线上系统实际部署应用的
selenium抓取淘宝商品
我们知道，javascript动态渲染页面不止ajax这一种，有些网站可能整个都是由javascript渲染后生成的，还有些网站，比如淘宝，它虽然有ajax请求，但其中加入了很多复杂的参数，需要耗费大量时间才能找出规律，这时候，我们就可以用selenium，它可以直接模仿浏览器运行，并且抓取在运行时的源码，不用管ajax那些复杂的数，此次我们使用一种无界面的浏览器PhantomJS，它可以做到不用打开浏览器就可以运行，另外，需要正确安装好Selenium库。 #我们需要用到MongoDB数据库
闭包的讲解与简单实用(重新理解)
//闭包的概念就是函数嵌套函数 内部函数可以调用外部函数的参数和变量 并且变量贮存在内存中 不会被垃圾回收机制销毁 //可以手动销毁 //下面介绍闭包的介绍和简单使用 //简单写法 function outer(){
var num=0;
function inner(){
num++;
return num;
}
Win10安装docker步骤
最近使用docker部署spring boot项目，写篇文章记录下步骤。 1. 确保本机win10系统虚拟化已启动启动，否则需要去BIOS设置(方法可百度) 2. 到docker网站下载DockerToolbox.exe安装工具 安装完成后出现三个图标，红框内为执行docker命令的终端。 2.1 运行Docker Quickstart Terminal 第一次打开该终端，运行很久后，提示类似于这种的错误(网上截图，跟我的实际情况类似)。 上图表示boot2docker.iso版本过低，需要从
QMap的性能，只要超过10个元素，就被QHash彻底拉开差距
QMap vs. QHash: A small benchmark While working on my Qt developer days 2012 presentation (QtCore in depth), I made a benchmark comparing QMap and QHash. I thought it would be nice to share the results in this short blog entry. Under The Hood The Qt
mysql的学习笔记(八)
1.存储引擎(表类型) mysql将数据以不同的技术存储在文件(内存)中，这种技术称为存储引擎。每一种存储引擎使用不同的存储机制，索引技巧，锁定水平，提供广泛且不同的功能。 mysql支持的存储引擎 MyISAM
InnoDB
Memory
CSV
Archive
并发控制 当多个连接对记录进行修改时保证数据的一致性和完整性。 锁 共享锁(读锁):在同一时间段内，多个用户可以读取同一个资源，读取过程中数据不会发生任何改变。 排他锁(写锁):在任何时候只能有一个用户写入资源，当进行写
CISP-PTE学习笔记一
非常基础但很实用的技术，巩固一下。 1、google的搜索语法 intitle:parent directory 查找开放了目录遍历的网站 Site：xxx.net（目标网站）filetype:xls 查找目标网站为图方便链接至网上的图标等敏感文件 2、nmap的参数用法 nmap可以利用类似window/linux系统下的ping方式进行扫描,一般来说我们会用这个-sP这个参数去扫描内网的一个ip范围，因为它的速度较快。 如果远程主机有防火墙，IDS和IPS系统，你可以使用-PN参数可以绕
智能机器人领域有什么好书推荐的？
书籍推荐
机器人
人工智能
计算机科学
智能推荐
智能机器人领域有什么好书推荐的？
查看全部 9 个回答
段晋军
控制理论与控制工程学在读博士
19 人赞同了该回答
① Springer Handbook oƒ Robotics 2nd Edition，Siciliano Khatib
② Modelling and Identification in Ro...
SLAM 学习与开发经验分享
导语
毫无疑问，SLAM是当前最酷炫的技术.在这里，我给大家分享一些在学习SLAM的过程中的一些资料与方法（不断更新中...）
AR开发者社区：
目录
入门
基础
进阶
优秀文章
技术博客
网站与研究组织
书籍与资料
SLAM 方案
优秀案例
入门
视觉SLAM的基础知识-高翔(高翔博士)-...
ROS（12）：双足机器人开发调研
本文的原文连接是: http://blog.csdn.net/freewebsys/article/details/49474219 未经博主允许不得转载。
博主地址是：http://blog.csdn.net/freewebsys
1，关于双足机器人
研究这个比较难，之前组装了小车。感觉不过瘾，所以要选择一个比较难的。
对双足机器人兴趣比较大。
首先要讲讲robo-one，一个日本（不...
今日推荐
周排行