Hadoop之小文件处理与调优经验
HDFS小文件弊端： HDFS上每个文件都要在namenode上建立一个索引，这个索引的大小约为150byte，这样当小文件比较多的时候，就会产生很多的索引文件，一方面会大量占用namenode的内存空间，另一方面就是索引文件过大是的索引速度变慢。 解决的方式： 1：Hadoop本身提供了一些文件压缩的方案 2：从系统层面改变现有HDFS存在的问题，其实主要还是小文件的合并，然后建立比较快速的索引。 Hadoop自带小文件解决方案 1：Hadoop Archive: 是一个高效地将小文件放入H
div 在css中透明度怎么调？
可以用这个属性： opacity: 0.95; opacity为属性， 0.95为值（其中值的范围在0~1之间） 参考：https://zhidao.baidu.com/question/689118188590925404.html
English trip -- VC(情景课)2 A At school
Get ready 预备课 Talk about the picture 看图说话 Look at the picture. What do you see? 看图片。你看到了什么？ Listen and point 。支出你听到的内容 a book a chair a computer a desk a notebook a pencil words extend 扩展单词 whiteboard 白板 blackboard 黑板 homework 家庭作业 hosework 家务 arm 肩
JS正则表达式从入门到入土（5）—— 量词
量词 很多时候，我们需要匹配一个连续出现很多次字符的字符串，比如，我们要匹配一个连续出现20次的数字的字符串，按照之前的写法： \d\d\d\d\d\d\d\d\d\d\d\d\d\d\d\d\d\d\d\d 是不是感觉快疯了？很庆幸，使用正则提供的量词，我们就可以快速解决这个问题。 量词的使用方法如下： 字符 含义 ? 出现零次或一次（最多出现一次） + 出现一次或多次（至少出现一次） * 出现零次或多次（任意次） {n} 出现n次 {n,m} 出现n到m次 {n,} 至少出现n次 那么该如
封装动态数组类Array
功能： 1.增、删、改、查 2.扩容、缩容 3.复杂度分析 4.均摊复杂度 5.复杂度震荡 分析动态数组的时间复杂度： 分析resize的时间复杂度： public class Array<E> {
private E[] data;
private int size;
// 构造函数，传入数组的容量capacity构造Array
public Array(int capacity){
data = (E[])new Object[capac
PTA练习题---树的同构
问题描述：给定两棵树T1和T2。如果T1可以通过若干次左右孩子互换就变成T2，则我们称两棵树是“同构”的。例如图1给出的两棵树就是同构的，因为我们把其中一棵树的结点A、B、G的左右孩子互换后，就得到另外一棵树。而图2就不是同构的。图1图2现给定两棵树，请你判断它们是否是同构的。输入格式:输入给出2棵二叉树树的信息。对于每棵树，首先在一行中给出一个非负整数N (≤10)，即该树的结点数（此时假设结点...
机器学习实战---k近邻算法
kNN算法具体描述可以参见李航的《统计学习方法》kNN算法的伪码过程如下：（1）计算已知类别数据集中的点与当前点之间的距离；（2）按照距离递增次序排序；（3）选取与当前点距离最小的k个点；（4）确定前k个点所在类别的出现频率；（5）返回前k个点出现频率最高的类别作为当前点的预测分类；kNN代码详解如下：def classify0(inX, dataSet, labels, k): dataS...
机器学习实战---使用Matplotlib注解绘制树形图
&gt;&gt;&gt; help(pyplot.annotate)Help on function annotate in module matplotlib.pyplot:annotate(*args, **kwargs) call signature:: annotate(s, xy, xytext=None, xycoords='data', t...
python selenium系列（三）常用操作类型及方法
一 前言开展WEB UI自动化的核心思路，无非就是找到元素，然后操作元素这两个内容。在python selenium系列（二）元素定位方式一文中，已经介绍了如何找到元素这项技能，本文将介绍第二项内容，即如何操作已经找到的元素。 二 操作方法分类总体来说，可以将操作大体分成四类，即浏览器操作、键盘操作、鼠标操作、js脚本。1. 浏览器常用操作方法：方法描述driver.maxi
机器学习实战---朴素贝叶斯分类方法
from numpy import *
def loadDataSet():
postingList=[['my', 'dog', 'has', 'flea', 'problems', 'help', 'please'],
['maybe', 'not', 'take', 'him', 'to', 'dog', 'park', 'stupid'],
...
机器学习实战---Logistic回归
from numpy import *
def loadDataSet(): #讲文本中的数据解析成矩阵
dataMat=[];labelMat=[]
fr=open('testSet.txt')
for line in fr.readlines():
lineArr = line.strip().split() #每个数据变成单个的字符串，存放在lineArr列表里
dataMa...
机器学习实战--AdaBoost集成学习方法
from numpy import *
def loadSimpData():
datMat = matrix([[ 1. , 2.1],
[ 2. , 1.1],
[ 1.3, 1. ],
[ 1. , 1. ],
[ 2. , 1. ]])
classLabels = [1.0, 1.0, -1.0, ...
洛谷 1025 noip2001 数的划分
题目：数的划分思路：令f[i][j]为把第i个数分成k份的方案数。f[i][j]=f[i-1][j-1]+f[i-j][j]即没有一个数为1的方案数加上有至少一个数为1的方案数。代码：dp：#include&lt;bits/stdc++.h&gt;
using namespace std;
#define maxn 200
#define maxm 6
int n,m;
int f[maxn+...
洛谷 1498 南蛮图腾
题目：南蛮图腾思路：分治。以一个三角形为基本型，每次复制一遍。注意 '\\'==\代码：#include&lt;bits/stdc++.h&gt;
using namespace std;
#define maxm 2000
string str[maxm];
void f(int x) {
int len=(x&lt;&lt;1);
for (int i=x; i&lt;len; i+...
洛谷 1226 取余运算||快速幂 （快速幂模板）
题目：取余运算||快速幂思路：快速幂模板注意n^0的情况。代码：#include&lt;bits/stdc++.h&gt;
using namespace std;
long long a,b,k;
long long ans=1;
int main() {
scanf("%lld%lld%lld",&amp;a,&amp;b,&amp;k);
printf("%d^%d mod %d=...
洛谷 1290 欧几里德的游戏
题目：欧几里德的游戏思路：不妨设两数A&gt;=B（如果不是手动swap）。假如A&lt;2B，这一轮时只可能有一种选择方案，就是A'=A-B，且此时A'一定小于B而当A&gt;=2B时，有多种选择方案，那么此时选择的人就可以每次都把另一个人的选择限制在一个自己能赢的状态中。所以，当A&lt;2B时，就模拟这个过程，只要出现了A&gt;=2B的情况，那么此时选择的人就一定会赢。代码：#includ...
今日推荐
周排行