MapReduce的编程方法与实践MapReduce框架 MapReduce将复杂的，运行大规模集群上的并行计算过程高度地抽象两个函数：Map和Reduce MapReduce采用“分而治之”策略，将一个分布式文件系统中的大规模数据集，分成许多独立的分片。这些分片可以被多个Map任务并行处理。 MapReduce设计的一个理念就是“计算向数据靠拢”，而不是“数据向计算靠拢”，原因是，移动数据需要大量的网络传输开销 MapReduce框架采用了Master/Slave架构，包括一个Master和若干个Slave，Master上运行JobTracker，Slave运行TaskTracker ...
hdfs使用方法
HDFS使用方法一、使用命令操作HDFS查看文件、发送文件hadoop fs -ls / 查看hdfs根目录文件 hadoop fs -put ./test/file1 / 将test目录下的file1发送到hdfs根目录 创建目录hadoop fs -mkdir -p /test/user/ -p为递归创建，可以创建多级目录 下载文件、删除文件hadoop fs -get sourcepath savepath 将hdfs test 文件夹下的user文件夹 下载到本地的test文件夹下 hadoop fs -rm -r /test/user/del 删除 tes ...
Hadoop安装配置
Hadoop平台安装与配置一、创建三台虚拟机1、 为创建好的虚拟机配置网络使用命令 vi /etc/sysconfig/network-scripts/ifcfg-eth0 重启服务，并验证配置好的网络 2、 使用模板创建另外两台虚拟机使用实验一中创建的CentOS 6虚拟机，并使用OVF模板创建另外两台虚拟机 二、配置网络1、 生成MAC地址由于直接使用OVF模板创建了虚拟机，所以需要为两台模板虚拟机生成MAC地址 2、 修改MAC地址使用命令 vi /etc/sysconfig/network-scripts/ifcfg-eth0 删除旧网卡规则映射 使用命令 rm /etc/u ...
Next主题baidu验证
baidu验证验证未收录百度搜索 site:yourgithub.github.io , 验证未收录 百度搜索平台进入百度搜索平台，点击链接提交，填写github地址 记录content值验证站点，选择html标签验证，记录content值 添加代码在themes/next下的配置文件最后添加代码 baidu_site_verification: 5xxxxxxQ 重新生成提交，无需修改head文件 刷新github页面，查看网站源代码，当可以找到正确的验证标签时，进行验证。 验证通过 等待通过，通过后进行推送 推送主动推送最为快速的提交方式，推荐您将站点当天新产出链接立即通过此方式推 ...
Hello World
Welcome to Hexo! This is your very first post. Check documentation for more info. If you get any problems when using Hexo, you can find the answer in troubleshooting or you can ask me on GitHub. Quick StartCreate a new post$ hexo new "My New Post" More info: Writing Run server$ hexo server More info ...
汽车牌照提取
问题分析车牌特点样例车牌可以分为两类： （1） 小功率汽车使用的蓝底白字牌照； （2） 国外驻华机构使用黑底白字牌照 这些牌照的长度均为45cm，宽为15cm，共有字符7个。一般民用牌照第一个字符为汉字，且是各省市的简称；第二个字符为大写英文字母，如“E”；第三个字符是英文字母或阿拉伯数字，第四至第七个字符为阿拉伯数字。 实验流程实验流程包括：车牌定位、倾斜校正、字符分割、字符识别4个部分 (1) 原始图像：样例中所给的汽车图像； (2) 图像预处理：对原始图像进行二值化等预处理操作； (3) 车牌定位：定位出汽车牌照所在的矩形范围 ...
数据库范式
规范化过程 过程 影响 1NF ——-> 2NF 消除非主属性对码的部分函数依赖 2NF ——-> 3NF 消除非主属性对码的传递函数依赖 3NF ——-> BCNF 消除主属性对码的部分、传递函数依赖 BCNF——> 4NF 消除非平凡且非函数以来的多值依赖 4NF ——-> 5NF 消除连接依赖 范式1NF定义符合1NF的关系中的每个属性都不可再分 不满足1NF 特点1NF是所有关系型数据库的最基本要求，在关系型数据库管理系统（RDBMS），例如SQL Server，Oracle，MySQL中创建数据表的时候，如果数据表 ...
语言SUM到栈式计算机STACK的机器语言的翻译
实验内容sum.c是用c语言写的从sum语言到栈式计算机STACK的机器语言的编译器（省略了词法语法分析部分）。该程序的基本功能是先构造SUM语言的某句子的抽象语法树，然后将该语法树翻译成STACK的机器语言程序，并按顺序打印出该机器语言程序的指令。程序中有两段内容不完整（在程序中用TODO表示），请读懂并编译通过该程序，再将TODO的部分补充完整，并编译通过。 读懂程序sum.c并编译通过。（该程序可以使用gcc编译通过，其他编译环境请自行调试） 用你自己写的程序段替换程序中的TODO部分，使程序功能与实验内容的描述一致。 （此要求为额外要求，供学有余力的同学自行选择。）将程序的输入 ...
验证Yacc的使用
实验内容 输入为一个布尔表达式，以换行结束。输出为这个布尔表达式的真值（true或false）。 尝试二义文法和非二义文法两种不同的实现方式。布尔表达式二义文法为：S –> S or S | S and S | not S | (S) | true | false，其中优先级or < and < not，or 和 and 左结合，not 右结合。 非二义文法请参照表达式非二义文法自己写出来。 实验过程cal.l%{#include "cal.tab.h"int yywrap(void){ return 1;}%}delim ...
用Lex设计词法分析器
实验内容Exp2使用lex为下述文法语言写一个词法分析器。 <程序> -> PROGRAM <标识符> ; <分程序><分程序> -> <变量说明> BEGIN <语句表> END.<变量说明> -> VAR <变量说明表>;<变量说明表> -><变量表>: <类型> | <变量表>: <类型>; <变量说明表><类型>- > INTEGER | REAL<变量表> -> ...