-
hadoop-mapreduce分析
-
把整个Hadoop看作是容器,那么Mapper和Reduce就是容器里的组件,*Context保存了组件的一些配置信息,同时也是和容器通信的...
-
ubuntu 安装hadoop 伪分布模式
-
1/首先在官网下载hadoop文件,hadoop-0.23.6.tar.gz 2/系统下要安装jdk 我的系统jdk安装在:JAVA_HOME=/usr/lib/jvm/java-6-oracle 3/解压hadoop-0.23.6.tar.gz文件:...
-
长平狐 [Hadoop] Sqoop安装过程详解
-
Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。 Sqoop官方版本:http://apache.dataguru.cn/sqoop/1.4.2/ Sqoop CDH版本:...
-
hive-mysql的关系(Hive集成Mysql作为元数据)
-
Hive是一个基于Hadoop的数据仓库平台。通过hive,我们可以方便地进行ETL的工作。hive定义了一个类似于SQL的查询语言:HQL,能 够将用户编写的QL转化为相应的Mapreduce程序基于Hadoop执行。 Hive是Facebook...
-
hive中show table Specified key was too long
-
当在hive中show table 时如果报以下错时 FAILED: Error in metadata: javax.jdo.JDODataStoreException: Error(s) were found while auto-creating/validating the datastore for classes. T...
-
hadoop-streaming 例子
-
Hadoop Streaming是Hadoop提供的一个编程工具,它允许用户使用任何可执行文件或者脚本文件作为Mapper和Reducer,例如:
采用shell脚本语言中的一些命令作为mapper和reducer(cat作为mapper,wc作为reducer)...
-
ssh 无密码登陆
-
一、单向无密码访问 单向无密码访问远程服务器操作比较简单,比如服务器A需要无密码访问服务器B(A–>B),那么只需要在服务器A生成密钥对,将生成的公钥上传到服务器B的相关用户目录下的.ssh目录中(没有的话手动创建,注意,它的目录权限是700),并将公钥文件名称改为authorized_keys(注意,这个文件的权限应该是644),请注意.ssh目录及author...
-
hadoop-双色球-统计
-
1/使用hadoop把双色球相邻的红球进行统计: 测试数据在:http://pan.baidu.com/s/1hq82YrU import java.io.IOException; import java.text.DateFormat; i...
-
基于Eclipse的Hadoop应用开发环境配置
-
基于Eclipse的Hadoop应用开发环境配置 我的开发环境: 操作系统centos5.5 一个namenode 两个data...
-
Hadoop Namenode不能启动 dfs/name is in an inconsistent
-
前段时间自己的本机上搭的Hadoop环境(按文档的伪分布式),第一天还一切正常,后来发现每次重新开机以后都不能正常启动,在start-dfs.sh之后jps一下发现namenode不能正常启动,按提示找到logs目录下namenode的启动...
-
C++ call of overloaded
-
nt recv(char *pMsg, int len, int timeout = OSS_SOCKET_DFT_TIMEOUT, int flags = 0 );...
-
debain安装chromium-browser
-
1/安装chromium sudo apt-get install chromium-browser 2/安装flash sudo apt-get install flashplugin-nonfree sudo cp /usr/lib/flashplugin...
-
debain安装phpmyadmin
-
1、安装phpmyadmin sudo apt-get install phpmyadmin 2 安装的过程中提示选择web server: 可以选择apach2或lighttpd,我选择了apache2,就直接进行了安装 3 浏览器中输入:...
-
debain安装GMysqlCC
-
GMysqlCC is a GUI client for MySQL databases. apt-get install GMysqlCC
-
debian 6 上安装 fcitx-4.x
-
# vim /etc/apt/sources.list deb http://ftp.cn.debian.org/debian squeeze main non-free contrib deb ht
-
Linux/Ubuntu 怎么设置打开远程桌面登录连接
-
Linux(Ubuntu) 下做一些设置在windows中就可以打开远程桌面登录Ubuntu,或者在本地Ubuntu远程登录windows或者Ubuntu远程登录别的Ubuntu桌面,小编就分享如何做这些设置。 由于工作等的需要现在很多人都需要使用Linux系统和windows系统,Ubuntu是比较流行的一...
-
debain 给用户添加sudo权限
-
Debain给用户添加sudo权限: Debain下面运行sudo命令,会提示类似: xxxis not in the sudoers file. This incident will be reported. ...
-
gedit 显示行号
-
打开gedit文本编辑器->Edit(编辑)->preferences(预设)->view(视...
-
debain svn切换帐号
-
在eclipse中经常用到用svn进行代码版本控制,为了提交或更新代码的时候不反复地提示我们输入用户名和密码,于是我们 就习惯把访问SVN的用户名密码自动保存起来。以便下次自动使用,不要再次手工输入,但是有些时候需要变更密码或者用户名, 就有些麻烦了,下面是二种解决办法: 1、通过删除SVN客户端的账号...
-
debain 安装amd显卡驱动
-
1、http://support.amd.com/ 选择相应的显卡型号然后下载 2、进行解压amd-driver-installer-catalyst-13-4-li