学习Hadoop的资料

1)Cygwin相关资料

  (1)Cygwin上安装、启动ssh服务失败、ssh localhost失败的解决方案

  地址:http://blog.163.com/pwcrab/blog/static/16990382220107267443810/

  (2)windows2003+cygwin+ssh

  地址:http://wenku.baidu.com/view/3777b8bc960590c69ec3765e.html

  (3)Cygwin 安裝和SSH設定教學

  地址:http://blog.faq-book.com/?p=2731

  (4)如何在Cygwin中安装并配置SSH

  地址:http://blog.csdn.net/souichiro/article/details/6284172

  (5)Cygwin ssh 故障总结

  地址:http://blog.sina.com.cn/s/blog_4abbf0ae0100r8gv.html

  (6)通用线程: OpenSSH 密钥管理

  地址:http://www.ibm.com/developerworks/cn/linux/security/openssh/part1/index.html

  (7)SSH无密码登陆问题解决

  地址:http://my.oschina.net/hunzi/blog/10687

  (8)cygwin home路径问题

  地址:http://zhuang0393.blog.163.com/blog/static/928510420091113111854627/

  (9)cygwin完全安装步骤方法

  地址:http://hi.baidu.com/www100/blog/item/e985c717e656b601c93d6d10.html

  (10)windows和cygwin下hadoop安装配置

  地址:http://www.zihou.me/html/2010/02/19/1525.html

2)Cygwin软件资源

  (1)Cygwin-Easy-2007光盘运行版和Cygwin-Release-2006光盘安装版

  地址:http://www.verycd.com/topics/2885338/

  (2)Cygwin完全版v2.738_20111105

  地址:http://www.verycd.com/topics/2908689/

3)hadoop eclipse plugin相关资料

  (1)各版本编译hadoop eclipse plugin

  地址:http://www.gemini5201314.net/hadoop/%E5%90%84%E7%89%88%E6%9C%AC%E7%BC%96%E8%AF%91hadoop-eclipse-plugin.html

  (2)hadoop-eclipse-plugin下载

  地址:http://code.google.com/p/hadoop-eclipse-plugin/downloads/list

7)SecureCRT使用

  (1)Linux 下 SSH 配合 SecureCRT 的密匙完美使用方法

  地址:http://linkboy.blog.51cto.com/821152/297512

  (2)SecureCRT使用证书管理linux

  地址:http://wenku.baidu.com/view/e116ba33a32d7375a4178039.html

  (3)SecureCRT密钥远程登录Linux

  地址:http://edges.blog.51cto.com/705035/581346

  (4)Linux新建SSH登陆用户以及Putty和SecureCRT设置

  地址:http://hi.baidu.com/luosiyong/blog/item/e5e1980fb7ddfef3ab6457f7.html

8)Hadoop集群安装

  (1)Ubuntu11.10下安装Hadoop1.0.0(单机伪分布式)

  地址:http://my.oschina.net/se77en/blog/38804

  (2)hadoop1.0.0 安装记录

  地址:http://blog.csdn.net/ylqmf/article/details/7250235

  (3)Hadoop 集群安装详细步骤

  地址:http://www.yanjiuyanjiu.com/2012/01/03/hadoop-cluster-setup/

9)Linux下安装JDK

  (1)在LINUX下安装JDK1.6
  地址:http://wenku.baidu.com/view/cf91f9d2240c844769eaeef3.html

  (2)Linux AS 安装 JDK 1.6

  地址:http://www.iteye.com/topic/421608

  (3)linux安装JDK

  地址:http://wenku.baidu.com/view/efe0c100cc17552707220821.html

10)CentOS修改主机名

  (1)CentOS修改主机名

  地址:http://now-code.com/archives/233

  (2)CentOS(RedHat)命令行修改主机名(主机别名)

  地址:http://www.slyar.com/blog/centos-linux-hostname.html

  (3)CENTOS修改主机名

  地址:http://blog.csdn.net/forest_boy/article/details/5636696

11)Hadoop常见问题集

  (1)Hadoop使用常见问题以及解决方法

  地址:http://wenku.baidu.com/view/3b13d527a5e9856a56126029.html

  (2)No route to host问题的解决

  地址:http://blog.csdn.net/shirdrn/article/details/7280040

  (3)hadoop常见错误及处理方法

  地址:http://samwalt.iteye.com/blog/1099348

  (4)Hadoop中常出现的错误以及解决方法

  地址:http://blog.sina.com.cn/s/blog_759444350100t2r5.html

  (5)安装出现的几种异常的处理方法

  地址:http://hi.baidu.com/xixitie/blog/item/a32f6913cacefb145aaf53dd.html

12)经典示例WordCount

  (1)Hadoop上运行WordCount以及本地调试、

  地址:http://www.beoop.com/archives/244.html

  (2)命令行运行hadoop实例wordcount程序

  地址:http://blog.csdn.net/xw13106209/article/details/6862480

  (3)Hadoop示例程序WordCount运行及详解

  地址:http://samuschen.iteye.com/blog/763940

  (4)Hadoop的安装与配置及示例wordcount的运行

  地址:http://wenku.baidu.com/view/41eac9d850e2524de5187ef3.html

13)MapReduce相关资料

  (1)mapreduce 新旧API 区别

  地址:http://blog.csdn.net/xw13106209/article/details/6924458

14)基于Eclipse的Hadoop应用开发

  (1)基于Eclipse的Hadoop应用开发环境配置

  地址:http://www.cnblogs.com/flyoung2008/archive/2011/12/09/2281400.html

  (2) eclipse hadoop开发环境配置

  地址:http://blog.csdn.net/cybercode/article/details/7084603

  (3)Eclipse运行hadoop(解决错误)

  地址:http://sunjun041640.blog.163.com/blog/static/25626832201061751825292/

  (4)Permission denied

  地址:http://www.cnblogs.com/acmy/archive/2011/10/28/2227901.html

  (5)hadoop-eclipse开发环境搭建及error: failure to login错误

  地址:http://blog.csdn.net/chengfei112233/article/details/7252404

  (6)hadoop mapred(hive)执行目录 文件权限问题

  地址:http://blog.csdn.net/azhao_dn/article/details/6921398

  (7)cannot submit job from Eclipse plugin running on Windows

  地址:https://issues.apache.org/jira/browse/HADOOP-8089

  (8)Hadoop初学者可能会遇到的问题

  地址:http://bbs.hadoopor.com/thread-3967-1-1.html

15)CentOS下装MySQL

  (1)Linux系统上安装MySQL 5.5prm

  地址:http://www.cnblogs.com/sunson/articles/2172086.html

  (2)linux下mysql(rpm)安装使用手册

  地址:http://www.cnblogs.com/sunwei2012/archive/2011/02/16/1956547.html

  (3)Linux下如何更改Mysql默认的数据文件目录

  地址:http://hi.baidu.com/braveboyx/blog/item/38a169f2ea0237d57831aa5f.html(重点)

  (4)设置MySql5.5数据库的字符编码为UTF8,解决中文乱码问题

  地址:http://kimho.iteye.com/blog/1141608

  (5)ubuntu_Linux下建设FTP服务器(完整)

  地址:http://blog.csdn.net/xuchenguang/article/details/677301

16)Java中处理带BOM的UTF-8信息

  (1)Java读带有BOM的UTF-8文件乱码原因及解决方法

  地址:http://daimojingdeyu.iteye.com/blog/397661

  (2)Java解决UTF-8 BOM问题

  地址:http://blog.csdn.net/dream_it_life/article/details/6045140

  (3)UTF8格式中的BOM问题

  地址:http://yuaqian2003.iteye.com/blog/1335730

17)MapReduce与MySQL交互

  (1)hadoop与mysql数据库相连读出数据

  地址:http://blog.csdn.net/qwertyu8656/article/details/6426054

  (2)Hadoop中DBInputFormat和DBOutputFormat使用

  地址:http://blog.csdn.net/dajuezhao/article/details/5799371

18)HBase相关资料

  (1)Hadoop0.20.203.0+Hbase0.90.4完全分布式配置

  地址:http://www.cnblogs.com/flyoung2008/archive/2011/12/02/2272761.html

  (2)Hbase安装配置(含分布式ZooKeeper)

  地址:http://linuxjcq.blog.51cto.com/3042600/760634

  (3)HBase分布式模式的安装、配置和使用

  地址:http://www.mcncc.com/thread-80401-1-1.html

  (4)HBase技术介绍

  地址:http://www.searchtb.com/2011/01/understanding-hbase.html

  (5)HBase入门笔记(四)--完全分布式HBase集群安装配置

  地址:http://www.cnblogs.com/ventlam/archive/2011/01/22/HBaseCluster.html

  (6)hbase 无法启动问题 时间设置

  地址:http://taoo.iteye.com/blog/1266576

  (7)hbase 结点之间时间不一致造成regionserver启动失败

  地址:http://www.gather-data.info/blog/?p=2454

  (8)eclipse写MAPREDUCE程序对HBase表进行操作之 IndexBuilder(对已有表建索引)

  地址:http://blog.csdn.net/liuxingjiaofu/article/details/7188375

  (9)基于Java的HBase客户端编程

  地址:http://tech.it168.com/a2011/0815/1232/000001232755_2.shtml

  (10)HBase client API Guide

  地址:http://www.spnguru.com/2010/07/hbase-client-api-guide/

19)HBase的性能优化

  (1)HBase入门篇3-hbase 配置文件参数设置及优化

  地址:http://blog.csdn.net/a221133/article/details/6777433

  (2)HBase性能优化方法总结

  地址:http://www.cnblogs.com/panfeng412/tag/%E6%80%A7%E8%83%BD%E4%BC%98%E5%8C%96/

  (3)HBase性能调优

  地址:http://kenwublog.com/hbase-performance-tuning

  (4)HBase 在淘宝的应用和优化小结

  地址:http://www.oschina.net/question/195301_41176

  (5)HBase性能深度分析

  地址:http://www.blogjava.net/ivanwan/archive/2011/06/10/352071.html

  (6)提升HBase性能的几个地方

  地址:http://www.itokit.com/2011/0516/66217.html

20)Hive安装及简介

  (1)hive安装过程

  地址:http://blog.csdn.net/gudaoqianfu/article/details/7319287

  (2)Hive安装及问题解决

  地址:http://blog.csdn.net/lengzijian/article/details/7042280

  (3)hive 配置

  地址:http://blog.csdn.net/wf1982/article/details/6641827

  (4)hive的Specified key was too long; max key length is 767 bytes问题解决

  地址:http://blog.csdn.net/lengzijian/article/details/7045538

  (5)hive元数据存储在mysql 字符集utf8 修改

  地址:http://blog.csdn.net/tylgoodluck/article/details/7009952

  (6)配置hadoop HIVE元数据保存在mysql中

  地址:http://space.itpub.net/?uid-22418990-action-viewspace-itemid-718885

  (7)Hive 结构

  地址:http://www.tbdata.org/archives/499

  (8)HIVE RCFile高效存储结构

  地址:http://blog.csdn.net/wh62592855/article/details/6409680

  (9)Hive安装配置详细

  地址:http://yymmiinngg.iteye.com/blog/708230

21)Hive的应用开发

  (1)通过JDBC驱动连接Hive操作实例

  地址:http://blog.csdn.net/kunshan_shenbin/article/details/7214491

  (2)java 通过jdbc驱动连接hive操作实例

  地址:http://blog.csdn.net/a221133/article/details/6734762

  (3)Hive的JDBC连接

  地址:http://cloud.csdn.net/a/20101128/282618.html

  (4)基于Hive的日志数据统计实战

  地址:http://cloud.csdn.net/a/20101128/282620.html

  (5)HiveClient

  地址:https://cwiki.apache.org/confluence/display/Hive/HiveClient

22)HBase、Hive与RDBMS关系

  (1)Hive与数据库的异同

  地址:http://cloud.csdn.net/a/20101128/282617.html

  (2)Hive HBase 整合

  地址:http://running.iteye.com/blog/898399

  (3)hive与hbase
  地址:http://hi.baidu.com/wuhanjzl/blog/item/3d3c4412d85dd7e8c2ce7978.html

  (4)Hive与Hbase的区别

  地址:http://hi.baidu.com/gcpopo/blog/item/fe8c25add0efe6d07dd92a68.html

  (5)Hive和HBase整合

  地址:http://hotdog.iteye.com/blog/1203488

  (6)Hive HBase整合使用

  地址:http://datalife.iteye.com/blog/910300

  (7)Hadoop Hive与Hbase整合

  地址:http://blog.csdn.net/hguisu/article/details/7282050

  (8)伪分布式环境下,Hive0.8.1与HBase0.92.0集成的配置说明 (good)

  地址:http://blog.csdn.net/fullofwindandsnow/article/details/7331403

  (9)Hbase 与RDBMS的区别

  地址:http://qa.taobao.com/?p=11852

  (10)Hive HBase Integration

  地址:https://cwiki.apache.org/confluence/display/Hive/HBaseIntegration

时间: 12-22

学习Hadoop的资料的相关文章

零基础学习 Hadoop 如何下手

想学习hadoop,可是苦于自己没有任何的基础,不知道该如何下手,也不知道自己能不能学会.其实零基础学习hadoop,没有想象的那么困难.曾经我也是一位小白,刚接触到云计算,想过培训,但是培训机构的选择也让我很纠结,就自己开始去摸索学习,现在我把自己的学习思路整理一下,希望对大家有帮助. 首先整体说一下学习过程给大家借鉴: 一.了解hadoop: 这里不具体阐述概念,有兴趣的同学可以自己上网去查.我们知道hadoop,有单机安装,伪分布安装和分布安装.同时hadoop的环境是Linux,所以我们

什么是Hadoop,怎样学习Hadoop

Hadoop是一个由Apache基金会所开发的分布式系统基础架构.用户可以在不了解分布式底层细节的情况下,开发分布式程序.充分利用集群的威力进行高速运算和存储. Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS.HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上:而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序.HD

学习Hadoop生态系统最值得一读的书籍

学习大数据的处理,有必要读一下有关大数据的书籍.这里,我列举了几本书,仅供参考. 1 ZooKeeper: Distributed Process Coordination 这本书针对的是初级或者高级的开发,面向Zookeeper编程的工程师们.如果你的工程中(如HBase)涉及到Zookeeper的应用,有必要了解一下Zookeeper的管理知识和一些基本解决Zookeeper问题的能力.这本书里,鼓励读者查阅Zookeeper的源码,并给予有价值的反馈. 2 Apache Sqoop Coo

学习Hadoop不错的系列文章

1)Hadoop学习总结 (1)HDFS简介 (2)HDFS读写过程解析 (3)Map-Reduce入门 (4)Map-Reduce的过程解析 (5)Hadoop的运行痕迹 (6)Apache Hadoop 版本 2)Hadoop-0.20.0源代码分析 (1)Hadoop-0.20.0源代码分析(01) 地址:http://blog.csdn.net/shirdrn/article/details/4569702 (2)Hadoop-0.20.0源代码分析(02) 地址:http://blog

学习hadoop常去的网站

学习hadoop常去网址: hadoop邮件列表信息查询http://www.search-hadoop.com简介:hadoop邮件列表都是hadoop用户和开发者的提问和讨论的邮件列表,里面大量问题,和解决方案,可以帮助自己解决工作中遇到的大量问题. hadoop in china http://www.hadooper.cn/dct/page/65750简介:由中国科学院计算技术研究所 网络科学与技术重点实验室主办,中文信息易于阅读,内容比较丰富. Hadoop 0.18官方文档http:

android学习之路资料集合

版权声明:本文为 stormzhang 原创文章,可以随意转载,但必须在明确位置注明出处!!! 这篇博客背后的故事 一路走来很不容易,刚好知乎上被人邀请回答如何自学android编程, 就借这个机会在知乎上记录一路走来的历程,很励志,希望能给那些正在或准备走编程行业的人一些正能量,内容有点长,感兴趣的可以当做励志小说阅读吧. 收到一些朋友的微博私信,说能不能给Android新手们一些指导,我只能说指导谈不上,毕竟我也很多东西正在学习中,与此同时一大学同学准备转行Android,可以说是从头开始,

学习Hadoop过程中遇到的困难

1:Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out 这是reduce预处理阶段shuffle时获取已完成的map的输出失败次数超过上限造成的,上限默认为5.引起此问题的方式可能会有很多种,比如网络连接不正常,连接超时,带宽较差以及端口阻塞等,通常框架内网络情况较好是不会出现此错误的. 2:Too many fetch-failures Answer: 出现这个问题主要是结点间的连通不够全面. 1) 检查 ./etc/h

一步一步跟我学习hadoop(3)----hadoop命令手册

上节我们学习了hadoop的eclipse插件安装和wordcount程序的运行,本篇对hadoop命令进行一个系统的了解 hadoop的命令通过HADOOP_HOME\bin\hadoop命令触发,我们可以在命令行执行 hadoop --help 来提示用户的命令输入. hadoop命令分为两大类:用户命令和管理命令,以下是hadoop命令的详细解读 本篇博客是摘自官网http://hadoop.apache.org/docs/r1.0.4/cn/commands_manual.html 0概

最近学习hadoop遇到的问题!虽然很小但是很恶心!同时求指教!!!

首先是 Linux下搭建Hadoop! 首先贴出一个问题,至今未解决,路过的人可以帮助一下! 最初的时候比较年轻,第一次安装ssh  设置了密码,而且我在Linux下所有设置的密码都是统一的,然后我安装好了hadoop,在执行start-all.sh命令的时候需要开启ssh,这时候需要我输入密码,但是输入不正确,这是第一点!而后我删除了ssh,重装,想要设置ssh免密码登录,但是一打开ssh就需要密码,而且密码跟当初第一次设置的一样,最后我dpkg将所有名字中带有ssh的 都给删除了,再次重新安