• 理解google在computing上走的有多快多远,学习dremel..

    理解google在computing上走的有多快多远,学习dremel..

    本站主要内容均为原创,转帖需注明出处www.alexclouds.net      博主由于工作关系,对于云计算的大数据领域的技术特别关注。近期翻看了2013年以前的老文章,发现对GOOGLE的兴趣渐长。经过仔细研究目前公布的所有文件和数据发现,全球很多技术都落后于Google,而Google自身的技术也正在影响全球。比如在HADOOP分布式计算领域,GOOGLE已经领先了很多了。    ...

    02013 年 7 月 7 日1,772Big Data大数据
  • Hadoop 0.23.7的伪分布式开发环境

    Hadoop 0.23.7的伪分布式开发环境

    本站主要内容均为原创,转帖需注明出处www.alexclouds.net      这一版本和2。X.X的区别就是没有NN的HA,一些目录相比我们常用的0.20.X有了较大的改动,原来的配置文件目录conf/废弃了,新版中在etc/hadoop/下配置。旧版中主要配置core-site.xml,hdfs.site.xml,mapred-site.xml,hadoop-env.sh文件。而新版中需要配置.bashrc,yarn-env.sh,添加各种环境变量,在core-site.xml,hdfs-site.xml...

    02013 年 4 月 26 日2,656Big Data大数据,工作相关
  • 从云计算运营的角度分析大数据类应用的部署

    从云计算运营的角度分析大数据类应用的部署

    本站主要内容均为原创,转帖需注明出处www.alexclouds.net       首先要说的,我把云计算和大数据扯上关系不为别的,其实是为了讲清楚时下主流的大数据云计算服务提供商对大数据应用类的服务提供了怎样的运营基础支持。以往我们在云计算里部署的是典型应用,而非大数据分析。现在和将来,我们要在云计算里部署大数据分析类应用,我们该怎么办?这也正好接着我以往的文章讲述云计算运营与大数据...

    02013 年 4 月 1 日1,579Big Data大数据,工作相关,运营服务
  • 我对目前Hadoop和大数据分析的一点点看法,也给初学者一点建议

    我对目前Hadoop和大数据分析的一点点看法,也给初学者一点建议

    本站主要内容均为原创,转帖需注明出处www.alexclouds.net      青春是躁动的。昨天我看了一个微博,差点没把我气死。这些人对于大数据的理解已经演进到接近对于神和虚无缥缈之间的理解了,比如某媒体人说的:“大数据是活数据,这个保质期也许就是5分钟,这就是大数据。”以我看来活你妹啊。还有什么“大数据是边生产边消费”,生产你妹啊。我被这种对大数据的看法瞬间石化。我倒要质问一句,你他娘...

    02013 年 3 月 30 日1,671Big Data大数据,工作相关
  • 从技术角度分析Big Data对业务的促进

    从技术角度分析Big Data对业务的促进

    本站主要内容均为原创,转帖需注明出处www.alexclouds.net      首先要简单的说,将技术逻辑转化为业务逻辑,这本身存在一定的难度,但是这也是关键。企业的售前技术支持人员要深刻理解这一点。将技术和业务通盘考虑和透彻理解是有效实施HADOOP的关键。数据在Hadoop中以job作业形式处理,这些作业是使用一个名为mapreduce的形式、通过Java、R、python等语言编写的。尽管业界开展了一些工作...

    02013 年 3 月 29 日1,413Big Data大数据,工作相关
  • NOSQL与关系型数据库mysql的将来

    NOSQL与关系型数据库mysql的将来

           本站主要内容均为原创,转帖需注明出处www.alexclouds.net        业界一直有很多的声音,呼吁着关系型数据库正在加速消亡,事实并非如此,MYSQL还活的好好地,而且mysql的创始人还跑出去自创了MariaDB,也是关系型数据库。放眼望去,大的机构都在从IOE向MYSQL平台迁移,这到底是闹哪样?其实用脑子想想也能明白了,主要的应用...

    02013 年 3 月 27 日1,647Big Data大数据,工作相关
  • 对比:国内和国外的云计算、大数据行业到底在干什么

    对比:国内和国外的云计算、大数据行业到底在干什么

    本站主要内容均为原创,转帖需注明出处www.alexclouds.net        博主我突然想写点东西,关于云计算、大数据国内到底在干些啥,同时也拿国外的情形对比一下,好让我自己心里有底,也让来围观的人看一看,当然欢迎批评指正。这张图我还得放大一些,不然大家可能看不清。SO,从BI着手,BI就是BUSINESSINTELLIGENCE,商业智能。     &n...

    02013 年 3 月 22 日981Big Data大数据,云计算
  • Hadoop的生态系统,Hadoop已经变成大生意

    Hadoop的生态系统,Hadoop已经变成大生意

    现在Hadoop在国内貌似刚刚起步,但是在国外却变成了一门大生意。自从GOOGLE的工程师2003年前后发布了GFS,HDFS,HADOOP之后,这就变成了一门迅速发展的大生意。现在把它分为11个层次,分别对应不同的HADOOP服务,和这些服务类型下的典型公司。当然对于这些各个服务领域的分析就智者见智了,因为专业报告是要付费的。通过这份引导图,至少能知道目前的生态系统的层次区分,至于了解到具体的内容,需要去研...

    02013 年 3 月 13 日2,416Big Data大数据
  • 大数据时代中的思索

    大数据时代中的思索

    《大数据时代》是国外大数据研究的先河之作,作者维克托•迈尔•舍恩伯格被誉为“大数据商业应用第一人”,拥有在哈佛大学、牛津大学、耶鲁大学和新加坡国立大学等多个互联网研究重镇任教的经历,早在2010年就在《经济学人》上发布了长达14页对大数据应用的前瞻性研究。维克托最具洞见之处在于,他明确指出,大数据时代最大的转变就是,放弃对因果关系的渴求,而取而代之关注相关关系。也就是说只要知道“是什么”,而不需要知道“...

    02013 年 3 月 11 日863Big Data大数据
  • mapreduce design pattern

    mapreduce design pattern

     

    02013 年 2 月 22 日813Big Data大数据
  • hadoop1.1.2中测试一个MAPREDUCE实例–hadoop-example-1.1.2.jar

    hadoop1.1.2中测试一个MAPREDUCE实例--hadoop-example-1.1.2.jar

    本站主要内容均为原创,转帖需注明出处www.alexclouds.net      有关wordcount博主在2013年已经做过hadoop测试了,这东西就打包在example.jar里面,源码在SRC目录里,随用随改随测。再写一遍主要是突然想对比测试与之前的0.2版本相比的改进情形跨越度大不大。     还有一点就是博主以前在WORDCOUNT里面做过改动,WORDCOUNT源程序细节没处理全,比如取...

    02013 年 2 月 21 日1,104Big Data大数据,工作相关
  • flume收集Apache 2 Web Server Logs并送入hadoop HDFS

    flume收集Apache 2 Web Server Logs并送入hadoop HDFS

    本站主要内容均为原创,转帖需注明出处www.alexclouds.net      flume当然是个强大的数据流收集工具,可以用来收集apache日志,并将数据流发送到好的hdfs.这里主要简单说一下flume收集APACHE2日志的方法。当然看FlumeUserGuide会是一个不错的方式,这里只是举一个实际的例子说明flume节点怎么收集Apache2webserverslogs       使用FlumeAgents连接A...

    02013 年 1 月 11 日1,298Big Data大数据,工作相关
1 / 5 1 2 3 ...5 下一页 »