<b id="a8lvi"><rt id="a8lvi"><nav id="a8lvi"></nav></rt></b>

<b id="a8lvi"><rt id="a8lvi"><nav id="a8lvi"></nav></rt></b>

<u id="a8lvi"></u>
<b id="a8lvi"></b>

Logo

  • xpleaf

    发布于:2018-04-08 22:36:04

    58

    大数据采集、清洗、处理:使用MapReduce进行离线数据分析完整案例
    大数据采集、清洗、处理:使用MapReduce进行离线数据分析完整案例
    阅读 10000+ 评论 142 收藏 27 赞赏 1
  • cs312779641

    发布于:2018-02-07 18:57:15

    24

    详解Linux运维工程师高级篇(大数据安全方向)
    详解linux运维工程师高级篇(大数据安全方向)
    阅读 10000+ 评论 10 收藏 17
  • Slaytanic

    发布于:2017-11-02 19:25:32

    5

    Hadoop运维记录系列(二十一)
    Zeppelin启用https过程和Hack内核以满足客户需求的记录。原因是这客户很有意思,该客户中国分公司的人为了验证内网安全性,从国外找了一个***测试小组对Zeppelin和其他产品进行***测试,结果发现Zeppelin主要俩问题,一个是在内网没用https,一个是zeppelin里面可以执行shell命令和python语句。其实这不算大问题,zeppelin本来就是干这个用的。但是***小组不
    阅读 10000+ 评论 3 收藏 0
  • bingyang87628

    发布于:2017-09-26 23:24:31

    3

    大数据实践总结--两个故障的处理及思路总结
        已经有一段时间没有更新实践内容了,不是因为没有在学习。而是工作上出现一个新的挑战,又在忙论文查重,论文也是大数据方向的,主要是ICT方向的一个技术(若有人感兴趣,我会另开一个帖子来详细谈这个内容)。    而且最近,把之前所有的实践环境换了一台电脑来重新搭建。按理说会很顺利,但没想到,还是出了许多问题。一些简单的问题就直接解决了,但仍是有两
    阅读 8581 评论 1 收藏 1
  • Slaytanic

    发布于:2016-12-30 15:22:50

    3

    Apache Bigtop再论与卖书求生存
    快一年没写博客了,终于回来了,最近因公司业务需要,要基于cdh发行版打包自定义patch的rpm,于是又搞起了bigtop,就是那个hadoop编译打包rpm和deb的工具,由于国内基本没有相关的资料和文档,所以觉得有必要把阅读bigtop源码和修改的思路分享一下。我记得很早以前,bigtop在1.0.0以前版本吧,是用make进行打包的,其实这个0.9.0以前的版本,搁我觉得就不应该出现在apa
    阅读 7942 评论 3 收藏 0
  • yushaoqing

    发布于:2016-07-07 00:27:38

    3

    hadoop源码解析---INodeReference机制
    本文主要介绍了hadoop源码中hdfs的INodeReference机制。在hdfs2.6版本中,引入了许多新的功能,一些原有的源代码设计也有一定的改造。一个重要的更新就是引入了快照功能。但是当HDFS文件或者目录处于某个快照中,并且这个文件或者目录被重命名或者移动到其他路径时,该文件或者目录就会存在多条访问路径。INodeReference就是为了解决这个问题产生的。问题描述/a是hdfs中的
    阅读 5612 评论 0 收藏 1
  • 酱酱酱子啊

    发布于:2016-07-06 11:18:14

    3

    logstash将Kafka中的日志数据订阅到HDFS
    前言:通常情况下,我们将Kafka的日志数据通过logstash订阅输出到ES,然后用Kibana来做可视化分析,这就是我们通常用的ELK日志分析模式。但是基于ELK的日志分析,通常比较常用的是实时分析,日志存个十天半个月都会删掉。那么在一些情况下,我需要将日志数据也存一份到我HDFS,积累到比较久的时间做半年、一年甚至更长时间的大数据分析。下面就来说如何最简单的通过logstash将kafka中
    阅读 10000+ 评论 5 收藏 1
  • gdutccd

    发布于:2016-02-05 11:38:09

    0

    hadoop+zookepper实现namenode的高可用
    Hadoop+zookeepker安装与配置: 在hadoop-env.sh中添加export JAVA的环境变量修改hostname文件的名称,/etc/hosts文件配置主机名和ip的映射关系,将mstaer,slave的主机名和ip地址都添加进来 配置ssh免密钥配置Ssh-keygen –t rsa在./.ssh文件中生成两个文件id_rsa(私钥),id_rsa.pu
    阅读 7358 评论 0 收藏 1
  • Slaytanic

    发布于:2015-11-13 19:00:35

    8

    Hadoop运维记录系列(十七)
    上个月通过email,帮朋友的朋友解决了一个Cloudera的Spark-SQL无法访问HBase做数据分析的问题,记录一下。
    阅读 10000+ 评论 5 收藏 0
  • Slaytanic

    发布于:2015-07-13 14:50:53

    1

    使用flume替代原有的scribe服务
    以前很多业务都是用scribe做日志收集的支撑的,后来fb停止了对scribe的开发支持。而且scribe在机器上编译一次的代价太大了,各种坑,正好后来flume从1.3.0开始加入了对scribe的支持。就可以把原来scribe上面接入的数据转用flume收集了。虽然我很喜欢scribe,但是失去了官方支持毕竟还是很闹心的。agent.channels=c1 agent.channels.c1.
    阅读 8629 评论 1 收藏 0
写文章
神算大乐透64期开奖号码必出 临邑县| 怀柔区| 五华县| 轮台县| 嘉义县| 信丰县| 丹东市| 云霄县| 中牟县| 堆龙德庆县| 梅河口市| 张家界市| 含山县| 甘洛县| 睢宁县| 邵阳县| 团风县| 陕西省| 桃源县| 湘西| 太保市| 金塔县| 眉山市| 扶绥县| 朝阳区| 遂平县| http://ciigqsx.tw 柘荣县| 治县。| 天津市| 长治市| 株洲市| 鄂州市| 咸宁市| 乌兰察布市| 景宁| 蚌埠市| 茌平县| 吉首市| 藁城市| 汾西县| 黄梅县| 南汇区| 江门市| 铜梁县| 苍山县| 江北区| 乌拉特前旗| 东宁县| 宝应县| 来安县| 寻甸| 格尔木市| 措美县| 闵行区| 平和县| http://www.sthseu.cn 萨迦县| 辽宁省| 军事| 临高县| 望城县| 怀化市| 海淀区| 许昌市| 东海县| 宜章县| 山丹县| 康马县| 滁州市| 永平县| 虹口区| 丰宁| 恩平市| 民丰县| 博客| 砚山县| 桃源县| 罗城| 华池县| 扎鲁特旗| 陇西县| 剑川县| 吉木乃县| 泰和县| 建瓯市| 海淀区| 安达市| 张家界市| 达州市| 轮台县| http://www.grzijx.cn 三穗县| 白城市| 拜泉县| 西华县| 报价| 博兴县| 泾川县| 昭通市| 汽车| 天等县| 南靖县| 雷波县| 古蔺县| 浦江县| 衡阳县| 金堂县| 木兰县| 淮安市| 德令哈市| 鹤岗市| 兴海县| 固镇县| 清镇市| 芜湖市| 榕江县| 西丰县| 开远市| 桑日县| 施甸县| http://kcmbdqm.tw 环江| 阜新| 承德县| 龙州县| 抚宁县| 丰县| 成都市| 宜春市| 克东县| 盖州市| 海丰县| 图木舒克市| 名山县| 梅河口市| 龙海市| 丰顺县| 长兴县| 凤山市| 汝南县| 孝义市| 大邑县| 禹州市| 安福县| 黑水县| 靖州| 铜梁县| 满城县| 宁陕县| 井研县| http://lyebsul.tw 腾冲县| 金门县| 大田县| 泽库县| 靖边县| 鄄城县| 包头市| 顺昌县| 沭阳县| 平利县| 莱州市| 门源| 会昌县| 岫岩| 临潭县| 昌乐县| 澳门| 临武县| 福鼎市| 新沂市| 佳木斯市| 静宁县| 政和县| 和政县| 新郑市| 若尔盖县| 奉化市| 深水埗区| http://www.13e373.com 富宁县| 耿马| 慈溪市| 治县。| 福海县| 桐庐县| 南川市| 乐至县| 南澳县| 独山县| 固始县| 咸阳市| 天台县| 白城市| 长宁县| 万荣县| 喜德县|