首页最新资讯

全部 新闻动态 技术文章 常见问题 技术问答

    • HBASE命令行演示

      进入hbase命令行 ./hbase shell 显示hbase中的表 list 创建user表,包含info、data两个列族......查看全文>>

      技术文章2018-11-26 |黑马程序员 |黑马程序员,HBASE命令
    • Compact是如何存储大数据的?

      最近,在工作中遇到了MySQL中如何存储长度较长的字段类型问题,于是花了一周多的时间抽空学习了一下,并且记录下来。查看全文>>

      技术文章2018-11-16 |黑马程序员技术社区 |MySQL基础,Compact基础,
    • 大数据离线阶段Day9之HDFS安全模式

      安全模式是HDFS所处的一种特殊状态,在这种状态下,文件系统只接受读数据请求,而不接受删除、修改等变更请求,是一种保护机制,用于保证集群中的数据块的安全性。查看全文>>

      技术文章2018-10-24 |黑马程序员 |黑马程序员,大数据,HDFS
    • 大数据离线阶段Day9之HDFS元数据管理机制

      HDFS元数据,按类型分,主要包括以下几个部分:   1、文件、目录自身的属性信息,例如文件名,目录名,修改信息等。   2、文件记录的信息的存储相关的信息,例如存储块信息,分块情况,副本个数等。   3、记录HDFS的Datanode的信息,用于DataNode的管理。查看全文>>

      技术文章2018-10-24 |黑马程序员 |黑马程序员,大数据,HDFS
    • 大数据离线阶段Day8之MapReduce优化参数

      mapreduce.map.memory.mb: 一个Map Task可使用的内存上限(单位:MB),默认为1024。如果Map Task实际使用的资源量超过该值,则会被强制杀死。查看全文>>

      技术文章2018-10-24 |黑马程序员 |黑马程序员
    • 大数据离线阶段Day8之MapReduce并行度机制

      MapTask的并行度指的是map阶段有多少个并行的task共同处理任务。map阶段的任务处理并行度,势必影响到整个job的处理速度。那么,MapTask并行实例是否越多越好呢?其并行度又是如何决定呢?查看全文>>

      技术文章2018-10-24 |黑马程序员 |黑马程序员,大数据