rochy_he

Namespace（表命名空间）：将多个表分到一个组进行统一管理。 Table（表）：一个表由一个或者多个列族组成；数据属性比如：超时时间（TTL），压缩算法（COMPRESSION）等，都在列族的定义中定义；定义完列族后表是空的，只有添加了行，表才有数据。 Row（行）：一个…

在 6.0 之前，Filebeat 可以设置多个输出（必须是不同类型的输出）；从 6.0 开始已经禁止多输出了，只能拥有一个输出，如果想实现多输出，可以借助 logstash 等中间组件进行输出分发。 ES 是 Java 应用，底层存储引擎是基于 Lucene 的，heapsi…

常规情况下，推荐将 Configuration 做为单例；Connection 随建随用，用完及时关闭。 早期的教程会教大家使用 HTable 类，而且使用这个类的时候不需要去手动地获取 Connection，只需要把 Configuration 类作为构建参数传给 HTabl…

列并不是依附于表上，而是依附于列族上。 在删除 HBase 表之前的时候，必须先执行停用（disable）命令，因为可能有很多客户端现在正好连着，而且也有可能 HBase 正在做合并或者分裂操作。如果你这时删除了表，会造成无法恢复的错误，HBase 也不会让你直接就删除表，而是…

Elasticsearch 要求其可用的文件句柄至少为 65536，同时要求其进程数限制至少为 2048，可用按照下面的指令进行修改。 为了避免不必要的磁盘和内存交换，影响效率，需要将 vm.swappiness 修改为 1（进行最少量的交换，而不禁用交换）或者 10（当系统存…

（1）切换到root用户，然后建立hadoop用户。 （2）添加 hadoop 到sudoers 列表。 JVM 运行的内存如果不设定占用大小的话，要么不够，要么就把机器的内存都占满了。只要用到 JVM 的地方都加入内存参数，至少内存多少自己心里有数，让情况可控。 日志文件路径…

Partition tolerance（分区容错性）：可靠性。 很多人以 为 NoSQL 是非 SQL 的意思，其实它是 Not Only SQL 的缩写，意思是不只是 SQL。与关系型数据库正好相反，非关系型数据库 NoSQL 对事务性的要求并不严格，甚至可以说是相当马虎。 …

社区反馈：在 input 和 output 下面添加属性 enabled：true。 Filebeat 实现了类似 Logstash 中 filter 的功能，叫做处理器（processors），processors 种类不多，尽可能在保持 Filebeat 轻量化的基础上提供…

ES 允许用户定义一系列模板，当索引被创建的时候，模板的设置会自动被应用到新创建的索引中，这一系列模板被称作Index Templates。模板的设置包括 settings 和 mappings，通过模式匹配（匹配索引名）的方式控制模板是否应用于新索引。 对于模板内部更加细节的…