大数据
2篇文章 · 0订阅
  • MySQL如何实时同步数据到ES？试试这款阿里开源的神器！
    mall项目中的商品搜索功能，一直都没有做实时数据同步。最近发现阿里巴巴开源的canal可以把MySQL中的数据实时同步到Elasticsearch中，能很好地解决数据同步问题。今天我们来讲讲canal的使用，希望对大家有所帮助！ canal主要用途是对MySQL数据库增量日志…
    Java MySQL
    MySQL如何实时同步数据到ES？试试这款阿里开源的神器！
  • Hive 入门
    压缩：GZIP,LZO,Snappy,Bzip2... hive.exec.reducers.bytes.per.reducer 这个参数控制一个job会有多少个reducer来处理，依据的是输入文件的总大小。默认1GB。（即每个reduce任务处理的数据量。） hive.ex…
    Apache Hive