Articles

• 项目问题总结

  Apr 22, 2018

  之前做的几个项目陆续上线了，碰到了不少稀奇古怪的问题，还有一些运营的问题，这里总结一下。

  Read More »

• MysqlBinlog中的事务

  Mar 22, 2018

  binlog抽取的项目测试了一段时间，一直都很顺利，最近扩大了测试的规模，发现了一些细节问题。

  Read More »

• 分发log数据到HDFS

  Feb 25, 2018

  将Kafka中的数据分发到HDFS上，提到这个需求首先想到的就是Flume。

  Read More »

• 类型转换

  Jan 20, 2018

  之前几个月一直在忙一个binlog抽取的项目，将mysqlbinlog拉出来，写入kafka，

  Read More »

• 关于Avro的使用

  Nov 29, 2017

  14年开始尝试Flume的时候了解到Avro相关的东西，但一直都没有很深入的使用。

  Read More »

• 关于Mysql的Binlog抽取

  Nov 29, 2017

  这个月换了工作，双十一之前入职了京东大数据平台——实时数据组。

  Read More »

• 如何设计日活的流计算

  Oct 8, 2017

  之前在Redis上构建了基于Bitmap索引的存储结构，在Openresty上实现了一个简易的查询引擎，

  Read More »

• 如何查询Redis中的Bitmap数据

  Sep 20, 2017

  书接上回，我们已经将日活的维度数据写入Redis的Bitmap结构中。

  Read More »