, 相关的文章
如何将数据热导出到文件

如何将数据热导出到文件

发布时间:2018-11-06 分类:数据蒋堂 Tag:,

随着时间推移,数据库中数据量会越来越大,如果把查询分析都挂到数据库上,有可能会影响到生产系统的正常运行。所以,一般 [查看全文]

时序数据从分表到分库

时序数据从分表到分库

发布时间:2018-10-30 分类:数据蒋堂 Tag:,,,,

这里的时序数据泛指一切随时间推移而不断增长的数据,比如通话记录、银行交易记录等。

对于数据库来讲,时序数据并没 [查看全文]

BI系统的前置计算

BI系统的前置计算

发布时间:2018-10-23 分类:数据蒋堂 Tag:,

某机构上了一套分布式数据仓库,历史数据逐步装进了仓库,然后,基于数据仓库构建了BI系统(主要是多维分析)。刚开始, [查看全文]

性能优化是个手艺活

性能优化是个手艺活

发布时间:2018-10-18 分类:数据蒋堂 Tag:,,

大数据的技术本质就是高性能,性能优化也是程序员们的永恒话题。

这里说的性能优化,主要是指在程序员的努力下能达到 [查看全文]

数据分布背后的逻辑

数据分布背后的逻辑

发布时间:2018-10-09 分类:数据蒋堂 Tag:,,

在分布式数据库及大数据平台中,数据如何分布到多台机器中是个很关键的问题。因为很多运算是数据密集型的,如果数据分布做 [查看全文]

为什么我们需要C程序员

为什么我们需要C程序员

发布时间:2018-08-28 分类:数据蒋堂 Tag:,

再说一个招聘的话题。

大家可能知道,润乾的软件产品主体都是Java写的,几乎没有别的语言。但是,我们在招聘算法 [查看全文]

从一道招聘考题谈起

从一道招聘考题谈起

发布时间:2018-08-28 分类:数据蒋堂 Tag:,

润乾研发部在招聘时有一个笔试题:

1/2,1/5,1/20,1/64,1/125都可以写成有限小数,而1/3, [查看全文]

怎样生成有关联的测试数据

怎样生成有关联的测试数据

发布时间:2018-07-24 分类:数据蒋堂 Tag:,,,,

在向用户推荐新的数据处理技术,特别是涉及性能优化的场景时,经常会碰到生成测试数据的需求。毕竟,新方案要经过验证才能 [查看全文]

一些数据压缩手段

一些数据压缩手段

发布时间:2018-07-10 分类:数据蒋堂 Tag:,,

我们知道,外存(硬盘)的性能远远低于内存,即使是同样复杂度的运算(CPU计算量相同),如果能减少外存的访问量,也会 [查看全文]

用HBase做高性能键值查询?

用HBase做高性能键值查询?

发布时间:2018-07-03 分类:数据蒋堂 Tag:,

最近碰到几家用户在使用HBase或者试图使用HBase来做高性能查询,场景也比较类似,就是从几十亿甚至上百亿记录中 [查看全文]