wait4friend

工欲善其事，必先利其器。在处理日常和数据相关的工作中，我认为有两个工具是被我们大多数人严重低估的，他们分别是Excel和PowerDesigner。这两个工具的功能十分强大...

设备掉线，导致相邻的两个点之间有很大的时间差和距离（跳跃点）。 设备异常，导致在连续的时间戳下，GPS点位置有突然很大偏差（漂移点）。 设备异常，导致相同时间戳下，返回多条...

如果原始GPS点没有包括行驶速度等信息，那就需要使用时间和位置这些已知信息，通过额外计算车辆的行驶状态，来找出车辆的停车点。 业务需求是，如果一系列在N分钟内的GPS点距离...

最近研究的一个项目中，涉及到对车辆轨迹数据的大量应用。原来从来没有仔细研究过空间数据库或GIS相关的东西，正好借这个机会学习一下。在学习过程中，把自己的一些测试过程陆续分享...

在处理GPS数据时，记录中往往会有很多时间戳和距离都接近的数据，一方面浪费了较多的存储空间，另一方面造成所要表达的图形不光滑或不符合标准。因此要通过某种规则，在保证矢量曲线...

在我们的场景中，行政区划是电子围栏的一个特例。日常处理和行政区划有关的业务场景，举例如下 初始化代码中需要使用 geoc_gcj02towgs84() 这个函数，把GCJ0...

备注：阿里云Ganos提供了更完善的轨迹模型和分析功能，但是仅仅用PostGIS原生功能也足以满足我们的基础需求。 业务需求是，根据车辆ID+日期对历史轨迹进行分段。 Po...

在树形递归查询这篇文章，我记录了使用CTE语法查询树形结构的办法。在一个树形结构中，每一个节点最多有一个上级，可以有任意个数的下级。 在实际场景中，我们还会遇到对图(gra...

数据仓库在DWS层对数据进行汇总的时候，经常会出现数据一对多的情况。这个时候会使用父子表的形式存储数据。但是在构造Data API的过程中，往往会使用JSON格式，把多条子...

处理不确定深度的层级结构，比如组织机构，一个常用的设计是在一张表里面保存 ID 和 Parent_ID ，并且通过自联结的办法构造一颗树。这种方式对写数据的过程很友好，但是...

做过数据清洗ETL工作的都知道，行列转换是一个常见的数据整理需求。在不同的编程语言中有不同的实现方法，比如SQL中使用case+group，或者Power BI的M语言中用...

方便管理多个用户共享一个数据库,但是又可以互相独立. 比如要设计一个复杂系统，由众多模块构成，有时候模块间又需要有独立性。各模块存放单独的数据库显然是不合适的。 这时候使用...

作为一种简单易用的非结构化数据，JSON格式的应用场景非常广泛。在当前的大数据环境下，处理非结构化数据的需求越来越频繁，我们是不是必须用MongoDB这一类NoSQL的解决...

在使用异构数据库构建数据平台的过程中，异构数据库之间的访问一直是比较复杂的问题。我们使用PostgeSQL的过程中，遇到需要访问MySQL实时数据的场景。可供我们选择的方案...

内核参数的配置，这里有一篇文章写的很详细，建议阅读。 因为安装过程涉及到新建用户等操作，所以这里使用root用户(或sudo)来进行准备工作。 这里的启停命令都是用post...

在平时的工作中，把常规工作进行文档整理非常重要，无论是平时工作处理或是工作交接，实时的维护文档资料可以提高工作效率。如果采用传统的TXT文档或者Word文档来记录的话修改查...