【数据工程师日记】混迹职场10多年的老鸟，居然被一个新人给上了一课

这段时间，没想到我这个混迹职场10多年的老鸟，居然被一个职场新人给上了一课。

大概情况是这样。上周我们大数据部新入职了一个数据工程师小林，部门领导让我带一带新人。

我问领导新人啥水平啊？部门领导的评价是：基础扎实，思维灵活，有创新力。HR的点评更让我一头雾水：这个年轻人“有点东西”。

既然“有点东西”，我就特想知道有些什么东西？刚好业务部要取的一批数据需要新开发一个数据API，我就把任务派给了小林，想试一试小林。

说起数据API开发，数据开发的老鸟都知道，这是一个很常见的工作。但是，对公司数据环境还不太熟悉的小林可能很难搞定。

一般来说，开发者水平不一样，对业务理解的程度不一样，开发难度也不一样，所以一个数据API短则小半天长则数十天也不稀罕。

图1：听老鸟的话，别让他受伤！

不仅能开发出来还要好用。所以，开发好一个数据API也并非易事，不仅需要工程师了解各种技术栈，还要把细节都考虑周到。例如接口版本化、接口面向的应用场景、请求参数的规范性及处理的统一性、返回数据类型、返回码及信息提示的规范性等，这些环节无处不考验开发者。

我给小林派活的时候，脑袋里已经能想象出小林抓耳挠腮地样子，新人嘛，肯定要敲打一下的。

哪知道，这个小林根本不按套路出牌。

一般新人一旦把任务完成，马上屁颠地过来报喜。但是，小林没有声张，还特地跑来跟我谦虚地请教怎么开发数据API？

果然是新人，这么简单的事情都搞不定，让我来教教你怎么做事？于是，我把小林拉到会议室，摆出我多年积攒的一套方法论、开发流程和注意事项，似有不给新人醍醐灌顶不罢休的架势。

说完，我口干舌燥，连喝三大杯凉白开。

听到最后，小林淡淡地说，以前他也像我这样开发数据API，不过他现在觉得可以不用这么麻烦？他接到任务后，一直在寻找一些事半功倍的新工具，据说几分钟就能开发一个数据API。

图2：数据API使用情况分析

几分钟，瞎掰了吧？以我10多年开发经验，这绝无不可能！说真的，我当时有点小生气。一个新人还想给我上课！结果没多久，我感觉还真是被小林上了一课。

随后小林也说出了心里话，他说自己关注API开发的问题很久了，面对多种异构跨平台数据源，不同水平的数据工程师开发周期和稳定性差异都很大，尤其在针对大数据量高并发的数据需求时，API交付实效性比较差。

尤其面对多种版本的数据API使得复用率低，经常需要数据工程师重复开发——重复造轮子，由于人员不固定不得不重造，这些工作量都大大降低了开发者的效率。再加上缺乏统一规范，给后期API管理和运维增加了复杂性。

小林简短的一席话，确实让我有一种醍醐灌顶的感觉。因为，我感觉从没有这么思考过如何更高效地解决API开发的问题。

我谨慎地提出质疑：快速开发出来的API能好用吗？小林马上动手操作给我看。这个时候我才看清楚他说的新工具：全Web界面，低代码开发平台，支持常见主流数据源和数据平台，比如MySQL、PostgreSQL、MSSQL、Oracle、Hadoop等。

图3：无需再重复造轮子

显然，小林是有备而来的。他配合我开始做起了一轮轮测试。不管是数据查询、数据下载等各方面效果都很好。

后来，大数据部领导最终采纳了小林提供的方案，高效地完成了业务部的同类任务。也因此，整个大数据部门都得到集团领导和业务部的公开表扬。要知道，业务部以前没少在集团领导面前告我们的状。

不仅如此，这款新工具还提供了从数据API创建、发布、调用到运维全生命周期的管理，避免了大数据部门重复造轮子的事情再发生。

从那一刻起，我是打内心开始觉得，这个新来的数据工程师确实“有点东西”。

小林说，现在这款工具目前发布的社区版支持免费下载试用，建议同行都下载试试，下载地址在下面的方框内。