从Excel到微服务

本文由Yurii原创,转载请注明来源: Life Sailor

本文链接 从Excel到微服务


Excel很老,Excel很土,Excel一点也不sexy;微服务新,微服务很潮门,微服务很高大上。那么,Excel和微服务有什么关系?

上个月看了篇文章,The Unbunlding of Excel。作者认为,对于初创公司(尤其是非“纯IT”初创公司)来说,Excel几乎包办各种工作。想要计算?请用Excel。想做轻量级的CRM,可用Excel。建立财务分析模型?还是用Excel。简单的项目管理?当然Excel。数据分析总揽图?仍然是Excel。执行简单的ETL任务?Excel再合适不过了。

Excel真的这么能干吗?从逻辑上说,它是成立的。首先公司里很多业务都是基于数据的,其原型都是对表格的操作,Excel“天生”就是表格。其次,Excel提供了足够弱又足够强的“编程能力”,Excel中的VBA、透视表等等功能对于强大的编程语言来说或许不值一提,但许多对编程语言望而却步的人却能把这些功能运用得无比纯熟,玩出的花样让很多程序员也叹为观止。

更重要的是,初创公司的业务往往是不确定的,业务领域需要探索,业务规则也需要不断修订。Excel虽然没有量身定制的系统那么完善,但成本相当低廉。对初创公司来说,除非自己养着非常厉害的开发团队,系统又做得足够高质量足够灵活,一面猛改一面还保持稳定,否则即便“上系统”,也经常被系统困住手脚,业务反而受到拖累。

如果你觉得这只是“逻辑上”的分析,我还可以给出更现实的例子。

如今很多公司都知道要有CRM(客户关系管理)系统,来处理和汇总与客户之间的问题。业务还没开展,CRM先得买一套或者开发一套,这已经成了流行的思维定势。但是,买来或者开发的CRM,未必能很好满足自己的业务需求,因此踩坑的例子数不胜数。

朋友的一家公司,一开始根本没有上CRM,只要求客服每人每天用Excel把回答的问题记下来,每天晚上指定专人汇总,第二天早上把汇总和更新之后最新的Excel通过邮件下发给所有客服,回答问题的时候就在这张表里用Ctrl + F来寻找关键词。这样的做法虽然看起来很累很烦,却足够简单有效。既不用担心系统死掉大家都干不了活,也不用担心问题分类设定不合理无法录入或者数据格式变化导致的历史数据清洗成本。

等这套流程真正跑顺稳定了,公司业务也足够大了,有时间有资本把已经摸索的客服管理的经验和流程固化到系统里,CRM系统开发顺理成章,上线到投入使用相当自然。

我还见过一家电商公司,因为赶上了风口,业务发展极其迅猛。于是公司也马上遇到了问题,创始人都是做互联网的出身,对实业并没有多么丰富的经验,多地仓库的管理成了老大难,库存经常乱套了。

怎么办?虽然自己有一支小的开发团队,但日常业务已经足够他们忙的了,而且仓储是个专门的领域,即便没做过,专门去看看也知道水很深,何况仓库运营的规则和办法还在不断优化,这时候要做出一套好用的仓储系统,几乎是痴人说梦。然而每次出问题,很多基层员工都会抱怨,要是有系统就好了。

创始团队想到的办法就是Excel,不管仓储规则怎么千变万化,基本的库存管理,无非是入库、出库、盘库等几个动作,数据格式是相对固定的。那么,每个仓库每天干完活,再忙再累再晚,也要把仓储信息按照约定的Excel模版回传到总部,由专人统计合并。这工作说起来简单,做起来可让人叫苦连天,尤其是还有些仓库分布在海外有时差,每天光是统计合并这些数据就得一两天。

既然老大发了话,下面的人有抱怨也不敢发出来,只能老老实实执行。整套流程两三个礼拜,日常的操作基本都不会出问题,要完善操作流程时,也大概知道了该怎么修改表格。就这样边录边改,磨合了大半年,终于把流程基本定下来了。这时候再安排产品经理、项目经理、程序员进场,一看日常用的Excel,数据项、数据项之间的关联清清楚楚,不清楚的地方问问操作人员也立刻可以得到解答。这时候再安排开发仓储管理系统,基本不存在什么领域知识难题,更像是顺水推舟的事情。

仔细观察这两个例子,你会发现,它们的本质是一样的,即在对问题域还不够了解、问题解法还没有彻底明晰之前,需要一种具有一定规范性同时低成本的手段,一方面对现有操作进行约束,另一方面能持续探索问题、完善已有方案。这时候,他们选择了Excel。

本来我看完这篇讲Excel的文章就准备谈点感想,巧合的是,后来又看到一篇“神似”的文章,You are not Google。作者强调的是,别盲目崇拜那些大公司吹得神乎其神的技术,真正重要的是理解你的问题。这个主旨,和上面文章里对Excel的“吹捧“其实是一致的。

你知道GFS和Map/Reduce,但是你知道它们是为了解决什么问题的吗?是为了计算、存储、索引所有的网页(那个时候大概有8000万)。你知道SOA,但是你知道亚马逊什么时候上的SOA吗?那时候亚马逊已经有7800名雇员,年营业额超过30亿美元了。你只知道数据库集群、NoSQL,但是你知道吗?Stack Exchange在2016年,面对2亿的日访问量,只有4台SQLServer……

好了,现在我要回到题目,说起“微服务”了。

微服务很新,微服务很潮,微服务很高大上。我在面试架构师的时候,很多候选人说到微服务,都可以侃侃而谈,各种新鲜的名词、概念、框架止不住地蹦出来,却没法回答几个问题:为什么微服务会崛起?什么时候应当实行微服务?实行微服务要注意什么?甚至,连微服务与SOA的关系是什么都搞不清楚。

要知道,架构师并不是“框架和解决方案推广落地人员”,他是需要做决策的,软件开发中,架构决策对系统的影响往往是至关重要的,一旦出现问题,后果可能相当严重。所以,合格的架构师对于微服务,不但需要了解现成的方案和概念,更应该真正的问题是什么,决策的依据是什么,然后才能知道,自己的决策是否合理。

在我看来,微服务对SOA既是延续也是更新。在我们谈论SOA的时候,谈得更多的是一种设计理念,它要求脱离软件本身的限制,从抽象的“服务”角度来进行思考和设计。从此,我们可以在更高更抽象的层面上来思考如何用软件解决问题,不再时时处处受到技术的掣肘。然而,SOA谈论了多年,一直没有看到具体的、公认的、合理的落地案例。

许多谈SOA的书里都会讲到一个概念:ESB。希望有一天,软件服务也可以像硬件服务那样,有一条通用的总线,然后各种服务只需要简单接入就可以了。但是这或许只是一个美丽的梦想,真正投入使用的ESB其实相当少。

微服务的兴起,很大程度上对应着我们在探索未知领域、探索未知问题脚步。我们无法全知全能地知道,系统的什么部分、哪个环节,在什么时候会成为障碍或瓶颈,但是,我们又必须迅速地发现这些障碍或瓶颈,解决它们,同时保证整个系统的稳定。把系统拆分为一个个微服务,正是为了解决这样的问题,它让我们可以聚焦在具体部分和环节上,又限制了复杂性,避免了“牵一发而动全身”的尴尬。

仔细思考就会发现,微服务的兴起,也是对ESB思路的颠覆。ESB强调的是“重通讯轻终端”,微服务强调的则是“重终端轻通讯”,数据通讯一般只是通过简单的HTTP进行,终端对于通讯总线并没有特别强的业务依赖。这样确实降低了耦合性,但也对终端提出了更高的要求。

以前大家只习惯于写一点业务逻辑代码,生成几个类库,放到巨大的单体系统里就可以放心了。进行微服务改造之后,你的这点业务逻辑代码只是服务的核心,既然名曰“服务”,就得五脏俱全,既然名曰“微服务”,就得螺蛳壳里做道场。

换句话说,服务必须能独立部署、独立维护、方便扩展。你得在服务的边界清晰和技术限制之间做出权衡,你得搭建完整的监控,你得考虑高可用性,你得选择通讯机制,你得分析负载压力,你还得仔细规划容量…… 身为架构师,一门心思考虑分家,一味鼓吹分家的各种好处,绝对是不称职的:分家过日子当然潇洒,但自己当家却不知道柴米油盐贵,这是绝对要饿死的。

最后讲个有意思的事情,这些年我有好几个技术很好对微服务理解很深刻的朋友,去了创业公司首先做的事情往往都是“技术的倒退”:就这十来个人、七八条枪,还折腾什么微服务?快别扯淡了!

附:原文链接
The Unbunlding of Excel
You are not Google

Yurii

View Comments

Recent Posts

德国生活点滴:歧视比你想象的要复杂(续)

在上一篇文章里,我列举了一些种族歧视现象的亲身经历,引发了许多读者的讨论。但是让我略感遗憾的是,许多人大概没有注意文章的标题,没有觉察到关键是“比想象的要复杂”,所以直接给出了一个简单的论断。 我的本意绝不是强化已有的简单粗疏的刻板印象,而是希望让大家知道,种族歧视这回事,有许多的侧面和细节。了解这些侧面和细节,有助于我们形成更立体的认知。 于是就有了下面这些内容,希望能引发大家的思考。 一 种族歧视是一种最简单粗暴的歧视。 许多人都知道,“歧视”的英文是discriminate,准确的意思是“区别对待”。既然要区别对待,就自然首先必须有办法区分。目力所及,似乎没有人愿意“区别对待”与自己完全同样的人,而总是要先找出一点区别来,再实行区别对待。 所以,种族、口音、家庭出身、经济能力等等各种因素,都可以成为“区别”的指标,由此催生出区别对待。在这些因素当中,种族大概是最容易识别的特征——判断口音需要等对方开口,家庭出身、经济能力等等因素就更是要全面接触才可能了解。唯有种族,具体来说,绝大多数时候是相貌和肤色,是可以远远一眼就望见的。 也恰恰是因为这个原因,种族歧视特别容易引起反感。 这些年来,我得到的一条重要的生活经验是,如果你希望指出对方的问题,但又不纯粹是为了激怒对方,那么最好不要归因为一些木已成舟,对方无法改变的因素,否则对方多半会恼羞成怒。 举个例子,你觉得某人的口语表达还可以更好一点,完全可以直接给出具体的建议。但是如果从“经济不发达地区来的人就是口语差”,或者“个子矮的人就是没自信心来表达”,那几乎一定会制造矛盾。因为“口语表达”是可以改进的,加以锻炼将来肯定更好,而“不发达地区来的人”和“个子矮的人”就像烙印一样,是无法摆脱的。这种话说出来,对方哪怕有意愿改进,也会觉得无奈甚至恼怒。 种族歧视也是这样,“种族”同样是一种烙印,是无法摆脱的。所以当对某些人的判断与种族挂钩的时候,他或她必然感到无奈甚至愤怒。况且老话说“人上一百,形形色色;人上一万,千奇百怪”。哪怕是同一个种族的人,也可能在肤色、相貌之外完全找不到相同点。先入为主地用种族去对其他人下判断,无论是从情感反应上,还是从逻辑上,都是站不住脚的。 (more…)

4 days ago

德国生活点滴:歧视比你想象的要复杂

去年初的时候,小朋友冰球俱乐部来了个新教练Robo。Robo来自加拿大,总是一副很健谈很乐观的样子,而且很喜欢放音乐,把整个训练场搞得热情四射。最关键的是,小朋友们好像都很喜欢他,不但许多动作耐心示范,对每个人的指导也相当到位。而且,他的英语很好,人又很喜欢开玩笑,所以我们交谈很多,他总是跟我说:“你家的小朋友超级酷的,不要给他太大压力,只要他自己运动起来足够自在,能够持续练下去,就是最好的。” 没想到的是,到去年9月份,Robo忽然神秘失踪了,没有任何征兆,也没有任何说明,就此人间蒸发了一般。问其他的教练,也是语焉不详。小朋友训练完,偶尔会失落地跟我说“好久没看到Robo了,不知道他哪里去了。” 3月份的时候,一个偶然的机会,我又见到了Robo,虽然当时时间很紧张,只是打了个照面,但我要他留下了联系方式。 当天晚上我问他:哥们,你怎么忽然就不见了,大家都很想你啊。 过会儿我收到他的回复:我也很想念小孩子们,你儿子很酷……我现在没在那个俱乐部了,因为其他几个教练总是或明或暗地针对我,仅仅因为我的肤色,这是我受不了的。 (more…)

4 days ago

在德国, 全远程+共享空间办公,是什么体验?

注:原文发布于2023年1月16日 到1月份为止,我已经体验了几个月的全远程+共享空间办公了。有不少朋友听说之后很有兴趣,问我到底是什么感觉,所以我简单介绍下个人的体验。 背景 2019年末、2020年初开始在全球流行的Covid-19对远程办公来说,绝对是黑天鹅一般的存在。因为疫情导致的社交隔离措施,极大影响了各大公司的正常运转。 所幸,IT类公司受到的影响比较小,只要求员工“面对屏幕编程”,不必亲临现场。所以,许多IT公司也谨小慎微地开展了远程办公的试验。 从我所知道的结果来看,不少美国公司并不特别喜欢远程办公,比如Google,一旦社交隔离措施有所放松,就忙不迭要求员工回到办公室,盖因为公司认为远程办公严重影响合作效率。 与此相反,不少德国公司反倒是逐渐适应了远程办公的节奏,纷纷降低对员工“到办公室上班”的要求,许多公司甚至可以支持百分百的远程办公。 这里要提到的是,德国公司说的“远程办公”往往是货真价实的“远程”,而不是一些人理解的“家和办公室在同一个城市,只是不用去办公室”而已。 因为德国IT行业缺人严重,而且许多德国公司并没有那么“互联网”,而是依托实业开展业务,所以据我所知,目前不少公司非但没有裁员,反而都在大力招人。 (more…)

4 weeks ago

成年人找工作,不值得那么多愁善感

注:本文发布于2023年2月6日 最近硅谷几大公司都在裁员,看了些报道,被裁的员工真是不好过。损失经济来源不说,有些人还面临身份问题,这可真是屋漏偏逢连夜雨。 我也留意到,不少被裁的人会不停追问自己:为什么我会遇到这样的事情?为什么这样的不幸会降临到我头上?…… 实话说,我挺能理解这种态度。这挫折如此巨大,似乎又来得全无预兆,不由得让人对命运、对人生、对世界产生深重的怀疑。尤其是对已经走入社会,取得一定成就(如果非要抠字眼,那就用“进展”吧)的人来说,更是如此。 但是我更想说,如果被裁员了,当务之急是赶紧找到下一份工作,哪怕只是机械地行动。要知道,成年人找工作,容不下那么多愁善感。 我之所以这么说,是有切身经历为基础的。之前我讲过找德国工作的经历。最开始是信心十足的,因为虽然毕业多年,手艺没丢,基础还在,随时打开leetcode,中等难度题目基本都不在话下,不但能解对,解法也基本接近最优。既然网上都说“刷题就能找到工作”,估计自己应该没大问题。 没想到真的找起工作来,仍然充满了意想不到的挫折。如果不相信,我且举几个例子吧。 (more…)

4 weeks ago

我读《园丁与木匠》

虽然早就听说《园丁与木匠》是关于育儿的好书,但一直没开始读。最近终于翻开这本书,才发现属于“拿起就很难放下”的类型,加班加点读完,收获不少。 关于这本书的价值,已经有许多书评讨论过了,所以我想略过微言大义、长篇大论的叙述,谈谈我印象最深,也是最打动我的三点细节。 第一,儿童的学习方式 小孩子觉得拧螺丝很好玩,想自己动手拧一颗螺丝。于是,他打开了工具箱,对着琳琅满目的工具,他不知所措。一会儿摸摸钳子,一会儿试试扳手……这时候,旁边的父母应当怎么办? 在大多数情况下,父母大概会直接告诉孩子,“亲爱的,你应该用螺丝刀,来,我告诉你”。耐心一点的父母,大概会潜心观察一段孩子的举动,再设法“引导”他到正确的工具上来。在父母眼里,孩子当然不可能一开始就找对正确答案,所以做各种尝试也是情有可原。但是另一方面,也不应该“在错误的路径上摸索太久,浪费时间”,应当“迅速识别出正确的答案”。 无论父母有多少耐心,在他们眼里,孩子找到拧螺丝的工具的过程,都是个“不断接近正确答案”的过程。这个过程越短,孩子就越“聪明”,或者说“学习效率”就越高。 (more…)

4 weeks ago

再见,或许就是再也不见

陈皓(Haoel,网名“左耳朵耗子”)上周六因为突发心梗去世了,享年47岁。 我跟他虽然聊过好些次,但只是微信好友,从未见过面。回看微信记录,当年稀松平常的一声“再见”,已经成了“再也不见”。 许多人在缅怀他,许多文章提到他的时候,会用到“骨灰级程序员”、“技术大牛”这样的称呼。但如果仅仅用这两个词描述他,断然难以解释,为什么他的突然去世,会引发互联网上怀念的狂潮。 所以,我更愿意按照自己的经验,把他描绘为“有坦诚追求,兼具趣味、操守、胸怀的技术人”。恰恰是因为这样的人在这个年代太稀少,而这些品质又让众多人赏识和受益,大家才会如此地怀念他。 这个年代,做技术(仅指狭义的IT)的人很多,愿意分享的人也不在少数,其中不少还可以算世俗意义上的“成功者”。 但是,若仔细去看他们分享的内容,总感觉不够真诚。总感觉作者希望往高深了靠,目的也没有那么纯粹。你若提一些小白问题,迎来的往往是“你怎么连这都不知道?”的反问,或者“要谈这个问题,你先去看几本书再说吧”。话是这么说没错,但无数的初学者也往往因此打了退堂鼓。 但是陈皓的分享不同。我已经不止一次地看到有人提起,他分享——更准确说,是“创作”——的内容质量很高,而且总能做到“深入浅出”。哪怕是小白读者,看完也确实能有收获,如果还有兴趣,更可以跟着文末的链接,顺藤摸瓜探究更广阔的世界。 这让我想起我佩服的一位记者说的:记者写文章的最高境界,就是不表达自己的观点,因为记者的观点应当来自于他的素材。只要把这些素材摆出来,读者读完报道,观点就自然形成了。要做到这一点,需要对素材有足够的信心和把握,外加真诚和坦荡。 能做到这一点的记者,着实不多。陈皓虽然不是记者,他写的技术文章却能让读者得到类似的结论——要知道,技术讨论往往是非常容易擦枪走火的——可见他运用素材和逻辑的功力,以及更重要的,他的真诚和坦荡。 (more…)

4 weeks ago