2014 年微博上市。这本来应该是一个很漂亮的节点。公司从 2009 年上线到 2014 年登陆纳斯达克中文互联网终于有了一个足够大的社交媒体平台。但对我个人来说2014 年更深的记忆不是上市钟声而是另一个名字的影子今日头条。今日头条 2012 年 8 月上线。最初它看起来只是一个新闻聚合 App可它真正厉害的地方不是“新闻”而是推荐。它把内容消费从人找内容进一步推向内容找人。微博当然看到了这个方向。微博头条是一次很早的反击我参与过微博头条作为后端负责人负责 App 接口、数据、推荐等几乎所有后端工作。这句话听起来范围很大因为当时团队确实不大。团队最多的时候也就五六个人。一个这么小的团队要做一个对标今日头条方向的产品压力可想而知。微博头条是公司 S 级项目每周都需要当面向 CEO 王高飞汇报。这说明公司高层并不是看不到趋势。问题在于看见趋势和真正投入资源是两回事。今日头条把推荐信息流当成主战场整个公司围绕这件事组织微博头条在微博内部则更像一个重要但不可能独占资源的项目。这就决定了很多事情。推荐系统不是一个功能点而是一整套能力内容供给、用户画像、召回、排序、冷启动、反馈闭环、标注、审核、运营、实验平台、数据基础设施、客户端体验。任何一个环节短板明显整体效果都会受影响。五六个人可以做出产品原型可以把链路跑起来也可以快速迭代一些策略。但要和一家把全部资源压在推荐上的公司竞争几乎不可能。平台公司的惯性微博当时有很强的资产用户、关系链、热点、明星、媒体、内容生产者。这些资产很宝贵但也会形成惯性。一个社交媒体平台很自然地会相信关系链。用户关注谁就看谁热点在哪里就推哪里名人发了什么就传播什么。这套逻辑当然有效也正是微博能起来的原因。今日头条的逻辑则不一样。它不要求用户先建立复杂关系链而是直接用推荐把内容推到用户面前。这不是产品细节差异而是分发权的变化。关系链分发里用户选择一部分来源算法推荐里平台替用户不断试探兴趣。前者更像社交网络后者更像内容机器。两种模式都可能成功但组织基因不一样。微博要做头条式产品就必须在已有社交媒体逻辑之外建立另一套内容分发能力。这件事难度很大。小团队能做什么站在工程角度小团队最现实的做法是先把闭环打通。客户端能拿到内容后端能组织结果数据能回流推荐能更新实验能比较问题能定位。这些听起来朴素却是所有推荐产品的基础。我当时负责的后端范围很宽从 App 接口到数据再到推荐都要参与。这种工作很锻炼人因为你不能只站在一个模块里思考。接口设计不合理会影响客户端体验数据回流慢会影响推荐迭代推荐结果差会影响留存系统不稳定再好的策略也无法验证。这段经历让我更理解一个道理很多产品竞争最后不是某个算法公式的竞争而是整个系统迭代速度的竞争。看见未来也可能输微博并不是没有看见未来。它看见了信息流看见了推荐也尝试过反击。但看见不等于抓住。一个方向如果没有足够资源、足够组织优先级、足够长期耐心就很难真正打穿。这对我后来理解平台公司很重要。大公司并不是因为不聪明才错过机会。很多时候聪明人很多判断也不差。真正困难的是公司愿不愿意让一个新方向挑战原有主线愿不愿意为不确定性持续投入愿不愿意接受短期内看起来不够漂亮的指标。2014 年的微博头条是我亲身经历的一次答案。同一年Apache Spark 1.0 发布。对做数据平台的人来说这是一个很值得记住的节点数据处理不再只是 Hadoop MapReduce 那一条路内存计算、交互式分析、机器学习和更快的迭代方式开始变得更具体。连城后来在 Intel 物联技术研究院研究 Spark 并参与开源贡献这条线也让我对 Spark 多了一层个人记忆。下一年我会继续在数据平台和业务系统之间打转。大数据平台看起来很重但越是在推荐和信息流竞争里越能看出它的必要。2014 年 IT 大事记微博在纳斯达克上市。2014 年 4 月微博上市。中文社交媒体从产品和社区阶段进入资本市场叙事也让移动社交平台的商业化压力更清晰。Kubernetes 开源。Kubernetes 在 Google 开源容器编排开始从内部大规模系统经验走向整个云原生生态。后来的服务部署、弹性伸缩和平台工程都会被它深刻影响。Docker 1.0 发布。Docker 1.0 让容器工具链从开发者试验更明确地走向生产使用。镜像、容器和部署一致性开始成为后端工程的重要语言。Swift 发布。Apple 在 WWDC 发布 Swift移动应用开发语言进入新一轮演进。它也说明平台厂商会持续用语言和工具链影响开发者生态。Spark 1.0 发布。Apache Spark 1.0 发布数据处理生态继续演进。内存计算、交互式分析、机器学习和更快迭代方式开始成为大数据平台的新方向。推荐信息流竞争升温。今日头条快速成长推荐信息流逐渐成为中文移动互联网的重要产品形态。平台竞争开始从关系链和编辑分发转向算法驱动的内容消费。参考资料Weibo Corporation SEC Form F-1Company history and IPO filingWeibo IRWeibo Announces Pricing of Initial Public OfferingByteDanceCompany historyKubernetes Blog10 Years of KubernetesRed Hat DeveloperA practical introduction to Docker containersApple NewsroomApple Releases iOS 8 SDK With Over 4,000 New APIsApache SparkSpark Release 1.0.0