云原生+容器化+无服务器化——易点天下云广告平台发展之旅

　　易点天下是怎样一家公司？在电商跨境领域，可能无人不知、无人不晓！因为排名前20的中国跨境电商都是这家公司的客户，包括阿里巴巴、腾讯、网易、字节跳动、百度等等。说白了，你的企业要想出海，想把东西卖到其他国家，一定会想到易点天下。

 

　　作为全球领先的第三方独立广告商，易点天下的业务覆盖200多个国家和地区，涉及 70亿以上的独立设备，帮助广告主带来了5亿以上的效果转化，日广告展示次数为10亿以上。可以说，易点天下已经是一家名副其实的“数智化企业”，是跨境电商、工具应用、内容分发和游戏等行业在移动广告平台投放方面的首选。

 

　　问题是，这样一家业务复杂、规模庞大的公司，该如何部署其IT基础架构？答案是公有云！

 

　　企业上云之初，存在三大挑战

 

　　“广告平台上的所有业务系统都部署在云上，是真正的全云架构。” 易点天下联合创始人兼CTO 王一舟介绍道，公司从营销业务开展之初就在使用公有云，以亚马逊云平台为基础来部署整个IT环境。

 

 

 

　　易点天下业务始于2011年,最早致力于互联网领域，2013年开始专注于移动端的广告营销，砍掉了传统互联网领域的业务，服务了昆仑万维、猎豹移动等重点客户，曾帮助猎豹移动获得了全球数以亿记的用户。目前，该公司主要分为两个大的业务板块，一部分是效果广告，主要和广告主合作，通过广告主认可的商业模式进行结算，包括应用下载、安装，甚至要带来成单和消费；另一部分是直接的品牌广告服务，包括创意策划、媒体投放、公关关系服务、活动执行等。其中，效果广告是主营业务，需要易点天下能在所触达人群范围内完成快速交付，让用户在短时间内知道这个品牌，有了解的欲望，能够互动。

 

　　从2015年开始，易点天下开始和亚马逊云科技正式合作，直接把业务放到公有云，而没有像其他大型企业一样，购买服务器、网络等IT基础设施，自建自己的机房。

 

　　“之所以选择公有云，是因为公司的业务覆盖全球，不能在全球几百个国家都去找当地的供应商，自建自己的数据中心。” 王一舟说道。

 

　　易点天下致力于为客户提供全球营销推广服务，通过效果营销、品牌塑造、垂直行业解决方案等一体化服务，帮助企业在全球范围内高效地获取用户、提升品牌知名度、实现商业化变现。Google、Facebook、巨量引擎、Twitter、Pinterest等在内的全球头部与中长尾优质媒体和平台都是易点天下长期稳定的合作伙伴，可为用户提供覆盖全媒体矩阵的移动端流量，包括优质头部流量、垂直领域细分流量、长尾流量等。但是，到了2017年、2018年，公司业务开始高速发展，原有的云技术支撑能力开始出现了各种挑战。

 

　　由于易点天下的业务分布于全球各地，不同地区的网络、基础设施能力也存在差异，如何提供一致性的服务体验，直接影响广告主的收益。另外，易点天下的核心业务是效果广告，所投放内容必须要打动用户，完成转化。如果广告效果不好，就意味着公司没有收入。如何进行精准定位，满足用户的个性化需求，打造千人千面的智能化营销效果？如何有效管理海量数据，对大数据进行深度挖掘？如何在高并发场景下，应对峰值挑战？易点天下开始寻找可持续优化和迭代的解决方案！

 

　　大体来看，易点天下面对的第一个挑战是来自大数据层面。在庞大数据规模下，全球网络用户已突破40亿，高峰期网络数据要承受每秒百万次的业务请求，这意味着公司的数据仓储随便拉出来一个，都是PB级的数据，如何把这些数据用好，这是一个天大的难题。由于数据量太大，给数据分析带来了庞大的处理压力和成本问题。如何在优化成本基础之上，产生对业务确实有帮助的数据分析结果，这是整个公司的业务命脉。

 

　　以特斯拉营销为例，大多数消费者不愿意把自己的消费行为暴露在网上，易点天下会对用户的性别、年龄和兴趣爱好进行分析，并且要不断尝试、调优、分析，寻找目标客户。如果把广告投放到喜欢汽车的受众人群，你会发现美国某一地区接受度会更高一些，而欧洲的某一地区接受度会低一些；接受度高的地区，转化率也会更高。广告主可以针对真实数据反馈，来调整他下一步的市场投放计划。

 

　　所以，对于广告营销平台来说，不只是把数据收回来，还要有在毫秒级别之内去做大数据的统筹和分析能力，去做多维度的组合和查询反馈，进而帮助广告主去有效拓展他的市场。

 

　　第二个挑战是AI，都说AI和大数据是一对“孪生兄弟”，在具体的业务落地过程中，确实如此。从大数据的角度看，要思考如何把数据收上来，做快速的分析和计算，但随着业务规模的不断扩展，效率提升成为企业切实要解决的最大问题之一，于是AI成为不二选择。AI虽然是近几年才比较火，但在广告领域里其实已经是一个用了几十年的成熟技术，核心内容是算法和模型。如何把业务流程通过在线模型、在线预测的方式变得更加自动化、智能化，让广告处理数量实现指数级上升？单靠人来解决根本无法完成！而更加成熟的AI技术，可以让业务预测模型的精准度进一步提升。尤其是针对TB和PB级的数据，要对整个过程进行特别清晰的调参，需要用到大量的工具和信息群来完成，只靠人的力量，无法完成快速迭代需求，对每个模型进行快速训练。

 

　　第三个挑战是来视频创意技术层面。在文字及图片模式下，易点天下可以进行多维度的拆解和分析；但有了视频以后，如何对模型进行有效分析和优化，是一件特别难的事儿。

 

　　云原生+容器化+无服务器化降低了总体运营成本

 

　　为了从根本上解决企业当前业务难题，易点天下重新调整了底层的技术架构，把头部媒体、中长尾媒体和平台效果营销服务全部交由流量网关统一接入。流量输入进来后，第一个环节要经过反作弊的清洗， 然后再进行广告的召回。其中，大数据处理和模型部分由算法引擎来完成。所以，素材库和DMP（Data Management Platform）的数据都会进入到算法引擎当中，由算法引擎进行智能出价。

 

　　在整个流程部署过程中，DMP是效果广告智能化的重点环节，主要以用户标签的形式打标。换言之，流量网关只能说明用户打开了一个浏览器或者有一个应用，广告有展示的机会，但只有知道背后打开的人是谁，喜欢什么，才能真正瞄准精准用户。这需要易点天下基于自身的业务和第三方合作伙伴的数据进行特征抽取。问题是，易点天下有数千个广告主，每个广告主都有不同产品，有不同的需求，甚至在产品的不同阶段会有差异化的诉求，如何快速满足每个广告营销目标？ DMP做出了重要贡献，能够实时调整预测模型，按照用户的不同维度满足快速打标参数的需求！

 

　　不管是特征抽取、调参优化、算法、模型训练与部署，还是全链路的日志追踪，底层技术全部构建在亚马逊云平台上。尤其是Amazon SageMaker，已经成为易点天下内部模型训练和机器学习的最核心应用平台，为易点天下提供了从数据采集、流转、抽样等工作的完整工具集。工程师可以基于SageMaker进行超级参数调优，能让一次模型训练产出很多组不一样的结果。借助SageMaker，技术人员可以在一个平台上完成所有操作，进一步提高了训练速度和调参的效率，让整个模型训练交付成本下降了60%以上。

 

　　另外，不管是公有云还是本地的IDC，峰值过后总有一些服务会出现闲置，但亚马逊云科技提供了全托管的竞价实例功能，让技术人员无需关注训练任务的连续性，充分利用竞价实例节省成本，这是亚马逊云科技带来的差异化优势。和传统IDC提供商不同，亚马逊云科技在一个location里放了数以万计、甚至是百万计的服务器，来确保客户有足够的资源可以申请。使用者可以针对闲置的服务器，给出一个低于日常租金的竞价价格去使用，这样能极大地降低用户的使用成本。通过该应用，易点天下的综合运行成本降低了65%以上。

 

　　当然，除了Amazon SageMaker，其他很多应用也做出了重要贡献，包括Amazon EMR、Amazon Managed Blockchain、Amazon EKS、Amazon Fargate、Amazon Lambda等。比如：通过Amazon EMR，易点天下实现了跨区域的数据收集、整理、统一治理，高效地管理PB级数据。通过使用Amazon Managed Blockchain，易点天下无需从零开始搭建区块链生产环境，就管理各类数据资产，降低内部管理风险和外部审计成本。Amazon Quantum Ledger Database (QLDB)分类账数据库，则提供了完整的信息验证和追溯审计机制。

 

　　总之，通过一系列世界级领先服务，易点天下实现了计算架构的云原生化、容器化和无服务化。由于计算资源可弹性伸缩，一旦有广告请求触发，就有足够的计算资源对广告需求进行全方位的支持。