Hi!请登陆

百度技术沙龙第91期重磅启动 AI人才齐聚一堂共话架构技术

2021-4-27 36 4/27

作为互联网最具技术含量应用之一的搜索技术,每天都在为几十亿的用户服务。这些数据不仅海量且多样化,如结构化数据和非结构化数据。其中,数据的处理和生成都需要架构技术的支持。

4月24日,由百度联合DataFun、京东举办的百度技术沙龙第91期于线上召开,沙龙以“深入浅出话搜索:架构技术最新应用与实践”为主题,邀请了来自百度和京东的多位嘉宾,就百度搜索中台、云原生架构、搜索离线架构、内容架构Serverless化、京东搜索中台化架构等话题进行了深入探讨,也为开发者与企业提供了众多搜索技术架构方面的新思路。

百度自2012年发起技术沙龙活动以来,每月举办一期,已面向超过9100名与会受众举办了共91期活动,邀请了159位行业技术大牛、206位百度技术专家,内容覆盖软件开发、大数据、深度学习等当下热门的技术话题,活动旨在为开发者、技术人员提供一个自由的技术交流和分享平台。

本期沙龙活动中,来自百度的资深研发工程师首先对可观测性进行了介绍。随着业界传统技术架构往云原生架构的迈进,系统的复杂度也随之提升,也增加了把系统状态可视化的难度。在CNCF的云原生定义中,将可观测性当成云原生架构很重要的一个特性。而在超大流量规模下,传统的可观测方案需要使用非常高的机器成本。搜索中台在面临这个问题时,创新性的使用了在离线结合观测的方式,在非常少的资源占用情况下,实现了海量流量的跟踪Trace,兼顾了成本和效果。

随后,从事图片搜索、百度识图等垂类架构工作的百度资深研发工程师为大家介绍了百度视觉检索、图片搜索背后的AI技术,并围绕“图片收录处理中台”分享了架构设计思路,以及大吞吐、高算力背景下的离线流式处理系统,以及千亿级图存储引擎如何解决读写IO瓶颈等内容;从万级别吞吐、弹性计算、业务与架构解耦、复用性等角度提供了宝贵的实战经验。

百度搜索中台内容架构技术的负责人带来了关于百度搜索中台内容架构Serverless化实践内容。百度搜索中台内容计算的Serverless系统是从搜索中台内容架构衍生出来,聚焦于让业务低成本自定义加工处理数据生效系统。整体系统架构分成三个层次:最上层是业务应用层,是以业务全流程研发效率的提升,包括从接入开发、调试测试、问题排查、服务管理等全流程服务效率的提升;中间层服务层,以业务架构(FaaS)和服务架构(BaaS)为基石,实现业务逻辑核服务架构充分解耦的复杂的函数编排,在保证服务质量的同时支持以多种复用方式整合搜索中台内部强大的后端服务功能;最底层是控制层,包括支持极致自动扩缩、自动适配等一系列自动调度功能,以及解决异常问题的发现、分析和处理的智能控制系统。最终让业务享受到Serverless降本增效的技术红利,给业务公司带来更好更快的发展。

最后,来自京东零售搜索架构部的工程师分享了“京东电商搜索中台化架构实践”,介绍了在中台化大背景下,面对大量快速迭代的新业务,京东零售搜索架构如何进行中台化的技术升级。他不仅分享了做搜索中台化的必要性和整体架构、搜索中台化的技术演进之路和讲师踩过的坑等技术干货,并对观众关心的如插件化框架等多个问题进行了详细解答。

相关推荐