文章列表

保障IDC安全:分布式HIDS集群架构设计

陈驰
HIDS主机型入侵检测系统是部署在服务器上的安全防护Agent,用来保障服务器安全。在大型互联网公司,面对的是几十万台甚至上百万台服务器规模的IDC时,复杂的服务器环境,网络环境,巨大的数据量给产品带来了哪些技术挑战呢? 阅读全文

数据库智能运维探索与实践

应钢
美团点评DBA团队经历了从人肉运维到工具化、产品化、自助化、自动化的转型之旅,也开始了智能运维在数据库领域的思考和实践。 阅读全文

美团DB数据同步到数据仓库的架构与实践

萌萌 心序 成聪
DB数据是大数据场景下进行数据分析与挖掘的重要数据来源,是ODS层数据的重要构成部分。本文主要从Binlog流式采集和基于Hive的ODS数据生产两方面,介绍美团点评各业务线的DB数据同步到数据仓库的架构和实践。 阅读全文

新一代数据库TiDB在美团的实践

应钢 李坤 昌俊
多年来,基于MySQL构建的传统关系型数据库服务,已经难于支撑美团业务的爆发式增长,这就促使我们去探索更合理的数据存储方案,并实践新的运维方式。 阅读全文

美团餐饮娱乐知识图谱——美团大脑揭秘

仲远
美团NLP中心开始构建餐饮娱乐知识图谱——美团大脑。它充分挖掘关联各个场景数据,用AI技术让机器“阅读”用户评论数据,理解用户在菜品、价格、服务、环境等方面的喜好,构建人、店、商品、标签之间的知识关联,从而构建出一个“知识大脑”。 阅读全文

美团容器平台架构及容器技术实践

欧阳坚
本文主要分享了美团在容器技术上做的一些探索和实践,内容主要涵盖美团容器云在Linux Kernel、Docker和Kubernetes层面做的一些优化工作,以及美团内部推动容器化进程的一些思考。 阅读全文

浅谈大型互联网企业入侵检测及防护策略

弼政
入侵检测是每一个大型互联网企业都要面对的难题。价值越高的公司,面临入侵的威胁越大,一旦发生在数据化的互联网公司身上,其后果也不堪设想。 阅读全文

CAT 3.0 开源发布,支持多语言客户端及多项性能提升

尤勇
CAT(Central Application Tracking),是基于Java开发的分布式实时监控系统。CAT目前在美团点评的产品定位是应用层的统一监控组件,在中间件(RPC、数据库、缓存、MQ等)框架中得到广泛应用,为各业务线提供系统的性能指标、健康状况、实时告警等。 阅读全文

深度剖析开源分布式监控CAT

尤勇
CAT是一个开源的实时监控系统,它侧重于Java应用的监控,目前每天实时处理大约100TB数据。为美团业务线提供丰富的监控报表和告警。 阅读全文

美团大脑:知识图谱的建模方法及其应用

仲远
作为人工智能时代最重要的知识表示方式之一,知识图谱能够打破不同场景下的数据隔离,为搜索、推荐、问答、解释与决策等应用提供基础支撑。 阅读全文

Netty堆外内存泄露排查盛宴

闪电侠
Netty是互联网通信领域无可争议的王者,但是一旦使用方式不对,就会带来灾难。这篇文章,我们经历了一个使用Netty的WebSocket框架(netty-socketio)的 “捉虫(Bug)之旅”,排查思路有一定的通用性,希望对你有所启发。 阅读全文

全链路压测平台(Quake)在美团中的实践

耿杰
本文主要介绍全链路压测在美团点评的实战经验,包括如何提供安全有效的压测环境,模拟线上真实的流量请求,提供多种压测模式的支持,压测过程的实时监控等。 阅读全文

镣铐之舞:美团安全工程师Black Hat USA演讲

Ju Zhu
Black Hat USA 是全球顶尖的安全会议,也是全球黑客心中的“世界杯”和“奥斯卡”。美团安全研究院成员Ju Zhu受邀参加了本次盛会,在议题通过率不足20%的严苛筛选条件下,带着本次演讲的议题登上了Black Hat USA 2018的国际舞台。 阅读全文

Oceanus:美团HTTP流量定制化路由的实践

周峰
Oceanus是美团基础架构部研发的统一HTTP服务治理框架,基于Nginx和ngx_lua扩展,主要提供服务注册与发现、动态负载均衡、可视化管理、定制化路由、安全反扒、session ID复用、熔断降级、一键截流和性能统计等功能。本文主要讲述Oceanus如何通过策略抽象、查询、渲染和分组动态更新,实现HTTP请求的定制化路由。 阅读全文

用微前端的方式搭建类单页应用

贾召
微前端是前端开发中一个比较热门的话题,在美团企业项目中,我们采用微前端的方式,搭建类单页应用。本文讲述了前端HR业务的整个微前端化过程。 阅读全文

美团针对Redis Rehash机制的探索和实践

春林 赵磊
本文主要介绍美团日均万亿访问缓存体系以及Redis Rehash机制和原理,并在Redis Rehash机制方面相关的探索和实践等。 阅读全文

互联网企业数据安全体系建设

赵彦
Facebook数据泄露事件一度成为互联网行业的焦点,几百亿美元市值瞬间蒸发,数据安全是实现隐私保护的最重要手段之一,对安全有一定了解的读者可能也会察觉到,数据安全并不是一个独立的要素,本文介绍了互联网企业的数据安全体系建设。 阅读全文

互联网公司数据安全保护新探索

鹏飞
近年来,数据安全形势越发严峻,各种数据安全事件层出不穷。美团信息安全中心进行了一些具体层面的探索。 阅读全文

美团数据平台Kerberos优化实战

鹏飞
Kerberos 是一种网络认证协议,通过通过传统的密码技术(如:共享密钥),为客户机 / 服务器应用程序提供强大的认证服务。 阅读全文

使用TensorFlow训练WDL模型性能问题定位与调优

郑坤
我们在Hadoop集群上使用分布式TensorFlow的实践中,定位发现了一些系统性能瓶颈导致WDL模型训练速度慢。通过分析瓶颈根源和相应的调优手段,WDL模型训练性能提升10倍左右,同时我们对TensorFlow框架和WDL模型也有了更深刻的理解。 阅读全文