缓存技术在华为公有云环境中的挑战与应用

12月1日，ACMUG & CRUG 2018 技术沙龙全国巡演第十站在西安举办。华为云中间件产品经理 Kevin 在会上带来了《缓存技术在华为公有云环境中的挑战与应用》主题演讲，为大家介绍和分享了华为云分布式缓存服务（Distributed Cache Service，简称DCS）的应用与挑战。

 

 分享亮点     

• DCS缓存体系结构和使用模式

• 使用案例

• DCS的挑战与探索

   

华为云分布式缓存服务DCS作为华为云中最受欢迎的服务之一，为用户提供即开即用、安全可靠、弹性扩容、便捷管理等的在线分布式缓存能力。以下是本次主题演讲的主要内容：

 

DCS缓存体系结构和使用模式

目前华为云分布式缓存DCS提供了Redis、Memcached和内存数据网格等多款引擎，供开发者选择。华为云分布式缓存DCS除了提供通用缓存场景外，在以下模式上实现了突破：

• 边缓存

• HTTP Session会话与复制

• 改变数据抓取

• 只通过分布式缓存写入数据库、处理分布式内存并行计算Map reduced

• 类SQL查询

 

 

最新发布的华为云分布式缓存DCS2.0重新定义了缓存架构，为用户提供性能更强劲、服务更可靠的分布式缓存服务，主要特点有：

• 1.8秒创建一个缓存实例

• 2.缓存操作300% faster（无缝HW、SW/OS集成）

• 3.按需扩展（动态增加新缓存容量）

• 4.强大的安全性：多租户隔离；通过缓存溢出、缓存持久化和alert/notification的SLA保证

   

引擎和使用案例

 

 

 

•     案例一

背景：某APP业务应用部署在华为公有云上，由于DB延迟导致请求峰值对业务造成影响，高达500000的并发量使数据库成为瓶颈。

解决方案：在使用华为云分布式缓存DCS后，性能和并发提升十倍，大大减轻了数据库的负载压力，加速了应用访问。

 

 

•      案例二

背景：某搜索引擎提供商需要大量收集和分析业务数据（如新闻、社交媒体、博客、聊天室、在线论坛等），业务量呈指数级增长。而在此过程中，由于大量采集数据冗余，流程、建模和分析时间大幅增加，导致业务低效。

解决方案：该搜索引擎商存在大规模数据访问，对数据查询效率要求高。使用华为云分布式缓存DCS能够有效提高数据查询效率，降低数据库存储成本。使用华为云分布式缓存DCS后，该搜索引擎商节省了近70%的部署成本，数据流程效率提升了一倍。

 

DCS的挑战与探索

 

总体来说，华为云分布式缓存DCS面临的挑战包括：

• 公有云IMDG生态建设

• 企业云转型（从私有云到混合私有云再到公有云）

• 跨云提供商迁移

• 更可靠、可预测、智能、可互操作的智能缓存

• 硬件优化（FPGA、AEP平台、缓存卸载等）

 

华为云分布式缓存DCS面临的探索有：

• 缓存用Write-through/Write-behind方式写入

• 数据变更捕获

• 智能缓存 OLAP 、缓存流式数据和实时数据分析

• 将缓存服务从一个云提供商无缝迁移到另一个云提供商

• 新介质AEP（non-volatile内存NVM技术）在缓存中的使用

 

传统应用缺乏外部公共接口，传统数据中心基础设施的独立性较为薄弱，跨云缓存服务提供商的缓存服务和缓存数据的热迁移还不够公开透明等等，以上列举的问题都是华为云分布式缓存DCS需要更多地关注和解决的，以便为用户提供更好的服务。

 

华为云分布式缓存DCS会一直在缓存技术领域不断探索和追求，为用户提供高可靠、高性能、企业级的云缓存服务，帮助企业应用快速上云，从容面对数字时代的转型和挑战。