服务热线:

大数据存储的全链路数据优化及完成原理

发布时间: 2024-04-07 13:48:29 来源:电竞比分-存储调理

详细信息

  跟着大数据年代存算别离新架构的到来,本论坛将从中国联通、网易、Shopee、bilibili的数据加快管理层的运用实践,结合Alluxio带来的数据缓存层的规划、完成与优化,给广阔的数据从业者带来全链路数据优化到完成原理的多维度展示。本次论坛还将具体评论来自通讯、游戏、电商、视频职业的数据应战,结合Alluxio技能的深化解说,您能够从不相同的范畴的数据应战中找到契合自己的解决方案,并真实了解数据缓存加快层的原理。

  个人简介:范斌是坐落硅谷的开源数据渠道软件 Alluxio 公司的开创成员和 VP of Open Source。参加 Alluxio 前,范斌在 Google 从事下一代大规模分布式存储体系的研讨与开发。范斌博士结业于卡内基梅隆大学计算机系,博士期间在分布式体系算法和体系完成等方向宣布多篇包含SIGCOMM,SOSP,NSDI 等尖端国际会议论文以及多篇专利。

  议题介绍:跟着电信事务的蓬勃发展,运营商继续改善数据剖析架构来应对继续上涨的事务需求。本次共享介绍了联通中心事务怎么根据Alluxio构建数据剖析渠道,在不一起期经过缓存加快与数据编列才能,应对体系扩展性提高、体系功用优化、杂乱环境整合、与多场景交融等范畴的应战。

  个人简介:张策,结业于北京交通大学,2018年参加联通软件研讨院,首要担任大数据渠道的建造与保护。在Alluxio社区担任PMC Member

  议题介绍:扼要介绍网易大数据渠道在特定场景下的需求痛点,共享网易大数据团队现在关于Alluxio的运用场景,以及网易大数据团队对Alluxio作出的优化和未来方案

  个人简介:2020年参加网易作业至今,首要担任分布式数据编列体系Alluxio和分布式查询引擎Impala的开发作业。

  丁天宝,多年大数据经历,触及存储,引擎,调度,大数据开发等等。也有丰厚的后端开发经历。前端也能做一点。

  孙颢宁,曾上任于奇安信集团(原360企业安全),担任HBase的研制与保护作业;现在上任于Shopee,担任Alluxio的研制作业。

  4. 倪子凡/黎磊 bilibili 资深开发工程师/云原生机器学习渠道担任人

  倪子凡,结业于复旦大学。之前在微软Azure storage从事索引服务,现在在bilibili机器学习渠道担任数据加快相关的作业。

  黎磊,现在上任于哔哩哔哩云原生根底渠道,担任机器学习渠道;渠道服务于企业内部广告、CV、NLP、Speech、电商等多个事务;曾上任于微软Azure、网易等公司。

  议题介绍:本次共享会从介绍Alluxio架构和元数据格式动身,介绍Alluxio怎么经过和底层存储之间的元数据同步对上层运用供给一致的数据视图,以及元数据同步的不同方法。一起在此根底上深化介绍Alluxio元数据同步的规划和完成原理。最终介绍Alluxio元数据同步功用的演进前史并针对不一样用户场景给出调优最佳实践。

  个人简介:刘嘉承,硕士结业于哥伦比亚大学,现在上任于Alluxio公司研制团队中心组。发布了Alluxio K8s Helm Chart。参加并主导了一些Alluxio的RPC和内核优化作业。