gParallelgparallel是一个针对具有复杂流程或逻辑的单体式信息检索系统而设计的并行任务调度框架。使用Meta Programming技术根据任务的输入和输出自动推导依赖关系,生成DAG(Directed acyclic graph)并进行并行任务调度。
大家好,我是来自微博视频平台的黄阳全,今天分享的主题是微博视频处理系统云原生之路。我在2017年加入微博研发中心,负责微博视频基础组件的开发与维护,多次参与了微博视频架构升级,主导了微博视频中台的建设。
如果缺乏有效的数据整体架构设计或者部分能力缺失,会导致业务层难以直接利用大数据大数据,大数据和业务产生了巨大的鸿沟,这道鸿沟的出现导致企业在使用大数据的过程中出现数据不可知、需求难实现、数据难共享等一系列问题,本文介绍了一些数据平台设计思路来帮助业务减少数据开发中的痛点和难点。
《中国移动“1+X”隐私计算平台纳管集成规范》于2月10日正式发布,该规范是中国移动牵头组织业内技术伙伴亚信科技、富数科技、蓝象智联、数牍科技、同盾科技等多个业内技术合作伙伴联合编写,主要基于1+X架构的互联互通分级纳管模式展开说明。