拉卡拉取得数据处理专利,提升了大数据处理作业的处理效率

拉卡拉取得数据处理专利,提升了大数据处理作业的处理效率
2024年06月18日 03:40 金融界网站

转自:金融界

本文源自:金融界

金融界2024年6月17日消息,天眼查知识产权信息显示,拉卡拉支付股份有限公司取得一项名为“数据处理方法、装置、电子设备、存储介质及程序产品“,授权公告号CN112799820B,申请日期为2021年2月。

专利摘要显示,本公开实施例公开了一种数据处理方法、装置、电子设备、存储介质及程序产品,方法包括:确定数据产生端在数据写阶段产生的数据分区中的数据量;将数据量大于或等于第一预设阈值的数据分区确定为目标分区;生成多个任务标识,并建立多个任务标识与目标分区中数据之间的映射关系;将多个任务标识分别分配给不同的数据处理任务,以便在数据读阶段由数据处理任务根据映射关系从目标分区读取所对应的数据。该技术方案可以通过启动多个数据处理任务并行对该目标分区中的数据进行处理的方式,解决Shuffle阶段由于某个数据分区中发生数据倾斜而导致对应的大数据处理作业效率低下的问题,提升了大数据处理作业的处理效率。

MACD金叉信号形成,这些股涨势不错!
海量资讯、精准解读,尽在新浪财经APP

VIP课程推荐

加载中...

APP专享直播

1/10

热门推荐

收起
新浪财经公众号
新浪财经公众号

24小时滚动播报最新的财经资讯和视频,更多粉丝福利扫描二维码关注(sinafinance)

股市直播

  • 图文直播间
  • 视频直播间

7X24小时

  • 06-26 键邦股份 603285 --
  • 06-24 安乃达 603350 --
  • 06-17 爱迪特 301580 44.95
  • 06-17 永臻股份 603381 23.35
  • 06-11 中仑新材 301565 11.88
  • 新浪首页 语音播报 相关新闻 返回顶部