喜马拉雅 PC端文章详情页顶部23-26

隐私计算助力打通数据孤岛 腾讯正式发布自研第四代数智融合计算平台

为打破数据孤岛实现数据协同,数据安全是重中之重。


腾讯数据平台部总经理蒋杰

腾讯数据平台部总经理蒋杰

数字经济毫无疑问是当下发展的重点,让海量数据真正发挥作用,隐私保护是避不开的一个问题。

“数据孤岛一方面有人为原因,比如竞争导致的孤岛、对技术不信任导致的孤岛;也有技术本身导致的,比如存储介质不一样,还有原数据定义不一样。”腾讯数据平台部总经理蒋杰说,隐私计算的发展将有望打消疑虑,为数据安全开放提供更多可行性。

4月18日腾讯正式发布自研第四代数智融合计算平台“腾讯大数据-天工”。蒋杰表示:“作为新型基础设施的重要组成部分,大数据产业将迎来发展的新阶段。此次发布的第四代数智融合计算平台,将以安全的方式打通数据孤岛,桥接多方数据,以统一的数据处理引擎更高效地挖掘数据价值,以智能化的方式驱动整个数据处理闭环,为开发者、企业、以及政府的数字化、智能化升级打下坚实基础。”

打通“数据孤岛”

“数字经济是在农业经济和工业经济之后,以新一代信息技术和产业为依托的主要经济形态。其中,数据是重要要素,网络是载体和平台,而信息技术的应用就是最为核心的推动力。”中国科学院院士梅宏说。

早在2015年,国务院就发布了《促进大数据发展行动纲要》,党的十八届五中全会更是将大数据上升为国家战略,习近平总书记指出,大数据是信息化发展的新阶段,要构建以数据为关键要素的数字经济,这为我国发展大数据开启了新的篇章。

今年3月全国人大审议通过的“十四五”规划纲要强调要加快发展数字经济,推动新一代信息技术和实体经济的深度融合,推动数字产业化和产业数字化,打造具有国际竞争力的数字产业集群。

“但我们也应该清醒的看到,发展数字经济我们仍不可避免的面临着不少困难,其中数据的共享开放便是首当其冲的难题。”梅宏院士说,放眼全球也是同样的情况,不同系统、不同组织之间的数据共享开放程度普遍较低,由此也带来了信息孤岛问题,海量的数据相互阻隔,难以进一步融合碰撞释放潜能。造成这一现状的原因,有法律法规和政策方面的问题,有观念认识方面的问题,也有技术问题,还有出于数据安全和隐私保护方面的考虑。

为打破数据孤岛实现数据协同,数据安全是重中之重。“腾讯大数据-天工”采用自研隐私计算技术,从机器学习到大数据分析为各个场景提供全方位保护,去中心化的架构则能避免单点隐私泄露风险。目前,“腾讯大数据-天工”可以支持千亿级规模的海量数据训练,性能参数领先业界5倍,在此基础上,提供3072bit业界最高强度加密和TEE硬件双保险,最大限度确保数据安全。

凭借该技术,腾讯大数据相关团队获得iDash 2020世界隐私计算大赛冠军,安全性能领冠全球。据了解,金融级安全强度的腾讯隐私计算技术已广泛应用在医疗、金融风控、数字政务等众多领域。

万亿级数据分析将实现“自动驾驶”

腾讯自身即拥有海量的数据规模,目前腾讯大数据平台日接入消息量超过55万亿,日实时计算量超过65万亿,平台整体算力超过500万核,日分析任务达到1500万。蒋杰表示,腾讯云已经成为国内算力最强的云厂商,同时也是日实时计算量最大的公司。

自2009年开始,腾讯就开始深耕海量大数据处理领域,其第一代大数据平台依托Hadoop生态,围绕离线计算模式化构建出能够稳定支撑小时/天级别的计算任务数据处理平台,该平台在2016年取得世界排序冠军佳绩;2012年前后,腾讯第二代大数据平台通过引入Spark、Storm等实时计算处理框架,让大数据平台处理性能迈入毫秒级别,当时已是国内实时计算量规模第一。

2015年,腾讯第三代大数据平台朝着机器学习发展,其自研机器学习框架Angel成为国内第一个从Linux基金会毕业的顶级AI项目,并推动国内大数据处理正式进入机器学习时代。从2020年开始着手规划的第四代数智融合计算平台“腾讯大数据-天工”。

从离线计算、实时计算再到机器学习,大数据智能化是第四代数智融合计算平台规划的必由之路,腾讯正在构建平台大脑,推动万亿级大数据分析逐步实现“自动驾驶”。从快速发现大数据运行问题到主动发现问题,再到主动解决问题,平台大脑预计可让数据中心研发效率提升60%,运营效率提升50%,平台服务质量提升80%。

但大数据智能化这条路还有很长一段要走。腾讯数据平台部AI平台部总监陶阳宇说,下一步演化的方向是改进易用性,“我们希望隐私计算能够被集成到大数据流程里面去,大家意识不到它的存在就说明它已经很成熟了,我们现在也在朝易用性方面去作,包括我们提供一键化的部署,提供微服务化基于docker云原生的部署,我们都可以支持一键化部署。为什么我们要做全栈?就是希望能够把使用门槛降低,从最初的部署到特征模型到模型训练、发布、预测希望把底层的东西能够做成一个透明化,就像使用Excel一样使用联合计算,我们希望达到这样的地步。

18日当天腾讯还发布了《腾讯隐私计算白皮书》,白皮书由腾讯大数据联合腾讯研究院等内部多部门共同撰写,从隐私计算发展背景、技术体系、重点应用行业和场景、数据安全合规、未来发展前景等多角度全方位探索隐私计算,通过与业界凝聚共识,共同推动隐私计算技术的发展。

转载请注明出处、作者和本文链接
声明:文章内容仅供参考、交流、学习、不构成投资建议。
想和千万钛媒体用户分享你的新奇观点和发现,点击这里投稿 。创业或融资寻求报道,点击这里

敬原创,有钛度,得赞赏

赞赏支持

喜马拉雅文章页评论上方

发表评论
0 / 300

根据《网络安全法》实名制要求,请绑定手机号后发表评论

登录后输入评论内容

快报

更多

2024-04-25 23:02

大商所、郑商所夜盘收盘,棉纱跌超1%

2024-04-25 22:58

市场消息:马斯克将于下周一接受传讯,参与推特此前的裁员和解谈判一案

2024-04-25 22:55

transcosmos集团基于AIGC大模型构建全网舆情监控体系

2024-04-25 22:54

宋城演艺:一季度净利润2.52亿元,同比增长317.33%

2024-04-25 22:51

“美国头号房企”铁狮门正式进军上海高端长租公寓市场

2024-04-25 22:46

《上古世纪:战争》即将进军全球游戏市场

2024-04-25 22:44

本田汽车将在加拿大修建110亿美元规模的电动汽车中心

2024-04-25 22:37

字节跳动:没有任何出售TikTok的计划

2024-04-25 22:37

韩国SK Networks设立人工智能实验室PhnyX Lab

2024-04-25 22:36

现货黄金短线走高8美元,现报2331.5美元/盎司

2024-04-25 22:35

中钢协姜维:当前钢企库存处于历史同期高位,尽快降库存是行业保效益的首要任务

2024-04-25 22:32

美国至4月19日当周EIA天然气库存增加920亿立方英尺

2024-04-25 22:30

三一集团参与新西兰普伦蒂湾的道路建设项目

2024-04-25 22:28

敷尔佳:一季度净利润1.52亿元,同比下降4.77%

2024-04-25 22:27

美股内地教育概念股普涨,新东方、好未来涨超4%

2024-04-25 22:20

美国3月成屋签约销售指数环比增长3.4%,预期0.8%

2024-04-25 22:19

惠而浦跌9%,第一季度净销售额、经调整每股盈利均下滑

2024-04-25 22:18

传祺华为合作官宣落地,2025发布全新车型

2024-04-25 22:13

深圳:大力培育发展新质生产力,强化科技创新和产业创新深度融合

2024-04-25 22:12

IBM一度跌近10%,第一季度咨询业务表现疲软

扫描下载App