新质生产力蓬勃发展的时代已然到来,支撑新质生产力快速进步的AI和信息通信等核心技术,需要大量的机器学习、数据传输和存储。目前数据传输通信行业的纠错算法采用的是LDPC算法,近日,深圳市领存技术有限公司在秩度量码(MRD码)技术领域取得重大突破,全球首次实现微秒级的编解码性能,纠错能力是LDPC码的一万倍以上,对通信性能提升和数据安全具有颠覆性的意义。
编码领域的科学难题
MRD码是编码理论中的一个高级命题,在通信系统和存储系统中具有重要的价值,世界各地的研究者和科研机构都对MRD码有所研究。但由于其理论的复杂性,一直没有实现从理论到实践的突破。目前,理论界公认的MRD码叫Gabidulin码,它由Ernst M. Gabidulin在1985年提出,但这个编码目前仅仅在各个高校、学术界进行理论研究,无法具体应用,关键制约点在于无法实现快速编解码。
领存MRD码可以在极其微小的算力条件下(例如:几百块钱的树莓派开发机上)实现微秒级编解码性能。
天下武功,唯快不破。只有实现了在网络通信中实用级别的编解码,MRD码才能真正应用于现实世界。领存创始人楚一兵透露,领存与广东工业大学信息工程学院韩国军团队一起经过4年努力,攻克了6项关键技术,最终在龙年春节前夕实现该技术的商业化。
纠错能力提升1万倍以上
领存MRD码技术亮点在于:全球首次实现微秒级的编解码性能,MRD码在随机线性网络的测试结果表明,其纠错能力是LDPC码的1万倍以上,具备商用能力。
MRD码允许实现高效的纠错算法,其错误校正能力达到了设计界限。对此,楚一兵以书架和书来形象说明:
假设你有一个书架,你希望用不同高低、厚薄的书填满它,MRD码的目标类似于找到一个放置书籍的方案,使得即便有几本书丢失或错放,你也能尽可能高效地确定哪些书丢失了,或者哪些书被放错了位置。书架相当于信息空间,每本书相当于信息空间中的一个向量(或矩阵),秩距离可以看作两本书的差异性大小,差异越小的两本书秩距离越小。
MRD码的核心技术就在于保证了码字之间具有最大的秩距离。这意味着,即使书本丢失或错放(类似于在传输过程中一些信息受到干扰或丢失),接收者仍然能够通过剩余收到的信息,如书架上的空隙和剩下的书的排列方式等,来推断丢失的书,甚至是该书的具体尺寸,最大限度地重建原始信息。
这项技术的难点是什么?如何突破?楚一兵表示,从数学上来说,实现的难度主要是MRD码需要在扩展的极高次伽罗瓦体上搜寻原始多项式,一个伽罗瓦体的"次数"表示的是这套体系的复杂程度,“这就好像是在海滩上找特定的一粒沙,在宇宙中寻找一个特定的原子,既耗时又复杂”。
可加快中国新兴产业落地
MRD码的技术突破可以助力新一代信息技术领域的新质生产力的产生。MRD码技术的应用,可以更有效地利用传输带宽,提高数据处理速度和安全性,这将推动各行业在AI、大数据分析、数据传输、通讯等诸多领域的应用,提高企业在全球产业链中的竞争力。
举例来说,使用领存MRD码技术可以大幅提升AI研发进程,MRD码在多跳网络和网络编码应用中可以显著提高数据传输的效率与可靠性,减少传输延迟,满足AI训练过程中显卡内部和卡间数据的准确传输和存储,从而提高模型训练的质量和效率。
使用网络编码和MRD技术,可以助力中国的分布式和云计算走到世界的最前沿,改变高端存储一直被海外巨头垄断的竞争格局。在分布式计算和云服务中,数据的同步和一致性是关键挑战之一,MRD码的强大纠错能力,有助于降低数据丢失或损坏的风险,优化资源分配。
MRD码同样支持新兴科技发展,比如物联网(IoT)、自动驾驶、远程医疗和智慧城市等领域,都依赖于高效、可靠的数据通信和存储,MRD码技术可以为这些领域中大量设备和系统之间的有效数据交换提供强大的算法支撑,加快中国新兴产业的落地。
通过使用领存的MRD技术,相关产业链企业均能够提升自身国际竞争力、加快高质量发展。
“一往无前,不问前程”
MRD码的研发耗时4年多,“感触最深的还是需要以平常心来对待颠覆性创新,闷头前行,不问前程,无论黑夜有多长,上帝总会将阳光从门缝里送给你。”楚一兵说。
鉴于MRD码算法的优越性,其他国家科研团队也会在这方面发力,公司如何保持优势? 楚一兵表示,抖客网,“在科技领域,很难保障一直不被淘汰,我们能做的就是一往无前,不问前程。”
楚一兵告诉记者,领存MRD码技术已经可以立刻商用,没有任何技术障碍。目前,正在设计硬件小型网络提供给用户测试,用户可以很方便地对比出使用MRD码与传统网络性能、安全性、可靠性的巨大差异,用户也可以使用自己开发的传统算法(如LDPC编码)与MRD码的纠错能力对比。目前,国内几家巨头通讯设备供应商、高校都在密切关注领存样机的进展。
原标题:【布局颠覆性技术,领存突破MRD码复杂算法】 内容摘要:新质生产力蓬勃发展的时代已然到来,支撑新质生产力快速进步的AI和信息通信等核心技术,需要大量的机器学习、数据传输和存储。目前数据传输通信行业的纠错算法采用的是LDPC算法,近日 ... 文章网址:https://www.doukela.com/jc/270298.html; 免责声明:抖客网转载此文目的在于传递更多信息,不代表本网的观点和立场。文章内容仅供参考,不构成投资建议。如果您发现网站上有侵犯您的知识产权的作品,请与我们取得联系,我们会及时修改或删除。 |