2023年数智中国AIGC科技周· AI云智上海专场在普陀区召开。活动以“智能涌现”、“算力突围”、“超越现实”三大篇章开启,第一篇章以“智能涌现”开幕、重塑数实融合终极愿景;第二篇章“算力突围”,以AI为引擎,以计算为基石,构筑数字底座;第三篇章“超越现实”,引领“空间计算”新时代,进入“虚实相生”新阶段。
杨冠军 腾讯云存储解决方案专家架构师
针对在AIGC的场景下,如何解决在AIGC训练过程中数据的存储和数据处理的问题,杨冠军从三个方面进行介绍与解读:一是AIGC对存储提的新需求;二是介绍腾讯云可以给用户提供的整体存储解决方案;三是腾讯云提供的整体数据处理方案。
AIGC的新需求:模型训练与应用推理的述求
我国每年产生的数据量呈现非常大的增长趋势,这个前提还是前两年AIGC场景仍未出现的情况。而现在从UGC到AIGC以后,相信整个行业产生的数据量会比这个更为庞大,如何处理这些数据,这些数据怎么应用到系统上?这都对数据存储带来了更大的需求和挑战。
从最初收集的原始数据,基于这些数据做数据处理,产生对应预处理后的数据,然后再给后面的训练模型,可以看到在整个模型训练的过程当中,会带来很大的数据量增长,也带