宝德智能边缘产品,为破大模型算力之困开良方

时间:2023-11-01来源:本站

AI潮涌,大模型日新月异,但与此同时百战正酣的AI大模型面临着算力不足的困境。于是,如何破解大模型算力之困、加速大模型落地到具体应用场景、如何降低大模型的使用成本等成为业界关注的焦点。此时,智能边缘技术应需而生,成为破解大模型算力之困的又一良方。

宝德智能边缘产品焕新出发,以低延迟、高效率和实时决策为突出优势的边缘技术为基础,深度融合人工智能、机器学习等新技术,将AI能力带到更接近数据和终端用户的地方,有效补充大模型的边缘侧AI算力。




基于边缘计算+AI技术

智能边缘助攻大模型部署和应用


数字化时代,海量数据的产生和处理让传统云计算和数据中心计算的不足日益凸显,边缘计算成为有力补充,它采用分布式计算架构,将计算资源和数据存储等放置在离数据源和终端用户更近的位置,具有即时处理数据、显著降低延迟,高效利用资源、有效降低成本,增强安全性和隐私保护,以及释放远程设备潜力的突出能力。


近年来,AIGC和大模型迅猛发展,其背后需要海量的AI算力支持。期间,如果大模型的训练和推理都在云端,完成后再返回结果给前端的边缘侧,需要的通信时间就较长。所以越来越多的客户选择在云端完成大模型训练,在边缘侧完成微调后再推理并给出结果。这就需要边缘侧设备具有集计算能力与智能技术于一体的综合能力,智能边缘正当其时。

智能边缘将边缘计算与AI、机器学习算法、智能设备、边缘数据中心和网络等结合在一起,能够帮助客户将AI算法和模型部署到边缘侧,在本地进行实时的数据处理、分析和决策,减少对云端的依赖。尤其突出的是,智能边缘可以提供更高效率、更低延迟、更优的隐私保护和数据通信能力,实现智能感知、智能分析和智能决策,堪称大模型部署和应用的“神助攻”,已经在智能制造、智慧交通、智能电网、智能安防、智慧社区、智慧城市等数据传输及处理量极大、对数据实时处理能力要求极高的领域拥有杰出的表现。




宝德智能边缘产品

助力破解大模型算力之困


作为中国领先的计算产品方案提供商和中国AI 服务器市场的TOP3,宝德深刻洞察大模型用户的算力需求,充分发挥自身在算力尤其是AI领域的技术积累和市场经验,打造完善的智能边缘计算产品线,包括智能边缘服务器、智能边缘盒子和工控机,满足提供异构计算的超强算力,适应复杂严苛的应用环境,并且可以支持灵活定制。


宝德双路智能边缘服务器PR2730P


宝德智能边缘服务器PR2730P采用2U双路高集成度设计,有限空间内蕴含强劲的计算性能。它采用Intel C621高性能芯片组,支持英特尔®至强®可扩展处理器,最大内存容量2TB,支持6块热插拔2.5寸硬盘,可灵活扩展半高的PCI-E3.0设备,支持半高单宽的AI 加速卡。PR2730P专门为部署网络边缘小规模数据中心量身定制,符合电信标准的设计—2U高度+45cm深度,可与电信设备混合部署;强劲的性能充分解决本地化终端处理的需求,并且可以满足URLLC和mMTC等超低延时需求。而且,经过技术处理和优化的PR2730P在耐高温、防尘、电磁干扰、抗震等方面表现卓越,可以适应简陋、恶劣、严苛的边缘应用环境要求。


宝德单路智能边缘服务器PR2610W


PR2610W是宝德匠心推出的一款单路边缘智能服务器,它采用Intel W580高性能芯片组,支持至强 W1200/1300系列和酷睿10/11代处理器 ,最多支持内存容量128GB,标配支持4个2.5+2*3.5寸非热插拔SATA硬盘,拥有4个PCIe扩展槽,并可灵活扩展全高全长的PCI-E设备,保证了强劲的边缘算力。它采用便于电信设备混合部署的短机箱设计,而且具有杰出的高扩展性,最大可以支持2张GPU加速卡,并且可以外接摄像头等设备。尤其值得推荐的是,它创新的工业服务器+超静音设计,非常适合商超终端、数字安防等人机共存工作环境。







宝德智能边缘盒子IPC-1002M1





宝德智能边缘盒子IPC-1002V1


当大模型的应用场景需要延展到高温/酷寒/超湿/尘噪等更加严酷的边缘工作环境中时,功能强大、性能卓越可靠的宝德智能边缘盒子IPC-1002M1和IPC-1002V1是算力优选,它们基于最前沿的AI算法,拥有成熟的软件生态,能够提供算力与价格的优秀平衡点。其中,IPC-1002M1搭载Jetson Nano模块,它集成了Maxwell架构的GPU,可提供最大0.5 TOPS(FP16)算力,配备4 core ARM A57 CPU,具备4K*2K@30fps(HEVC)编码能力和4K*2K@60fps(HEVC)解码能力,支持最多8路1080P视频解码。IPC-1002V1搭载Xavier NX模块,它集成了Volta架构的GPU,可提供最大21 TOPS(INT8)算力,配备6-core NVIDIA Carmel ARM®v8.2 64-bit CPU,具备4K*2K@60fps(HEVC)编码能力和4K*2K@60fps(HEVC)解码能力,支持最多32路1080P视频解码。


而且,它们都支持定制扩展多路PCIe插槽、业界领先的多路4K Sensor输入和多路图像处理。尤其是,这两款产品具有防震动、抗冲击能力、电磁兼容性强、抗干扰能力强等优势,能够365*24H全天候稳定运行,特别适合对复杂严苛边缘环境的图像影像等数据进行智能识别和即时分析处理。



宝德工控机NVR-941CT


NVR-941CT是宝德工控机的拳头产品。它秉承工控机的高可靠性设计理念,机箱采用全钢结构设计,对硬盘外加硬盘架和塑料减震圈减震抗震,实现卓越的抗冲击、抗振动性能。它采用优良的散热结构设计,对进风口进行防尘海绵防护,降低灰尘、散热、静电三大不稳定因素的影响。此外,它采用高质量高可靠硬盘和工控机专用电源,并对网口外加防雷防护。


在如此高可靠性的基础上,NVR-941拥有更强功能和更优的性能。首先,它支持独立三显(三个显示器或监视器同时输出不同内容),有独立的双通道音频输出,而且机箱设有10个硬盘位。其次,它采用Intel® Q470高速芯片组,支持LGA1200插槽处理器,4个 DDR4 DIMM内存插槽,最高支持到128GB。它有10个USB接口、7个后窗接口和丰富的I/O接口, 并且可以根据实际应用需求灵活配置,是一款功能强大,适合长时间不间断稳定运行的产品,特别适于边缘侧的视觉检测、光伏、医疗、智能制造、半导体测试等应用场景。

热门推荐