全球首个GPU加速向量数据库诞生 这家中国公司联手英伟达推出

2024-03-22 19:41:34来源:快科技编辑:时寒峰

扫一扫

分享文章到微信

扫一扫

关注鹿财经网微信公众号

  原标题:全球首个GPU加速向量数据库诞生 这家中国公司联手英伟达推出

  向量数据库开拓者与GUP王者联手会擦出什么样的火花?

全球首个GPU加速向量数据库诞生 这家中国公司联手英伟达推出

  在GTC2024大会上,英伟达宣布全球首个GPU加速向量数据库诞生——中国公司Zilliz与英伟达携手发布了Milvus2.4版本。

  向量数据库是一种专门用于处理向量数据的数据库系统,这类数据通常用于机器学习和人工智能应用中,如推荐系统、图像识别和自然语言处理等。GPU(图形处理单元)因其并行处理能力而成为加速复杂计算任务的理想选择,尤其是在处理大量数据时。

  英伟达在GPU领域的地位不用多说,Zilliz的全称是上海徐毓智能科技有限公司,是诞生于中国本土的初创公司,成立于2016年,总部位于上海。在向量数据库系统领域,Zilliz是开拓者,研发了面向AI生产系统的向量数据库系统。其技术和产品已经被全球超过1000家企业采用。

  Milvus是Zilliz的主要产品,它提供了一个易于使用的界面,允许开发者和数据科学家快速部署和扩展向量搜索服务。该产品以其高性能和可扩展性而闻名,能够处理海量的向量数据,并提供毫秒级的查询响应时间,还支持多种编程语言的API,包括Python、Java、Go和C++。

  Milvus2.4版本向量数据库的创新点在于,利用GPU的高速计算特性,能够快速执行向量相似性搜索和分析,支持更高的并发用户请求,同时降低延迟,提供更快的响应时间,使其成为支持实时决策和复杂数据分析的理想工具。

  据介绍,它在业界首次采用了英伟达GPU的高效并行处理能力和RAPIDS cuVS库中新推出的CAGRA(CUDA-Accelerated Graph Index for Vector Retrieval)技术,提供基于GPU的向量索引和搜索加速能力。基准测试显示,与目前市面上最先进的基于CPU处理器的索引技术相比,新版GPU加速Milvus能提供高达50倍的向量搜索性能提升。

  向量数据库——开发AI大模型的必备软件

  向量数据库是专门用于存储和管理向量数据,其具备的快速检索、混合存储、向量嵌入等能力很好的解决了AI大模型技术中普遍存在的知识时效性低、输入能力有限、回答问题准确度低等问题,因此被视作开发和应用AI大模型过程中的必备的软件基础设施。

  从实际应用案例来看,向量数据库在AI大模型的训练和推理过程中降本增效的效果已有所显现。ChatGPT Plugins外接向量数据库,不仅大大拓展了AI大模型交互信息的范围,还保护了用户隐私。Qdrant向量数据库与Pienso合作,已经实现在开源AI大模型的基础上开发私域大模型。

  广发证券认为,在过去AI模型训练的数据量较小、数据类型单一的情况下,向量数据库可应用的场景较小。自2017年Transformer模型推出后,各科技厂商开始大语言模型的探索,对于向量数据库的需求才开始形成规模。随着微软365Copilot以及ChatGPT企业版等标杆产品的落地,AI应用的发展正逐步由点扩散到面,未来随着生成式AI大模型开发量和使用量的增长,向量数据库的应用有望快速增长。

  目前在商业化方面,向量数据库行业还处于市场培育期,Zilliz、Pinecone和腾讯云均推出免费版本的产品给用户试用。以华为云和星环科技为代表的厂商在非结构化数据处理具有一定技术积累的基础上,也相继推出了向量数据库产品。

  其中,星环科技是国内第一批进入向量数据库领域的公司,已经与英特尔联合发布向量数据库解决方案。

     投稿邮箱:lukejiwang@163.com   详情访问鹿财经网:http://www.lucaijing.com.cn

相关推荐
苹果霸榜!Canalys公布2024年Q3全球TWS市场份额:小 苹果霸榜!Canalys公布2024年Q3全球TWS市场份额:小

原标题:苹果霸榜!Canalys公布2024年Q3全球TWS市场份额:小米华为紧追不舍 11月

科技说2024-11-27

高通骁龙X笔记本销量72万台:全球份额仅0.8% 高通骁龙X笔记本销量72万台:全球份额仅0.8%

原标题:高通骁龙X笔记本销量72万台:全球份额仅0.8% 11月27日消息,根据市调

科技说2024-11-27

2800颗算力卫星组网!“星算计划”将打造全球首 2800颗算力卫星组网!“星算计划”将打造全球首

原标题:2800颗算力卫星组网!星算计划将打造全球首个太空智算中心 11月21日消

科技说2024-11-21

全球电视最新TOP5出炉:TCL冲至第二 全球电视最新TOP5出炉:TCL冲至第二

原标题:全球电视最新TOP5出炉:TCL冲至第二 11月19日消息,根据TrendForce集邦咨

科技说2024-11-19

美光发布全球最大、最快61.44TB SSD!232层TLC闪存 美光发布全球最大、最快61.44TB SSD!232层TLC闪存

原标题:美光发布全球最大、最快61.44TB SSD!232层TLC闪存 11月13日消息,美光发

科技说2024-11-13

全球 !英伟达与软银试运行AI+5G:电信行业迎来 全球 !英伟达与软银试运行AI+5G:电信行业迎来

原标题:全球 !英伟达与软银试运行AI+5G:电信行业迎来大突破 AI总龙头英伟达

科技说2024-11-13

全球第一!2023年中国发明专利申请量达164万件 全球第一!2023年中国发明专利申请量达164万件

原标题:全球第一!2023年中国发明专利申请量达164万件 11月7日消息,据报道,

科技说2024-11-07

加速替代CUDA!摩尔线程开源vLLM-MUSA 加速国产GP 加速替代CUDA!摩尔线程开源vLLM-MUSA 加速国产GP

原标题:加速替代CUDA!摩尔线程开源vLLM-MUSA 加速国产GPU AI 11月5日消息,近日,

科技说2024-11-05

全球首次!C919首架交付机完成发动机更换:填补 全球首次!C919首架交付机完成发动机更换:填补

原标题:全球首次!C919首架交付机完成发动机更换:填补维修能力空白 11月3日

科技说2024-11-03

苹果AI下周正式亮相:将接受全球果粉检验 苹果AI下周正式亮相:将接受全球果粉检验

原标题:苹果AI下周正式亮相:将接受全球果粉检验 10月26日消息,苹果宣布A

科技说2024-10-26