Notion 用 Ray Data 替换 Spark,扩展面向数百万用户的 AI 搜索
Notion 的工程师讲了他们把嵌入生成从 Spark 换成 Ray Data 的真实原因:几 TB 数据、CPU 和 GPU 混跑一条管线。正在搭向量检索或 RAG 数据管线的后端工程师可以对照看看自己的架构。
Notion 的工程师讲了他们把嵌入生成从 Spark 换成 Ray Data 的真实原因:几 TB 数据、CPU 和 GPU 混跑一条管线。正在搭向量检索或 RAG 数据管线的后端工程师可以对照看看自己的架构。