Haystack 通过在其搜索管道中利用多语言嵌入模型和翻译组件来支持跨语言检索。该框架使开发人员能够构建能够处理一种语言的查询并检索另一种语言的相关文档的系统。这主要通过三种机制实现：用于语义理解的多语言嵌入、弥合语言差距的翻译工具以及结合这些组件的灵活管道。通过整合这些功能，Haystack 简化了跨语言搜索系统的创建。
Haystack 跨语言能力的核心在于使用多语言文本嵌入模型，例如 sentence-transformers 或 OpenAI 嵌入。这些模型使用多种语言的数据进行训练，能够将不同语言的文本映射到共享的语义空间中。例如，如果意义一致，英文查询和西班牙文文档可以转换为彼此接近的向量。开发人员可以使用 Haystack 的 EmbeddingRetriever 以及像 paraphrase-multilingual-MiniLM-L12-v2 这样的模型来索引和搜索多语言文档。当发出查询时，检索器会将其嵌入与索引文档进行比较，无论语言如何，从而实现跨语言边界的匹配。
为了进一步增强跨语言工作流程，Haystack 支持可以集成到管道中的翻译组件。例如，TransformersTranslator 节点可以在检索前将用户的查询翻译成目标语言，或将检索到的文档翻译回用户的语言。开发人员也可以使用第三方翻译 API 完成此步骤。此外，Haystack 的 ExtractiveQAPipeline 可以将翻译与问答相结合——例如，将德语查询翻译成英语，检索英语文档，然后将答案翻译回德语。这种模块化允许开发人员根据其用例选择最佳方法，平衡速度、成本和准确性。通过将多语言嵌入与翻译工具相结合，Haystack 为构建跨语言搜索系统提供了坚实的基础。