对于 AI 代理:可在 https://www.mongodb.com/zh-cn/docs/llms.txt 获取文档索引—通过在任何 URL 路径后添加 .md 可获取所有页面的 Markdown 版本。

变更流属性

使用 MongoDB Kafka 源连接器时,使用以下配置设置指定变更流的聚合管道和变更流游标的读取偏好。

有关按类别排列的 Source 连接器配置设置列表,请参阅 Source 连接器配置属性指南。

名称
说明

管道

类型:string

说明:
要在变更流中运行的聚合管道数组。您必须为变更流事件文档而不是 fullDocument 字段配置此设置。

示例:

[{"$match": { "$and": [{"operationType": "insert"}, {"fullDocument.eventId": 1404 }] } }]

有关更多示例,请参阅:

默认:"[]"
接受值:有效的聚合管道阶段

change.stream.full.document

类型:string

说明:
确定变更流在更新操作时返回的值。

默认设置返回原始文档和更新文档之间的差异。

updateLookup 设置返回原始文档和更新文档之间的差异以及更新后某个时间点的整个更新文档的副本。

whenAvailable 设置会返回更新文档(如果可用)。

required 设置会返回更新文档,如果该文档不可用,则引发错误。

有关此变更流选项如何工作的更多信息,请参阅 MongoDB 手册中的“查找更新操作的完整文档”。

默认:""
接受的值:""、"updateLookup"、"whenAvailable" 或 "required"

change.stream.show.expanded.events

类型:布尔值

说明:
确定变更流是否针对 DDL 事件(例如
createIndexes 和
dropIndexes)发送通知
事件。要了解更多信息,请参阅 showExpandedEvents。

此设置是必需的,用于在更新事件中显示
updateDescription.disambiguatedPaths,这
可以阐明涉及模糊字段的更改。要了解更多信息,
请参阅 disambiguatedPaths。

默认:false
接受的值:true 或 false

change.stream.full.document.before.change

类型: string

说明:
配置变更流在更新操作中返回的文档前像。前像对于复制现有数据时发布的源记录不可用,并且前像配置对复制没有影响。

要了解如何配置集合以启用前像,请参阅 MongoDB 手册中的Change Streams 带文档前像和后像。

默认设置会禁止显示文档前像。

whenAvailable 设置会返回替换、更新或删除之前的文档前像(如果可用)。

required 设置会返回文档前像,如果不可用,则会引发错误。

默认:""
接受的值:"" 或 "whenAvailable" 或 "required"

publish.full.document.only

类型:布尔值

说明:
是否仅返回任何更新事件生成的变更流事件文档中的 fullDocument 字段。fullDocument 字段包含最新版本的更新文档。要了解有关 fullDocument 字段的更多信息,请参阅服务器手册中的更新事件。

设置为 true 时,连接器会覆盖 change.stream.full.document 设置,并将其设置为 updateLookup,以便 fullDocument 字段包含更新的文档。

默认:false
接受的值:true 或 false

publish.full.document.only.tombstone.on.delete

类型:布尔值

说明:
删除文档时是否返回逻辑删除事件。逻辑删除事件包含具有 null 值的已删除文档的密钥。此设置仅在 publish.full.document.only 为 true 时应用。

默认: false
接受的值: true 或 false

change.stream.document.key.as.key

类型: 布尔值

说明:
如果存在文档密钥,是否使用文档密钥作为源记录密钥。

当设置为 true 时,连接器会将已删除文档的密钥添加到 tombstone 事件中。当设置为 false 时,连接器会使用恢复令牌作为 tombstone 事件的源密钥。

默认: true
允许的值: true 或 false

排序规则

类型:string

说明:
JSON 排序规则文档,指定 MongoDB 应用于变更流返回的文档的语言特定排序规则。

默认:""
接受值:有效的排序规则 JSON 文档

batch.size

类型: int

说明:
变更流游标批处理大小。

默认: 0
接受值: 整数

poll.await.time.ms

类型: long

说明:
在返回空批处理之前,服务器等待新数据更改以报告给变更流游标的最长时间(以毫秒为单位)。

默认: 5000
接受值: 整数

poll.max.batch.size

类型: int

说明:
轮询变更流游标以获取新数据时,在单个批处理中读取的最大文档数。您可以使用此设置来限制连接器内部缓冲的数据量。

默认: 1000
接受值: 整数

给本页内容打分

在此页面上