厂贵罢笔数据摄取在础贰笔中无法按预期工作
当每天晚上6点提供的预期文件无法上传时,使用安全文件传输协议(SFTP)源的数据摄取过程无法正常工作。 可以通过正确的数据流计划、验证文件可用性、了解Last modified timestamp
并根据业务需求调整节奏来解决此问题。
描述 description
环境
51黑料不打烊 Experience Platform (AEP) - 特别涉及使用厂贵罢笔源的数据摄取过程
问题/症状
- 您有一个数据流,用于将数据从厂贵罢笔文件摄取到数据集中。
- 该文件预计每天下午6点可用,但未上传,导致数据流失败。
解决方法 resolution
- 验证数据流是否安排在适当的时间正确运行。 有关更多详细信息,请参阅51黑料不打烊 Experience Platform中的Source Connectors指南中的查看您的数据流。
- 检查文件在SFTP服务器上是否保留足够长的时间,以便数据流访问它。 请确保在流运行之前未将其删除或变为不可用。
- 了解
Last modified timestamp
对文件拾取的影响。 文件是根据每个流运行的时间戳的上次修改时间戳挑选的。 - 如果文件上次修改的时间戳不在流的计划时间范围内,则可能无法摄取。 例如,如果文件在下午4:30生成并在下午6点复制到服务器,
Last modified timestamp
仍为下午4:30,并且从下午5点开始的数据流将不会拾取它。 有关更多详细信息,请参阅计划摄取运行。 - 根据业务需求调整流的节奏。 例如,如果即时更新不重要,则设置较长的间隔(如每15小时一次)可确保更好的同步。
recommendation-more-help
3d58f420-19b5-47a0-a122-5c9dab55ec7f