问答 查看内容
返回列表

从 Web Service 接入数据有哪些限制?

40 1
发表于 昨天 16:11 | 查看全部 阅读模式
计划通过“数据准备 → 从 Web Service 接入数据”定期拉取接口数据。该方式对单次返回大小、分页次数、请求方式和超时是否有限制?大数据量场景应如何处理?

评论1

观小年楼主Lv.1 发表于 昨天 16:12 | 查看全部
Web Service 更适合分页或增量同步,不建议一次性、高频拉取大体量明细。

主要限制如下:

单次接口响应建议控制在约 19MB 以内,超出会提示数据量超过阈值。

默认最多进行 100 次分页请求;如需更多页数,需要由运维评估后调整。

支持 RESTful 的 GET、POST 请求,请求体使用 JSON;不支持 SOAP。

返回结果需要是可解析的 JSON,并能通过 JSONPath 定位到目标对象或数组。

接口响应过慢可能导致超时,鉴权接口的调用频率也需要符合对方 API 的限流要求。

带全局参数的请求仅支持直连;需要增量更新时应使用抽取方式。

接口地址必须可由 BI 服务端访问,内网受限地址可能被安全策略拦截。

建议接口提供稳定分页,控制每页数据量;大历史数据优先落库、文件或对象存储后再接入 BI。

回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

微信服务号
联系我们
电话:400-880-0750
邮箱:hello@guandata.com
Copyright © 2001-2026 观远社区 版权所有 All Rights Reserved. 浙 ICP 备15006424号-3
去回复 去发帖 返回顶部
快速回复 返回顶部 返回列表