Update routine-load-manual.md (#1133)
edit some descriptions about “max_error_number”
This commit is contained in:
@ -113,7 +113,7 @@ FE 中的 JobScheduler 根据汇报结果,继续生成后续新的 Task,或
|
||||
|
||||
* max\_error\_number
|
||||
|
||||
`max_error_number` 用于控制错误率。在错误率过高的时候,作业会自动暂停。因为整个作业是面向数据流的,因为数据流的无边界性,我们无法像其他导入任务一样,通过一个错误比例来计算错误率。因此这里提供了一种新的计算方式,来计算数据流中的错误比例。
|
||||
`max_error_number` 用于控制错误率。在错误率过高的时候,作业会自动暂停。因为整个作业是面向数据流的,且由于数据流的无边界性,我们无法像其他导入任务一样,通过一个错误比例来计算错误率。因此这里提供了一种新的计算方式,来计算数据流中的错误比例。
|
||||
|
||||
我们设定了一个采样窗口。窗口的大小为 `max_batch_rows * 10`。在一个采样窗口内,如果错误行数超过 `max_error_number`,则作业被暂停。如果没有超过,则下一个窗口重新开始计算错误行数。
|
||||
|
||||
|
||||
Reference in New Issue
Block a user