Configurazioni relative ai datiCorda
dataCoord.channel.watchTimeoutInterval
| Descrizione | Valore predefinito |
|---|---|
| Timeout per la visione dei canali (in secondi). L'avanzamento dell'aggiornamento del tickler del datanode resetterà il timer di timeout. | 300 |
dataCoord.channel.legacyVersionWithoutRPCWatch
| Descrizione | Valore predefinito |
|---|---|
| I datanode <= questa versione sono considerati nodi legacy, che non hanno watch() basato su rpc. Questo valore è utilizzato solo durante gli aggiornamenti periodici, quando i nodi legacy non riceveranno nuovi canali. | 2.4.1 |
dataCoord.channel.balanceSilentDuration
| Descrizione | Valore predefinito |
|---|---|
| Durata dopo la quale il channel manager avvia il bilanciamento dei canali in background | 300 |
dataCoord.channel.balanceInterval
| Descrizione | Valore predefinito |
|---|---|
| L'intervallo con cui il channel manager controlla lo stato di bilanciamento dei canali dml | 360 |
dataCoord.channel.checkInterval
| Descrizione | Valore predefinito |
|---|---|
| L'intervallo in secondi con cui il channel manager avanza gli stati dei canali | 1 |
dataCoord.channel.notifyChannelOperationTimeout
| Descrizione | Valore predefinito |
|---|---|
| Timeout di notifica delle operazioni del canale (in secondi). | 5 |
dataCoord.segment.maxSize
| Descrizione | Valore predefinito |
|---|---|
| La dimensione massima di un segmento, unità: MB. datacoord.segment.maxSize e datacoord.segment.sealProportion determinano insieme se un segmento può essere sigillato. | 1024 |
dataCoord.segment.diskSegmentMaxSize
| Descrizione | Valore predefinito |
|---|---|
| Dimensione massima di un segmento in MB per la raccolta che ha un indice di disco | 2048 |
dataCoord.segment.sealProportion
| Descrizione | Valore predefinito |
|---|---|
| La proporzione minima rispetto a datacoord.segment.maxSize per sigillare un segmento. datacoord.segment.maxSize e datacoord.segment.sealProportion determinano insieme se un segmento può essere sigillato. | 0.12 |
dataCoord.segment.sealProportionJitter
| Descrizione | Valore predefinito |
|---|---|
| rapporto di jitter della proporzione di tenuta del segmento, valore predefinito 0,1 (10%), se la proporzione di tenuta è del 12%, con jitter=0,1, il rapporto applicato sarà 10,8~12%. | 0.1 |
dataCoord.segment.assignmentExpiration
| Descrizione | Valore predefinito |
|---|---|
| Tempo di scadenza dell'assegnazione del segmento, unità: ms | 2000 |
dataCoord.segment.allocLatestExpireAttempt
| Descrizione | Valore predefinito |
|---|---|
| Tempo di tentativo di assegnazione dell'ultimoExpire da rootCoord dopo il riavvio | 200 |
dataCoord.segment.maxLife
| Descrizione | Valore predefinito |
|---|---|
| Durata massima del segmento in secondi, 24*60*60 | 86400 |
dataCoord.segment.maxIdleTime
| Descrizione | Valore predefinito |
|---|---|
|
|
600 |
dataCoord.segment.minSizeFromIdleToSealed
| Descrizione | Valore predefinito |
|---|---|
| Dimensione minima in MB del segmento che può essere inattivo da sigillato. | 16 |
dataCoord.segment.maxBinlogFileNumber
| Descrizione | Valore predefinito |
|---|---|
|
|
32 |
dataCoord.segment.smallProportion
| Descrizione | Valore predefinito |
|---|---|
| Il segmento è considerato "segmento piccolo" quando il suo numero di righe è inferiore a | 0.5 |
dataCoord.segment.compactableProportion
| Descrizione | Valore predefinito |
|---|---|
|
|
0.85 |
dataCoord.segment.expansionRate
| Descrizione | Valore predefinito |
|---|---|
|
|
1.25 |
dataCoord.sealPolicy.channel.growingSegmentsMemSize
| Descrizione | Valore predefinito |
|---|---|
|
|
4096 |
dataCoord.autoUpgradeSegmentIndex
| Descrizione | Valore predefinito |
|---|---|
| se aggiornare automaticamente l'indice del segmento alla versione del motore di indicizzazione | falso |
dataCoord.segmentFlushInterval
| Descrizione | Valore predefinito |
|---|---|
| la durata minima dell'intervallo (unità: secondi) tra le operazioni di flusing sullo stesso segmento | 2 |
dataCoord.enableCompaction
| Descrizione | Valore predefinito |
|---|---|
|
|
vero |
dataCoord.compaction.enableAutoCompaction
| Descrizione | Valore predefinito |
|---|---|
|
|
vero |
dataCoord.compaction.taskPrioritizer
| Descrizione | Valore predefinito |
|---|---|
|
|
predefinito |
dataCoord.compaction.taskQueueCapacity
| Descrizione | Valore predefinito |
|---|---|
| Dimensione della coda delle attività di compattazione | 100000 |
dataCoord.compaction.dropTolerance
| Descrizione | Valore predefinito |
|---|---|
| L'attività di compattazione verrà pulita dopo aver terminato un tempo superiore a questo (in secondi). | 86400 |
dataCoord.compaction.gcInterval
| Descrizione | Valore predefinito |
|---|---|
| Intervallo di tempo in secondi per la compattazione gc | 1800 |
dataCoord.compaction.mix.triggerInterval
| Descrizione | Valore predefinito |
|---|---|
| Intervallo di tempo in secondi per attivare la compattazione dell'impasto | 60 |
dataCoord.compaction.levelzero.triggerInterval
| Descrizione | Valore predefinito |
|---|---|
| Intervallo di tempo in secondi per l'attivazione della compattazione L0 | 10 |
dataCoord.compaction.levelzero.forceTrigger.minSize
| Descrizione | Valore predefinito |
|---|---|
| La dimensione minima in byte per forzare l'attivazione di una compattazione di livello zero, predefinita come 8MB | 8388608 |
dataCoord.compaction.levelzero.forceTrigger.maxSize
| Descrizione | Valore predefinito |
|---|---|
| La dimensione massima in byte per forzare l'attivazione di una Compattazione LevelZero, predefinita come 64MB | 67108864 |
dataCoord.compaction.levelzero.forceTrigger.deltalogMinNum
| Descrizione | Valore predefinito |
|---|---|
| Numero minimo di file deltalogici per forzare l'attivazione della Compattazione LevelZero | 10 |
dataCoord.compaction.levelzero.forceTrigger.deltalogMaxNum
| Descrizione | Valore predefinito |
|---|---|
| Il numero massimo di file deltalogici per forzare l'attivazione di una Compattazione LevelZero, predefinito come 30 | 30 |
dataCoord.compaction.single.ratio.threshold
| Descrizione | Valore predefinito |
|---|---|
| La soglia di rapporto di un segmento per attivare una singola compattazione, predefinita come 0,2 | 0.2 |
dataCoord.compaction.single.deltalog.maxsize
| Descrizione | Valore predefinito |
|---|---|
| Dimensione deltalogo di un segmento per attivare una singola compattazione, predefinita come 16MB | 16777216 |
dataCoord.compaction.single.deltalog.maxnum
| Descrizione | Valore predefinito |
|---|---|
| Il conteggio deltalogico di un segmento per attivare una compattazione, predefinito come 200 | 200 |
dataCoord.compaction.single.expiredlog.maxsize
| Descrizione | Valore predefinito |
|---|---|
| La dimensione del log scaduto di un segmento per attivare la compattazione, per impostazione predefinita 10MB. | 10485760 |
dataCoord.compaction.clustering.enable
| Descrizione | Valore predefinito |
|---|---|
| Abilita la compattazione del clustering | vero |
dataCoord.compaction.clustering.autoEnable
| Descrizione | Valore predefinito |
|---|---|
| Abilita la compattazione del clustering automatico | falso |
dataCoord.compaction.clustering.triggerInterval
| Descrizione | Valore predefinito |
|---|---|
| Intervallo di attivazione della compattazione del clustering in secondi | 600 |
dataCoord.compaction.clustering.minInterval
| Descrizione | Valore predefinito |
|---|---|
| L'intervallo minimo tra le esecuzioni di compattazione del clustering di una raccolta, per evitare compattazioni ridondanti. | 3600 |
dataCoord.compaction.clustering.maxInterval
| Descrizione | Valore predefinito |
|---|---|
| Se una raccolta non è stata compattata in clustering per un periodo superiore a maxInterval, forzare la compattazione | 259200 |
dataCoord.compaction.clustering.newDataSizeThreshold
| Descrizione | Valore predefinito |
|---|---|
| Se la dimensione dei nuovi dati è maggiore di newDataSizeThreshold, eseguire la compattazione con clustering | 512m |
dataCoord.compaction.clustering.maxTrainSizeRatio
| Descrizione | Valore predefinito |
|---|---|
| rapporto massimo di dimensione dei dati nell'addestramento Kmeans, se maggiore di esso, verrà ridotto il campionamento per soddisfare questo limite | 0.8 |
dataCoord.compaction.clustering.maxCentroidsNum
| Descrizione | Valore predefinito |
|---|---|
| numero massimo di centroidi nel treno Kmeans | 10240 |
dataCoord.compaction.clustering.minCentroidsNum
| Descrizione | Valore predefinito |
|---|---|
| numero minimo di centroidi nel treno Kmeans | 16 |
dataCoord.compaction.clustering.minClusterSizeRatio
| Descrizione | Valore predefinito |
|---|---|
| dimensione minima del cluster / dimensione media nel treno Kmeans | 0.01 |
dataCoord.compaction.clustering.maxClusterSizeRatio
| Descrizione | Valore predefinito |
|---|---|
| dimensione massima del cluster / dimensione media nel treno Kmeans | 10 |
dataCoord.compaction.clustering.maxClusterSize
| Descrizione | Valore predefinito |
|---|---|
| dimensione massima del cluster nel treno Kmeans | 5g |
dataCoord.syncSegmentsInterval
| Descrizione | Valore predefinito |
|---|---|
| Intervallo di tempo per la sincronizzazione regolare dei segmenti | 300 |
dataCoord.index.memSizeEstimateMultiplier
| Descrizione | Valore predefinito |
|---|---|
| Quando la dimensione della memoria non è impostata dalla procedura di indice, moltiplicatore per stimare la dimensione della memoria dei dati di indice | 2 |
dataCoord.enableGarbageCollection
| Descrizione | Valore predefinito |
|---|---|
| Valore dell'interruttore per controllare se abilitare la garbage collection per cancellare i dati scartati nel servizio MinIO o S3. | vero |
dataCoord.gc.interval
| Descrizione | Valore predefinito |
|---|---|
| L'intervallo in cui Data Coord esegue la garbage collection, unità: secondo. | 3600 |
dataCoord.gc.missingTolerance
| Descrizione | Valore predefinito |
|---|---|
| Durata di conservazione dei file di log binari non registrati (binlog). Impostando un valore ragionevolmente grande per questo parametro, si evita di cancellare erroneamente i file binlog appena creati e privi di metadati. Unità: secondo. | 86400 |
dataCoord.gc.dropTolerance
| Descrizione | Valore predefinito |
|---|---|
| La durata di conservazione dei file binlog dei segmenti eliminati prima che vengano cancellati, unità: secondo. | 10800 |
dataCoord.gc.removeConcurrent
| Descrizione | Valore predefinito |
|---|---|
| numero di goroutine contemporanee per rimuovere gli oggetti s3 eliminati | 32 |
dataCoord.gc.scanInterval
| Descrizione | Valore predefinito |
|---|---|
| file orfano (file su oss ma non registrato su meta) su object storage intervallo di scansione della garbage collection in ore | 168 |
dataCoord.brokerTimeout
| Descrizione | Valore predefinito |
|---|---|
| 5000ms, dataCoord broker rpc timeout | 5000 |
dataCoord.autoBalance
| Descrizione | Valore predefinito |
|---|---|
| Abilita il bilanciamento automatico | vero |
dataCoord.checkAutoBalanceConfigInterval
| Descrizione | Valore predefinito |
|---|---|
| l'intervallo di controllo della configurazione del bilanciamento automatico | 10 |
dataCoord.import.filesPerPreImportTask
| Descrizione | Valore predefinito |
|---|---|
| Il numero massimo di file consentiti per attività di pre-importazione. | 2 |
dataCoord.import.taskRetention
| Descrizione | Valore predefinito |
|---|---|
| Il periodo di conservazione in secondi per le attività nello stato Completato o Fallito. | 10800 |
dataCoord.import.maxSizeInMBPerImportTask
| Descrizione | Valore predefinito |
|---|---|
| Per evitare la generazione di piccoli segmenti, i file importati vengono raggruppati. Questo parametro rappresenta la somma delle dimensioni dei file in ogni gruppo (ogni ImportTask). | 6144 |
dataCoord.import.scheduleInterval
| Descrizione | Valore predefinito |
|---|---|
| L'intervallo per la pianificazione dell'importazione, misurato in secondi. | 2 |
dataCoord.import.checkIntervalHigh
| Descrizione | Valore predefinito |
|---|---|
| L'intervallo per il controllo dell'importazione, misurato in secondi, è impostato su una frequenza elevata per il controllore dell'importazione. | 2 |
dataCoord.import.checkIntervalLow
| Descrizione | Valore predefinito |
|---|---|
| L'intervallo di controllo dell'importazione, misurato in secondi, è impostato su una frequenza bassa per il verificatore di importazione. | 120 |
dataCoord.import.maxImportFileNumPerReq
| Descrizione | Valore predefinito |
|---|---|
| Il numero massimo di file consentito per ogni singola richiesta di importazione. | 1024 |
dataCoord.import.maxImportJobNum
| Descrizione | Valore predefinito |
|---|---|
| Numero massimo di lavori di importazione in esecuzione o in attesa. | 1024 |
dataCoord.import.waitForIndex
| Descrizione | Valore predefinito |
|---|---|
| Indica se l'operazione di importazione attende il completamento della creazione dell'indice. | vero |
dataCoord.gracefulStopTimeout
| Descrizione | Valore predefinito |
|---|---|
| secondi. forzare l'arresto del nodo senza l'arresto graduale | 5 |
dataCoord.slot.clusteringCompactionUsage
| Descrizione | Valore predefinito |
|---|---|
| utilizzo dello slot del lavoro di compattazione del clustering. | 16 |
dataCoord.slot.mixCompactionUsage
| Descrizione | Valore predefinito |
|---|---|
| utilizzo dello slot del lavoro di compattazione della miscela. | 8 |
dataCoord.slot.l0DeleteCompactionUsage
| Descrizione | Valore predefinito |
|---|---|
| utilizzo dello slot del lavoro di compattazione l0. | 8 |
dataCoord.ip
| Descrizione | Valore predefinito |
|---|---|
| Indirizzo TCP/IP di dataCoord. Se non viene specificato, viene utilizzato il primo indirizzo non ciclabile. |
dataCoord.port
| Descrizione | Valore predefinito |
|---|---|
| Porta TCP di dataCoord | 13333 |
dataCoord.grpc.serverMaxSendSize
| Descrizione | Valore predefinito |
|---|---|
| Dimensione massima di ciascuna richiesta RPC che il dataCoord può inviare, unità: byte | 536870912 |
dataCoord.grpc.serverMaxRecvSize
| Descrizione | Valore predefinito |
|---|---|
| La dimensione massima di ogni richiesta RPC che il dataCoord può ricevere, unità: byte | 268435456 |
dataCoord.grpc.clientMaxSendSize
| Descrizione | Valore predefinito |
|---|---|
| La dimensione massima di ogni richiesta RPC che i client su dataCoord possono inviare, unità: byte | 268435456 |
dataCoord.grpc.clientMaxRecvSize
| Descrizione | Valore predefinito |
|---|---|
| La dimensione massima di ogni richiesta RPC che i client su dataCoord possono ricevere, unità: byte | 536870912 |