Углубленное понимание журнала транзакций Apache Спарк Дельта озера
Журнал транзакций является ключом к пониманию Дельта озера, потому что она проходит через многие из наиболее важных особенностей универсального модуля, включая ACID транзакций, расширяемой обработки метаданных, время в пути (путешествие во времени) и так далее. В этой статье мы обсудим журнал транзакций (Transaction Log), что это на уровне файла, как это работает, и как она читает и пишет проблему обеспечения элегантных решений для множества одновременного.
Что журнал транзакций (Transaction Log) является
Delta Lake журнала транзакций (также известный как дельталог) выполняется каждый раз, когда таблица транзакций на Delta озера аккуратных записей. Конкретные формы следующие:
[email protected]:/tmp/delta-table/_delta_log|
⇒ ll
total 280
-rw-r--r-- 1 yangping.w