Talk Python to Me: № 562: Duck... Заметка
Planet Python на русском

Talk Python to Me: № 562: DuckLake: Озеро данных, которое состоит только из SQL и Parquet

DuckLake отличается тем, что задает один SQL-запрос, а не парсит многочисленные JSON-файлы и файлы метаданных перед доступом к данным. Его метаданные находятся в настоящей базе данных, а сами данные хранятся в обычных файлах Parquet. Педро Холанда, ведущий разработчик, присоединился к DuckDB в 2018 году. Гильермо Санчес Дионис также вносит свой вклад в DuckLake и новый протокол Quack. Каталог Quack позволяет DuckLake обрабатывать 200 транзакций в секунду при высокой конкуренции, превосходя другие открытые форматы таблиц. Этот выпуск спонсируется Six Feet Up и Talk Python Courses. Среди гостей — Педро Холанда и Гильермо Санчес; их ссылки предоставлены. Дополнительные ссылки содержат информацию о прогрессивных индексах, SQLite, Litestream, DuckDB, Iceberg и спецификациях DuckLake. Также выделены курсы DuckLake-dataframe и Polars. Доступна информация о парсинге CSV, Arrow без копирования, ART-индексах и асинхронном вводе-выводе в DuckDB. Наконец, включены ссылки для просмотра выпуска на YouTube и поиска транскриптов.