Релиз DuckDB 2.0, получивший кодовое имя Cyanoptera, запланирован на 21 октября 2026 года. Всего через семь месяцев после выпуска 1.5 в марте проект накопил более 10 000 коммитов.

Новая версия приносит новый формат хранения, новый SQL-парсер, асинхронный ввод-вывод и более полную поддержку VARIANT, а вместе с ними — серверный режим и Agent Mode в CLI, созданный для ИИ-агентов. На мой взгляд, интересная история выходит за рамки того, насколько быстрее выполняется отдельный запрос: DuckDB меняет представление о том, как может выглядеть инструмент анализа данных.

Значительную часть карьеры я работал в SRE, наблюдаемости и аналитике безопасности. В последнее время я занимаюсь DuckLocal — аналитическим инструментом с открытым исходным кодом и локальным подходом, работающим на DuckDB. Я всё чаще вижу будущее, в котором анализ — это сотрудничество людей и ИИ-агентов, а не человек, открывающий BI-инструмент, чтобы писать SQL и настраивать дашборды. Несколько изменений в DuckDB 2.0 соответствуют этому направлению.

Белая утка и ИИ-робот вместе работают за ноутбуком, подключённым к DuckDB, JSON, S3, проверяемому SQL и графикам
База данных, ИИ-агент и визуальный интерфейс могут образовать единое рабочее пространство анализа данных под контролем пользователя.

1. Agent Mode: агенты как пользователи базы данных

Традиционные интерфейсы командной строки рассчитаны на людей. Рамки и выравнивающие пробелы в таблице вывода DuckDB CLI мало полезны агенту. Отступы расходуют токены; усечённый результат может выглядеть полным; ошибкам может не хватать структуры; а долгий запрос может оставить агента в ожидании без полезной обратной связи.

Agent Mode распознаёт такие среды, как Claude Code и Codex, и автоматически подстраивает вывод. Он использует компактные Markdown-таблицы, явные пометки об усечении и ошибки в JSON, а также сообщает о ходе длительных запросов.

Утка показывает на компактный результат в терминале, пока другая утка читает его за ноутбуком
Компактный вывод и явная обратная связь помогают агентам надёжно интерпретировать результаты запросов. Концептуальная иллюстрация.

В официальном эксперименте Claude Code ответил на все 22 вопроса TPC-H, заданные на естественном языке. Каждый вопрос выполнялся трижды в каждом режиме — всего 132 запуска, и каждый дал правильный ответ. Объём вывода DuckDB, который читала модель, снизился со 123,6 тыс. до 50,8 тыс. токенов, примерно на 59%. Это экономия на выводе запросов, а не сокращение общей стоимости задачи на 59%. В отчёте экономия оценена примерно в 0,5% от всего входного объёма, и снижения общей стоимости или времени выполнения обнаружено не было. Эксперимент и объяснение

В обсуждениях агентов, работающих с базами данных, часто делают упор на точность text-to-SQL. То, насколько эффективно и надёжно агент может взаимодействовать с базой данных, не менее важно.

2. VARIANT: гибкие данные с меньшими компромиссами по производительности

События CloudTrail, журналы приложений и данные OpenTelemetry часто поступают в виде JSON с разной структурой. В CloudTrail, например, форма requestParameters может полностью отличаться от события к событию.

Есть два привычных подхода: хранить записи как строки и повторно разбирать их во время запроса — гибко, но медленно; или определить схему и разложить данные по столбцам — быстро, но эволюция схемы требует больше работы. VARIANT стремится объединить эти преимущества. Он сохраняет гибкую структуру, а с помощью shredding выделяет подходящие поля в отдельные подстолбцы. VARIANT появился в 1.5; версия 2.0 расширяет его поддержку от хранения до выполнения запросов.

JSON-документы с разными полями упорядочены по столбцам, а отсутствующие значения оставлены пустыми
Shredding выявляет общую структуру в гибких записях. Это концептуальная схема, а не фиксированный формат хранения.
{"eventName":"ConsoleLogin","user":"alice","success":true}
{"eventName":"CreateUser","user":"bob","sourceIP":"10.0.0.8"}

↓ Поля выделяются и разделяются при записи

eventName(string) | user(string) | success(boolean) ...

Фактическая раскладка зависит от распределения данных и кодирования.

В некоторых тестах сообщества сообщалось об ускорении запросов примерно в 6 раз вместе с существенно меньшим объёмом хранения. Эти цифры зависят от рабочей нагрузки.

Для аналитики безопасности это открывает путь от сырых событий CloudTrail к анализу активности пользователей, выявлению необычных вызовов API и расследованию изменений разрешений без сложного ETL-конвейера. Крупная платформа данных — не всегда отправная точка: DuckDB, SQL и ИИ-агент могут обеспечить значительную часть расследования.

3. Асинхронный ввод-вывод: локальный подход может включать удалённые данные

Данные часто находятся в S3, других объектных хранилищах или озере данных. При синхронном вводе-выводе задержка сети может задерживать удалённые запросы. Асинхронный ввод-вывод DuckDB 2.0 позволяет выполнять несколько чтений в фоне, пока потоки обработки запросов работают с уже поступившими данными.

Несколько документов летят из облака S3, пока утка обрабатывает уже полученную страницу за ноутбуком
Совмещайте удалённые чтения с обработкой: загружайте следующие данные, пока работаете с поступившими.

На момент написания документация по вводу-выводу указывает поддержку Parquet и несжатых UTF-8 CSV-файлов с возможностью поиска; JSON и собственные файлы DuckDB по-прежнему отнесены к синхронному вводу-выводу. В статье о превью 2.0 также упоминается продвижение к поддержке собственного формата, поэтому проверьте возможности используемой версии. Документация по вводу-выводу

4. DuckDB как сервер: за пределами одного процесса

DuckDB начинался как встроенная база данных, работающая прямо внутри приложений на Python, Rust и C++. Такая модель делает менее удобным совместное использование базы данных разными приложениями или удалённое выполнение запросов. Версия 2.0 представляет протокол Quack и оператор CONNECT, позволяя DuckDB работать как сервер, а клиентам — отправлять SQL на удалённое выполнение. Также поддерживается передача запросов в удалённые базы данных, такие как PostgreSQL и MySQL, вместо переноса данных в локальный процесс.

Две утки за разными ноутбуками обмениваются SQL-запросами и результатами через общий удалённый сервер
Несколько клиентов могут отправлять запросы на общий сервер и получать результаты. Контроль доступа и аудит по-прежнему требуют проектирования на уровне приложения.

Это важно для корпоративного использования: командам нужно общее рабочее пространство. Архитектура, которую я хочу построить, приближает ИИ к данным, а вычисления выполняются там, где находятся данные.

Сам по себе Quack не является полноценным корпоративным решением для разрешений, аудита и мультитенантности. Для этого по-прежнему нужен дизайн на уровне приложения. Quack даёт основу для построения такой архитектуры.

Локальный подход означает контроль пользователей над своими данными и вычислениями. Он не требует, чтобы всё происходило локально.

5. Другие улучшения, заслуживающие внимания

  1. Переписанный движок рекурсивных CTE. В тесте достижимости в графе с миллионом рёбер время запроса сократилось с 4,90 секунды до 0,12 секунды — ускорение примерно в 40 раз. Некоторые задачи обхода графов становятся практичнее на SQL, хотя это не делает DuckDB заменой специализированной графовой базы данных.
  2. Нативные замены функциональности ICU. DuckDB избавляется от зависимости от библиотеки ICU. В микробенчмарках преобразование часовых поясов стало примерно в 2,2 раза быстрее, а фильтрация с немецкой сортировкой — примерно в 2,6 раза быстрее. Меньший размер также полезен для встроенных приложений.
  3. Стабильный API расширений. Переработанный C API, версионированный ABI и поддержка собственных репозиториев расширений могут существенно сократить затраты на сопровождение при обновлениях DuckDB. Это особенно перспективно для разработчиков расширений на Rust.
  4. Триггеры и PEG-парсер. Триггеры могут поддерживать аудит и обработку изменений данных. Расширяемый парсер даёт расширениям более глубокий доступ к разбору SQL, потенциально открывая путь к предметному синтаксису для аналитики безопасности и наблюдаемости.

6. Перед обновлением

Версия 2.0 не полностью обратно совместима.

  • Формат хранения. Файлы, созданные или записанные в новом формате по умолчанию, не открываются в старых версиях. Если старые читатели должны поддерживаться, задайте явную версию совместимости формата хранения. Существующие базы данных можно экспортировать и импортировать по официальному руководству по миграции.
  • Синтаксис лямбда-выражений. Старый синтаксис отключён по умолчанию. Временная настройка совместимости может его включить, но удаление запланировано в 2.1.
-- Old
SELECT list_transform([1, 2, 3], x -> x + 1);
-- New
SELECT list_transform([1, 2, 3], lambda x : x + 1);
  • Расширения C++. Перед обновлением убедитесь, что доступны совместимые сборки.

Проверьте существующие запросы, файлы баз данных и сторонние расширения, прежде чем переносить рабочие нагрузки. Настольным приложениям следует особенно внимательно следить за тем, чтобы не мигрировать формат файлов пользователя незаметно: более старая версия приложения может больше не суметь его открыть. Руководство по миграции

7. Заключение

Анализ CSV-файла или нескольких гигабайт журналов часто начинается с развёртывания базы данных, настройки конвейеров и поддержки сервисов. Это может быть оправдано для крупной корпоративной платформы данных, но не всегда необходимо отдельным разработчикам, аналитикам безопасности или для разовых расследований.

DuckDB встраивает аналитический движок прямо в приложение. Версия 2.0 добавляет серверный режим, Agent Mode и более зрелую экосистему расширений. База данных, ИИ-агент и визуальный интерфейс могут объединиться в лёгкое, встраиваемое рабочее пространство анализа данных.

Поэтому я создаю DuckLocal — настольное приложение с открытым исходным кодом и локальным подходом для SQL, визуальных дашбордов и совместного анализа с ИИ. ИИ помогает исследовать данные, а пользователь сохраняет контроль: выполнение остаётся проверяемым, а SQL — прозрачным.

Источники

По состоянию на 19 октября 2026 года DuckDB 2.0 ещё не выпущен. Дата релиза и детали функций остаются предметом окончательного официального анонса.