Dune

1. Опенсорсное озеро ончейн-данных и архитектура DuneSQL: параллельные вычисления Trino MPP, многоуровневая абстракция и ИИ-помощник

1.1 Крупнейшее глобальное хранилище открытых блокчейн-данных и базовая архитектура DWH

В сфере блокчейн-аналитики и глубинной добычи ончейн-данных платформа Dune (ранее Dune Analytics) была основана в 2018 году Фредриком Хагой (Fredrik Haga) и Матсом Олсеном (Mats Olsen). Сегодня Dune трансформировалась в крупнейшую в мире, обладающую высочайшим авторитетом коллаборативную платформу анализа данных и децентрализованную инфраструктуру озер данных (data lake) в индустрии Web3. От Ethereum Foundation и ключевых разработчиков ведущих протоколов вроде Uniswap до тир-1 крипто-хедж-фондов и независимых аналитиков бай-сайд сектора — все они используют Dune в качестве отраслевого стандарта для верификации ончейн-фактов и построения аудируемых финансовых моделей.

Технологический ров Dune опирается на распределенную архитектуру корпоративного хранилища данных (DWH) с массово-параллельной обработкой (MPP):

• Собственный вычислительный движок DuneSQL: Платформа полностью завершила масштабную миграцию со старой инфраструктуры одноузлового PostgreSQL и Apache Spark SQL на движок DuneSQL, созданный специально для аналитической обработки терабайтных массивов блокчейн-данных. Глубоко интегрированный с распределенным фреймворком Trino (ранее PrestoSQL), DuneSQL обеспечивает отклик от миллисекунд до нескольких секунд по более чем 50 гетерогенным блокчейнам (включая Ethereum, Solana, Bitcoin, Arbitrum, Base, Optimism, Polygon, BNB Chain, Avalanche и др.), поддерживая кроссчейн-объединения (JOIN) таблиц объемом в десятки миллиардов строк.
• Трехуровневая модель абстракции данных:
  1. Слой сырых данных (Raw Data Layer): Непрерывно принимает исходное состояние блокчейнов без искажений: блоки (blocks), транзакции (transactions), системные и контрактные логи (logs) и внутренние трассировки вызовов (traces).
  2. Слой декодированных контрактов (Decoded Data Layer): Позволяет разработчикам протоколов и аналитикам загружать верифицированные ABI (Application Binary Interface) смарт-контрактов. Система автоматически преобразует шестнадцатеричный байткод в структурированные реляционные таблицы событий (events) и внешних вызовов функций (calls).
  3. Открытый семантический слой (Spellbook / Curated Models): Совместно поддерживается командой инженеров Dune и сообществом с использованием dbt (data build tool). За счет нормализации разнородных таблиц различных DEX, NFT-маркетплейсов и лендинговых протоколов в единые модели (dex.trades, nft.trades, tokens.transfers), исследователи могут агрегировать торговые объемы сотен протоколов с помощью одного унифицированного SQL-запроса.

1.2 Естественный язык и ускорение через LLM: аналитическая эволюция Dune AI

Чтобы стереть технические барьеры между сложной инженерией данных и фундаментальным анализом инвестиций, Dune внедрила интеллектуальный помощник Dune AI, глубоко синхронизированный с большими языковыми моделями:

• Генерация кода DuneSQL из естественного языка: Аналитику достаточно ввести финансовую бизнес-задачу на обычном языке (например: «Рассчитать топ-10 пулов ликвидности на DEX в сети Base по объему торгов за последние 30 дней и их 7-дневный коэффициент удержания пользователей»). Dune AI сканирует схемы смарт-контрактов и автоматически компилирует модульный, параметризованный код DuneSQL, готовый к запуску.
• Интеллектуальная отладка и декомпозиция сложных подзапросов: При работе со сложными оконными функциями (Window Functions), многократными соединениями JOIN или вложенными CTE (Common Table Expressions) Dune AI пошагово объясняет логику вычислений и мгновенно выявляет ошибки приведения типов или устаревшие схемы таблиц, радикально сокращая время подготовки инвестиционных отчетов.

2. Разрушение коммерческих «черных ящиков» и очистка от фиктивного объема: полный аудит кода, эвристика Hildobby и когортное удержание

2.1 Ликвидация закрытых метрик: 100% прозрачность кода через кнопку «View Query»

Традиционные централизованные рыночные агрегаторы и закрытые коммерческие терминалы часто демонстрируют агрегированные цифры («ежедневно активные адреса» или «выручка протокола») без раскрытия формул расчета, что нередко скрывает двойной счет или методологическую предвзятость в пользу рекламодателей. Dune установила отраслевой стандарт абсолютной аудируемости:

• 100% открытая логика визуализаций: Под каждым графиком, информационной карточкой и сводной таблицей на Dune присутствует прямая ссылка «View Query» (Просмотреть запрос).
• Фальсифицируемость и научная строгость: Любой исследователь может проверить лежащий в основе SQL-код: были ли исключены внутренние переводы смарт-контрактов, отфильтрован ли объем мгновенных займов (flash loans) и приведены ли временные метки к стандарту UTC. Это исключает манипулирование рынком под предлогом «статистических расхождений».

2.2 Индустриальный стандарт деконтаминации вош-трейдинга (эвристическая модель Hildobby)

Во время циклов фарминга аирдропов и спекуляций мемкоинами ончейн-пространство наводняется автоматизированными скриптами, которые накручивают фиктивные объемы с помощью циклической торговли. Опенсорсная эвристическая модель, опубликованная на Dune ведущим исследователем Hildobby, была принята инвестиционными банками Уолл-стрит и академическими институтами как базовый фильтр для выявления подлинной ликвидности:

• Четыре ключевых эвристических правила:
  1. Исключение сделок с самим собой (Self-Dealing): Полная фильтрация транзакций, где адрес покупателя и продавца совпадает, либо где комиссии за газ обеих сторон оплачивались с одного и того же мастер-кошелька с мультиподписью или депозитного прокси.
  2. Выявление замкнутых циклов: Детекция кругового перемещения одного и того же актива между 2–3 связанными адресами в пределах узкого временного окна (например, до 1 часа) с нулевым спредом более 3 раз подряд.
  3. Аномалии с нулевой комиссией и роялти: Отсечение высокочастотных сделок, использующих промо-акции с нулевыми комиссиями для накрутки очков управления без ценового риска.
  4. Атомарные сделки через Flash Loans внутри одного блока: Идентификация транзакций, которые берут колоссальный мгновенный заем, совершают фиктивный обмен и возвращают долг в рамках одного блока без фактического предоставления чистого капитала.

2.3 Разоблачение сибил-атак и иллюзорной активности: анализ когортного удержания (Cohort Retention)

Формируя модели когортного анализа во времени, Dune позволяет аналитикам легко развеять «пузыри псевдопроцветания», раздутые ожиданиями аирдропов:

• Когортный анализ удержания (Cohort Retention): Пользователи группируются по неделе или месяцу совершения первой транзакции. Протоколы с реальным соответствием продукта рынку (Product-Market Fit / PMF) демонстрируют стабилизацию 30-дневного удержания на уровне 15%–25% и выше. Напротив, проекты-пустышки теряют более 95% активных адресов сразу после даты снимка сети (snapshot).
• Качественная стратификация адресов: SQL-запросы отсекают бот-аккаунты с балансом менее $10 или взаимодействиями менее чем с 2 смарт-контрактами, позволяя точно определить долю органических платежеспособных пользователей (Organic Users).

3. Макроциклические нарративы и микропротокольное финансовое моделирование: переток капитала в Layer 2, реальная доходность DEX и клифы ликвидаций

3.1 Дашборды макрорыночной динамики и секторной ротации

Объединяя ончейн-данные множества сетей, Dune формирует основу для тысяч дашбордов, отражающих макроэкономические циклы отрасли:

• Здоровье экосистемы Layer 2 на базе Ethereum:
  • Отслеживает реальный TPS, выручку секвенсоров (Sequencer Revenue) и операционные расходы на отправку данных blob в Ethereum L1 (EIP-4844) для Arbitrum, Base, Optimism и других роллапов.
  • Расчет валовой прибыли секвенсора: Чистая прибыль секвенсора = Общий объем комиссий, собранных с пользователей - Затраты на публикацию Blob и Calldata в Ethereum L1 Позволяет четко отделить самоокупаемые сети L2 с чистым операционным денежным потоком от сетей, работающих с хроническим структурным убытком.
• Резервы кастодианов спотовых Bitcoin ETF: Круглосуточный мониторинг ежедневного чистого притока и оттока на холодных кошельках кастодианов (таких как Coinbase Prime) для фондов BlackRock (IBIT), Fidelity (FBTC) и др., служащий главным институциональным барометром настроений на спотовом рынке.
• Динамика предложения стейблкоинов по сетям: Анализ скорости эмиссии и сжигания USDT и USDC в разрезе блокчейнов, определяющий экосистемы, находящиеся в фазе активного притока капитала.

3.2 Фундаментальный финансовый анализ и теория игр в микропротоколах

Для бай-сайд аналитиков Dune обеспечивает детализацию микроструктуры рынка, недоступную традиционным терминалам:

• Аудит реальной доходности поставщиков ликвидности (LP):
  • В протоколах концентрированной ликвидности (Uniswap v3 и v4) исследователи строят потиковые модели сопоставления фактически полученных комиссий и динамических непостоянных потерь (Impermanent Loss - IL).
  • Наглядно демонстрирует, что пассивные розничные LP-стратегии в узких диапазонах при сильном однонаправленном тренде часто приносят чистый убыток из-за превышения непостоянных потерь над комиссионным доходом.
• Моделирование клифов ликвидаций (Liquidation Cliffs) в лендинге:
  • Динамически рассчитывает кривую распределения коэффициента здоровья (Health Factor Distribution) топ-100 заемщиков на рынке.
  • Симулирует каскадные ликвидации при падении стоимости залога на 10%, 20% и 30%, заранее определяя критические ценовые зоны риска для трейдеров бессрочными деривативами.

4. Коммерческая продуктовая линейка и вычислительные мощности: бесплатная квота, Dune Plus/Pro и корпоративный API

4.1 Максимально открытая экосистема свободного доступа для сообщества

Dune поддерживает беспрецедентный уровень свободы и доступности для частных аналитиков:

• 100% бесплатный просмотр и взаимодействие с публичными дашбордами: Пользователи по всему миру могут без подписки искать, фильтровать, менять параметры и исследовать миллионы опубликованных аналитических панелей.
• Свободный форкинг и адаптация кода: Любой публичный запрос можно в один клик клонировать («Fork») в свое рабочее пространство, изменив адреса контрактов или временные интервалы под свои исследовательские задачи.
• Встраивание динамических графиков: Виджеты можно внедрять через iframes или ссылки на динамические изображения в аналитические отчеты, базы Notion или новостные рассылки с автоматическим обновлением данных по мере появления новых блоков.

4.2 Подписки Dune Plus и Pro: защита проприетарной альфы бай-сайд фондов

Для количественных хедж-фондов, венчурных компаний и корпоративных аналитических команд Dune предлагает коммерческие тарифные планы:

• Приватные дашборды и сокрытие логики запросов: В то время как на бесплатном тарифе все SQL-запросы публичны, пользователи Plus и Pro могут сохранять свои альфа-алгоритмы, фильтры вош-трейдинга и списки отслеживания адресов в строгой тайне.
• Приоритетные вычислительные очереди и масштабируемость: Исключают задержки во время высокой рыночной волатильности, предоставляя приоритетные вычислительные мощности для тяжелых запросов и экспорт миллионов строк в CSV/JSON без ограничений.

4.3 Институциональный дата-пайплайн: коммерческая экосистема Dune API

Для алгоритмической торговли и разработки Web3-продуктов открыт доступ к Dune API:

• Прямая трансформация SQL в микросервисный эндпоинт: Устраняет затраты на развертывание и обслуживание собственных архивных нод и сложных ETL-конвейеров. Запрос на DuneSQL мгновенно превращается в низколатентный JSON-эндпоинт по ключу API.
• Низколатентная интеграция в квантовые стратегии: Позволяет маркетмейкерам и системным фондам транслировать макросигналы и микропороги ликвидаций напрямую в ядра управления рисками торговых систем.

5. Профессиональный исследовательский и квантовый ончейн-воркфлоу: классические институциональные дашборды, форкинг и тайминг макроциклов

5.1 Построение трехуровневой матрицы мониторинга институционального уровня

Профессиональные исследователи организуют свои рабочие пространства в Dune в виде трехуровневой матрицы:

1. Уровень 1: Дашборд макроликвидности и тайминга рыночных циклов (Macro Dashboard)
   • Ключевые метрики: Долгосрочное перцентильное распределение базового газа в Ethereum, агрегированное число уникальных активных адресов по топ-10 блокчейнам и чистый приток/отток средств на спотовых централизованных биржах (CEX).
   • Практические решения: Удержание перцентилей газа на экстремально низких уровнях (например, менее 5–10 Gwei) в течение нескольких недель подряд при росте балансов институциональных кастодианов указывает на фазу долгосрочного накопления; напротив, взлет цен на газ до сотен Gwei на волне ажиотажа сигнализирует о необходимости фиксации прибыли.
2. Уровень 2: Дашборд секторной ротации и миграции капитала (Sector Rotation Dashboard)
   • Ключевые метрики: Еженедельное число новых верифицированных смарт-контрактов в сетях L1 и L2, а также коэффициент проникновения торгового объема DEX относительно CEX.
   • Практические решения: Заблаговременное выявление новых сетей, поглощающих избыточную ликвидность зрелых блокчейнов, что позволяет войти в нативные активы экосистемы до кульминации рыночного нарратива.
3. Уровень 3: Дашборд фундаментальных показателей токенов и реального денежного потока (Token Fundamental Dashboard)
   • Ключевые метрики: Чистая удержанная выручка протокола, баланс ежедневной эмиссии и сжигания токенов, реальная годовая комиссионная доходность в топ-20 пулах ликвидности.
   • Практические решения: Верификация инвестиционных тезисов через устойчивый операционный денежный поток в блокчейне и отсечение спекулятивных проектов, скрывающих стагнацию за счет инфляционных стимулов.

5.2 Практическая методология форкинга и вторичной разработки в три шага

Даже без глубоких навыков в инженерии данных любой аналитик может освоить экосистему Dune:

• Шаг 1: Поиск эталонных дашбордов: Используйте поиск платформы для обнаружения высоко оцененных панелей от признанных экспертов (Hildobby, ChainsightLabs, EliasSimos).
• Шаг 2: Форкинг и параметризация ключевых переменных: Нажмите «Fork» в редакторе запроса. В блоке WHERE замените адреса смарт-контрактов токенов на исследуемый актив и скорректируйте временной интервал (например, INTERVAL '30' DAY).
• Шаг 3: Настройка визуализации с помощью Dune AI: В результатах запроса нажмите «Add Visualization». Выберите линейный график, столбчатую диаграмму, диаграмму с областями или карточку KPI. Назначьте ось X на временные метки блоков, а ось Y — на объем в USD, получив профессиональный график менее чем за пять минут.

5.3 Три критические когнитивные ловушки в ончейн-анализе

• Ловушка 1: Отождествление числа транзакций (Transactions) с реальными пользователями (Users): В сетях с копеечными комиссиями один автоматизированный скрипт или игровой бот может генерировать миллионы транзакций в день. Оценка сетевого объема без фильтрации по балансу и кластеризации адресов приводит к грубейшей переоценке фундаментальной стоимости.
• Ловушка 2: Игнорирование физической задержки поступления данных в Dune: Пайплайн данных Dune включает распространение блоков, синхронизацию нод, декодирование байткода и распределенную запись в таблицы, создавая объективную задержку от нескольких секунд до минут. Dune незаменима для фундаментального аудита и анализа среднесрочных трендов, но категорически не подходит для миллисекундного высокочастотного арбитража и MEV.
• Ловушка 3: Слепое доверие устаревшим запросам сообщества: Смарт-контракты регулярно обновляются (например, переход Uniswap с v2 на v3 и v4, или обновление Ethereum до PoS). Многие популярные дашборды прошлых лет заброшены и обращаются к устаревшим таблицам. Перед цитированием метрик всегда проверяйте время последнего успешного выполнения запроса и его совместимость с актуальными таблицами Spellbook.