clickhouse

  • ХабрахабрФото Забиваем телескопом гвозди или нестандартные способы использования ClickHouse. Александр Зайцев (2018г)

    Забиваем телескопом гвозди или нестандартные способы использования ClickHouse. Александр Зайцев (2018г)

    ClickHouse — open-source DBMS от Яндекса — традиционно используется для аналитики различного рода логов или потоков событий от онлайн-систем. Однако, гибкость ClickHouse позволяет применять его для более широкого класса задач. Видео: Здравствуйте! У меня будет несколько специфический доклад про то, как мы забиваем ClickHouse гвозди. Обычно говорят, что микроскопом гвозди забивают, но ClickHouse – это все-таки штука, которая смотрит вдаль…

    Читать далее »
  • ХабрахабрФото Эффективное использование ClickHouse. Алексей Миловидов (Яндекс)

    Эффективное использование ClickHouse. Алексей Миловидов (Яндекс)

    Так как ClickHouse является специализированной системой, при его использовании важно учитывать особенности его архитектуры. В этом докладе Алексей расскажет о примерах типичных ошибок при использовании ClickHouse, которые могут привести к неэффективной работе. На примерах из практики будет показано, как выбор той или иной схемы обработки данных может изменить производительность на порядки. Всем привет! Меня зовут Алексей, я делаю ClickHouse. Во-первых,…

    Читать далее »
  • ХабрахабрФото Отправка Nginx json логов с помощью Vector в Clickhouse и Elasticsearch

    Отправка Nginx json логов с помощью Vector в Clickhouse и Elasticsearch

    Vector, предназначенной для сбора, преобразования и отправки данных логов, метрик и событий. → Github Будучи написанной на языке Rust, она отличается высокой производительностью и низким потреблением оперативной памяти по сравнению с аналогами. Кроме того, большое внимание уделено функциям, связанным с корректностью, в частности, возможностям сохранения неотправленных событий в буфер на диске и ротации файлов. Архитектурно Vector является роутером событий, принимающим сообщения…

    Читать далее »
  • ХабрахабрФото DataGrip 2020.2: редактор больших значений, предпросмотр SQL при редактировании, новое отображение ячеек bool и другое

    DataGrip 2020.2: редактор больших значений, предпросмотр SQL при редактировании, новое отображение ячеек bool и другое

    Привет! За последние четыре месяца мы выпускали фичи и между релизами, поэтому в этой статье о том, что нового появилось в DataGrip за это время. Она приурочена к нашему новому релизу: 2020.2. Получилось длинно, но, надеемся, полезно. Редактор данных Редактор больших значений Мы приделали полноценный редактор к ячейкам. Если в ячейке длинное значение, например XML или JSON, его удобно открыть…

    Читать далее »
  • ХабрахабрФото Разрабатываем самый удобный в мире* интерфейс для просмотра логов

    Разрабатываем самый удобный в мире* интерфейс для просмотра логов

    Если Вам приходилось когда-нибудь пользоваться веб-интерфейсами для просмотра логов, то Вы наверняка замечали, насколько, как правило, эти интерфейсы громоздки и (зачастую) не слишком-то удобны и отзывчивы. К некоторым можно привыкнуть, некоторые совсем ужасны, но, как мне кажется, причина всех проблем заключается в том, что мы неправильно подходим к задаче просмотра логов: мы пытаемся создать веб-интерфейс там, где лучше работает CLI…

    Читать далее »
  • ХабрахабрФото Практические истории из наших SRE-будней. Часть 2

    Практические истории из наших SRE-будней. Часть 2

    Утекло уже немало воды с момента публикации нашего последнего очерка об интересных случаях из практики обслуживания Kubernetes-кластеров и запускаемых в нём сервисов/приложений. Хотим представить очередную серию приключений инженеров «Фланта» в неспокойных водах большой (и не очень) веб-разработки. История №1. Kafka и переменные от Docker’a в K8s Работа в системах, построенных на контейнерах, постепенно становится стандартом отрасли и многие инструменты уже…

    Читать далее »
  • ХабрахабрФото Что нужно знать об архитектуре ClickHouse, чтобы его эффективно использовать. Алексей Зателепин (2018г)

    Что нужно знать об архитектуре ClickHouse, чтобы его эффективно использовать. Алексей Зателепин (2018г)

    ClickHouse — высокопроизводительная аналитическая база данных с открытыми исходниками, разработанная в Яндексе. Изначально ClickHouse создавался для задач Яндекс.Метрики, но постепенно нашёл множество применений как внутри Яндекса, так и в других компаниях. Я расскажу, как ClickHouse устроен внутри с акцентом на то, какие у выбранной архитектуры следствия с точки зрения прикладного разработчика. Будут затронуты следующие темы: Как ClickHouse хранит данные на…

    Читать далее »
  • ХабрахабрФото РИТ++ 2020: консультации с инженерами Авито в Зуме

    РИТ++ 2020: консультации с инженерами Авито в Зуме

    Привет, Хабр! 25 и 26 мая будет РИТ++. Это большая онлайн-конференция для всех, кто делает интернет. В обычных условиях мы бы встретились на стенде Авито в зале мероприятия, но 2020 перевернул всё с ног на голову. Так что общение переносится в Зум, где 11 наших инженеров из разных команд ответят на вопросы про базы данных, перформанс, мониторинг, микросервисную архитектуру и многое другое. Участвовать в консультации можно независимо от того, есть у вас билет на конференцию…

    Читать далее »
  • ХабрахабрФото ClickHouse для продвинутых пользователей в вопросах и ответах

    ClickHouse для продвинутых пользователей в вопросах и ответах

    В апреле инженеры Авито собирались на онлайн-посиделки с главным разработчиком ClickHouse Алексеем Миловидовым и Кириллом Шваковым, Golang-разработчиком из компании Integros. Обсуждали, как мы используем систему управления базами данных и какие сложности у нас возникают. По мотивам встречи мы собрали статью с ответами экспертов на наши и зрительские вопросы про бэкапы, решардинг данных, внешние словари, Golang-драйвер и обновление версий ClickHouse. Она может быть полезна разработчикам, которые уже активно…

    Читать далее »
  • ХабрахабрФото Отъявленные баги и как их избежать на примере ClickHouse

    Отъявленные баги и как их избежать на примере ClickHouse

    Если вы пишете код — готовьтесь к проблемам. Они обязательно будут, и ожидать их стоит со всех сторон: от вашего кода и компилятора, от операционной системы и железа, а еще пользователи иногда подкидывают «сюрпризы». Если вы отмасштабировали кластер до космических масштабов, то ожидайте «космических» багов. Особенно, если речь идёт о данных из интернет-трафика. [embedded content] Алексей Миловидов (o6CuFl2Q) расскажет о…

    Читать далее »


Кнопка «Наверх»