Публикации по теме big-data

Публикации по теме 'big-data'

Как раскрыть весь потенциал продюсеров Kafka

Объяснение конфигураций производителя, которые улучшают производительность конвейеров Kafka. В Gojek мы используем Kafka для решения масштабных задач . Поэтому для нас важна каждая мелочь. Производители в Kafka имеют множество конфигураций, и знание того, когда их использовать, может улучшить производительность вашего конвейера Kafka. В этом посте давайте проанализируем некоторые из этих конфигураций, которые вы, возможно, не используете, но должны. Конфигурации производителя..

Паркетные бревна с Golang

Любой, кто работает с «большими данными», знает об Apache Parquet как о решении для хранения данных. Parquet обеспечивает производительность, масштабируемость и совместимость с различными платформами обработки, что делает его отличным выбором для конвейера ETL. Этот пост имеет следующие разделы: Раздел 1. Паркет Apache Раздел 2. Сжатие паркета Раздел 3: Golang + Apache Parquet Раздел 4. Заключение Раздел 1: Паркет Apache Официальная документация Apache Parquet..

Почему Data — новая нефть?

Я уверен, вы слышали, что «данные — это новая нефть». Данным суждено сыграть такую же важную роль в нашей жизни, как и нефти. Мы используем его почти во всех повседневных делах, сознательно или неосознанно. Почему мы сравниваем данные с нефтью, природным ресурсом, который когда-то был в изобилии в природе и который сегодня буквально питает почти всю нашу повседневную деятельность? В конце концов, разве данные не являются побочным продуктом нашей деятельности в цифровом мире?..

Количество разработчиков JavaScript резко возросло, а C # превзошел PHP, открыв новейшие…

Недавно известная аналитическая компания SlashData, опросив более 19 000 разработчиков в 155 странах / регионах по всему миру, опубликовала «Отчет разработчика» (20-е издание) за первый квартал 2021 года. В этом отчете основное внимание уделяется инструментам и инструментам. В таких областях, как языки программирования, машинное обучение, новейшие технологии и встроенные, анализируется состояние приложений инструментов разработки и последние тенденции развития среды разработки...

3 новых интересных функции от K8ssandra для Cassandra 4.0

Автор: Майлз Гарнси Apache Cassandra® 4 содержит множество новых функций, помогающих управлять вашей базой данных. Ведение журнала аудита помогает обеспечить соответствие требованиям безопасности, полное ведение журнала запросов обеспечивает более глубокое понимание выполняемых вами запросов, а обратное давление клиента обеспечивает стабильность кластера под нагрузкой. Выпуск K8ssandra v1.4.0 позволит вам легко воспользоваться этими функциями. Читайте дальше, чтобы узнать,..

Обзор конференции O’Reilly AI 2019 (Пекин)

Как я и ожидал от О'Рейли, это была отличная конференция. Отличные ораторы, хорошее место / расположение и хорошая еда. Было хорошее сочетание технических и нетехнических сессий, а также хорошее представительство как китайских, так и иностранных (в основном западных) компаний. Посетите сайт конференции . Учебники Аналитический зоопарк от Intel ( Слайды конференции на 中文 , похожие слайды на английском ) Intel широко присутствовала на конференции, но, к счастью, это был..

Применение больших данных Tesla и то, как они приводят в действие беспилотные автомобили

Tesla, известный производитель электромобилей, меняет облик автомобильной промышленности, выпуская передовые беспилотные автомобили. Автомобили Tesla оснащены самым современным аппаратным и программным обеспечением, в том числе разветвленной сетью датчиков и камер, которые позволяют им перемещаться по дорогам, пробкам и другим препятствиям с поразительной точностью. Однако ключом к технологии автономного вождения Tesla является огромное количество данных, собираемых с ее автомобилей...