snappy压缩

10个Pandas的另类数据处理技巧（pandas数据处理案例）

来源：DeepHubIMBA本文约2000字，建议阅读5分钟本文介绍了10个Pandas的常用技巧。本文所整理的技巧与以前整理过10个Pandas的常用技巧不同，你可能并不会经常的使用它，但是有时候当你遇到一些非常棘手的问题时，这些技巧可以帮你快速解决一些不常见的问题。1、Categorical类...

Redisson的11个应用场景（redis各种类型的应用场景）

Redisson使得作为协调单机多线程并发程序的工具包，获得了协调分布式多机多线程并发系统的能力,降低了设计和研发大规模分布式系统的难度（保障了原子性）。主要下面11个应用场景：1.分布式锁完美解决了3个问题：（1）加锁原子性问题（设置过期时间，中途宕机产生死锁）（2）释放锁原子性问题（A线程误删...

用友UAP解开非结构化大数据处理与分析的密码

在大数据备受关注的今天，企业不能盲从，而是应该明白大数据为什么会如此之热，为什么去关注它。其中一个重要原因就是，大数据不同于普通数据，它增加了很多半结构化数据和非结构化数据，并且其数量级和价值不可同日而语。IDC的报告显示，目前大数据的1.8万亿GB容量中，非结构化数据占到了80%~90%之间，并且...

面试必备之kafka生产者发送流程+优化

Kafka发送流程与优化经验：从“发个消息”到“发个火箭”大家好，我是你们的Kafka老司机，今天咱们来聊聊Kafka的消息发送流程和优化经验。如果你觉得Kafka只是一个“发消息”的工具，那你就太小看它了！它可是分布式系统中的“火箭发射器”，能把你的消息以光速送到目的地。不过，想要驾驭这枚“火箭”...

Kafka消息中间件:消息传递的艺术（kafka的消息传递模式有哪些）

Kafka消息中间件：消息传递的艺术在现代互联网架构中，Kafka作为一款分布式流处理平台，已经成为了消息中间件的标杆。它以其高吞吐量、低延迟和水平扩展能力，在大规模数据处理和消息传递场景中大放异彩。本文将带你深入了解Kafka的基本原理、核心功能，以及如何在实际应用中进行高效使用与优化。Kafka...

hbase常用命令集合（hbase常见命令）

1进入hbasehbaseshell2列举表list3创建表语法：createt1，{NAME=>f1,VERSION=>1}举例，创建一个user表，列族为f1,只保存一个版本，使用snappy进行压缩(REPLICATION_SCOPE是在配置HBase集群repli...

hadoop（hadoop和spark）

Hadoop概述1、Hadoop是什么Hadoop是一个由Apache基金会开发的分布式系统基础架构；主要解决海量数据的存储和分析计算问题；广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈；【Hadoop三大发行版本】Apache：版本最原始（最基础）的版本，对于入门学习最...

HBase - 建表语句解析（hbase创建表空间）

网易视频云是网易公司旗下的视频云服务产品，以Paas服务模式，向开发者提供音视频编解码SDK和开放API，助力APP接入音视频功能。现在，网易视频云的技术专家给大家分享一篇技术性文章：HBase－建表语句解析。像所有其他数据库一样，HBase也有表的概念，有表的地方就有建表语句，而且建表语句还很...

kafka为什么吞吐量大?（kafka为什么吞吐量大）

Kafka的消息是保存或缓存在磁盘上的，一般认为在磁盘上读写数据是会降低性能的，因为寻址会比较消耗时间，但是实际上，Kafka的特性之一就是高吞吐率。Kafka也可以轻松支持每秒百万级的写入请求，超过了大部分的消息中间件，这种特性也使得Kafka在日志处理等海量数据场景广泛应用。写入数据：1.顺序写...

[翻译]phoenix的配置项（phoenix framework）

自己在工作中使用到了phoenix,过程中也使用到了一些phoenix的基本配置项，发现配置的还挺多的，就把官网上的一些翻译了过来，权当记录吧原文地址：http://phoenix.apache.org/tuning.html属性名称属性描述默认值phoenix.query.timeoutMs查询...