Hadoop Series

原创已于 2023-11-03 08:51:07 修改 · 213 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #java #python

于 2023-10-18 15:24:15 首次发布

本文概述了IT领域的关键术语，包括数据存储（如PB、EB等）、计算性能指标（FLOPS）、网络技术（如TCP/IPOffloading、RDMA）、新型存储接口（CXL、NoFNVMe）、数据处理方法（NoSQL、ECE等）以及高性能计算和新兴计算架构（如GPU、DPU、IPU）。同时提到了URL加密和Trino数据库的相关信息。

在这里插入图片描述

Big Data

1 TB = 1,024 GB
1 PB = 1,024 TB
1 EB = 1,024 PB
1 ZB = 1,024 EB
1 YB = 1,024 ZB

FLOPS                   FLoating-point Operations Per Second
TOE                     TCP/IP Offloading Engine
RDMA                    Remote Direct Memory Access
CXL                     Compute Express Link
NoF                     NVMe Over Fabric
JBOF                    Just Bunch Of Flash
EBOF                    Ethernet Bunch Of Flash
NoSQL                   Not Only SQL

RAID                    Redundant Array of Independent Disks
EC                      Erasure Coding
CRUSH                   Controlled Replication Under Scalable Hashing

HPC    高性能计算        High performance computing
EC     边缘计算          Edge Computing
GPU    图形处理器        Graphics Processing Unit
DPU    数据处理器        Data Processing Unit
IPU    基础设施处理器    Infrastructure Processing Unit

URL de-Escalated

####################################################################################
# Base62 Lookup Table
####################################################################################
EMPTY = ''
ALPHABET = [
	'0123456789',
	'abcdefghijklmnopqrstuvwxyz',
	'ABCDEFGHIJKLMNOPQRSTUVWXYZ'
]
PlainText = []
CipherText = []
LUT = EMPTY.join(ALPHABET)
####################################################################################

Trino

https://ta.thinkingdata.cn/trino-docs/index.html