孤独打铁匠Julian-优快云博客

chunk 函数是一种用于处理大型数据集的技术，它允许我们将数据分割成小块进行处理，而不是一次性加载整个数据集到内存中。在 Python 中，我们可以使用各种库（如 Pandas、NumPy 等）来处理数据，而这些库通常提供了针对大型数据集的 chunk 处理功能。通过使用 chunk 函数，我们可以在处理大型数据集时进行内存优化，避免内存溢出错误，并提高数据处理效率。

2024-03-13 13:34:44 2015

原创 CSV：删除每一行行末多余的逗号及其之后的所有内容

CSV：删除每一行行末多余的逗号及其之后的所有内容

2024-03-07 15:06:15 717 1

原创 bug：bash: /usr/bin/hs.sh: /bin/bash^M: 坏的解释器: 没有那个文件或目录

/bin/bash^M: 坏的解释器: 没有那个文件或目录

2024-03-04 16:50:27 504 1

原创【虚拟机】VMware上的CentOS 7虚拟机扩展磁盘空间

VMware上的CentOS 7虚拟机扩展磁盘空间

2024-03-04 15:17:07 1492 3

原创 bug：Could not stat xxx --- No such file or directory

对虚拟机磁盘进行扩容。

2024-03-04 14:03:33 579 1

原创 bug：pandas.errors.ParserError: Error tokenizing data. C error: EOF inside string starting at row 143

使用Pandas库读取CSV文件报错。

2024-02-27 15:59:21 1823 1

原创 CSV指南：使用Pandas库分割大型CSV文件

处理非常大的CSV文件时，直接操作整个文件可能会非常困难，特别是当文件大小超过了你的计算机内存时。一个常见的解决方案是将大文件分割成多个小文件，这样可以更容易地进行数据处理和分析。

2024-02-27 15:07:19 2664 1

原创 CSV指南：Python程序获取大型CSV文件行数

本指南提供了几种使用Python来获取大型CSV文件行数的方法，并解释了每种方法的适用场景。

2024-02-27 14:30:40 3379 1

qq_59629101的博客

原创【Linux】Hadoop-3.4.1的伪分布式集群的初步配置

原创【Linux】Ubuntu 24.04 LTS 安装 Hadoop-3.4.1

原创【Linux】Ubuntu 24.04 LTS 安装 OpenJDK 8

原创【Linux】VMware 17 安装 VMware Tools

原创【Linux】VMware17 安装 Ubuntu24.04 虚拟机

原创【Linux】VMware Workstation Pro 17 安装教程

原创【计算机网络】第 11、12 问：流量控制和可靠传输机制有哪些？

原创【计算机网络】第 10 问：为什么要进行流量控制？

原创【计算机网络】第 9 问：四种信道划分介质访问控制？

原创【计算机网络】第 8 问：什么是同步通信和异步通信？

原创【计算机网络】第 7 问：端到端通信和点到点通信的区别？

原创【计算机网络】第 6 问：ISO/OSI 参考模型和 TCP/IP 模型？

原创【计算机网络】第 5 问：计算机网络提供的服务的三种分类？

原创【计算机网络】第 4 问：计算机网络的主要性能指标？

原创【计算机网络】第 3 问：电路交换、报文交换、分组交换之间的区别？

原创【计算机网络】第 2 问：主机间的通信方式？

原创【计算机网络】第 1 问：计算机网络的主要功能？

原创【DS笔记】绪论：数据结构的基本概念、数据结构的三要素

原创【CSV】通过经纬度计算距离并对距离进行筛选

原创【Python】数据处理中的内存优化：chunk 函数