Java/Python大数据随笔

IDEA常用快捷键如下：1、超级常用2、非常常用3、比较常用

Maven可以使用指令对项目进行打包，如果使用执行文件，会出现没有设置Main-Class、ClassNotFoundException（找不到依赖包）等错误要想包能直接通过运行，需要满足：使用Maven有以下几种方式可以生成能直接运行的包：和是默认的打包方式，用来将普通的Project打成包可以使用或选择只打包的部分内容用于生成META-INF/MANIFEST.MF文件的部分内容：例如，下面是一个通过插件生成的MANIFEST.MF文件片段：只是生成MANIFEST.MF文件还不够，插件用于将依赖包

问题的原因也很简单，因为未将Jar包正确安装到Maven本地仓库中。由于Jar包未开源，如果强行将Jar包放入Maven本地仓库，Maven将因Jar包缺失信息而无法识别。只需要将未开源的Jar使用Maven打包命令安装到Maven本地仓库即可。如果按照依赖冲突和加载依赖失败问题来处理，排除冲突的依赖、下载加载失败的对应版本依赖，这无疑将是徒劳的。文件中直接引入公司内部研发的SDK Jar包时，Jar包将爆红，报错显示依赖冲突、加载依赖失败等。安装在Maven本地仓库中的Jar依赖将在。

是Windows的文件资源管理器，负责管理Windows的图形界面，包括桌面、开始菜单、任务栏和文件管理‌。它是微软为Windows操作系统定义的核心进程，提供了图形用户界面（GUI），使得用户可以与系统进行交互。昨天，在电脑输入开机密码进入系统后，出现了黑屏现象。起初是白屏，于是，重新输入密码试了几次，之后都是黑屏，最后重启、关机都试了仍然是黑屏，只能看到鼠标。是一个系统核心进程，当它在任务管理器中被结束后，会导致桌面、任务栏等消失。经过查找资料，因为我电脑安装了火绒，发现是火绒把Windows系统的。

Yum（Yellow dog Updater，Modified）是一个基于RPM（Red-Hat Package Manager）包构建的软件管理机制，可以自动从指定服务器下载并安装RPM包，并处理依赖关系使用Yum下载更新软件，需要有一个包含各种RPM安装包及其依赖的仓库（Repository），提供仓库的服务器称为源服务器，客户机只需要正确指定仓库的地址等信息，就可以通过对应的源服务器来下载或更新软件配置本地Yum源适用于虚拟机没有网络或者网络不稳定的情况。

在Linux中编译安装软件，例如Python，‌这通常包括如下步骤：下载源码包，配置，编译和安装。安装的Python可以通过绝对路径的方式来执行，但过于麻烦。Linux中可以为安装的Python设置软链接（类似于Windows中的快捷方式）是Linux中的一个脚本配置工具，用来对源码的当前安装环境进行检测，若检测无误，会在当前目录生成一个供源码编译的Makefile脚本文件。是Linux系统下的一个编译安装工具，用来解释执行Makefile文件中的编译以及安装命令。命令将左边的路径设置为右边路径的软链接。

HTTP本身不安全，因为传输的数据未经加密，可能会被窃听或篡改，为了解决这个问题，引入了HTTPS，即在HTTP上增加了SSL/TLS协议，为数据传输提供了加密、完整性校验和身份验证。相比于HTTPS，SSH协议更加安全，可以使用密钥对进行身份验证。通过使用SSH密钥对，可以确保数据在传输时受到加密保护，并提供了更高的安全性：SSH密钥对为所有Git操作提供了更安全的身份验证。在使用SSH连接远程Git存储库时，我们可以使用SSH密钥对来确保安全性。现在，我们可以通过SSH连接到远程Git存储库。

Git开发流程规范如下：

单个工作表最大限制1048576行、16384列。多出来的x表示XML（可扩展标记语言），即采用XML存储。xlsx不是一个文件，而是一堆文件的一个压缩包，如果把扩展名xlsx改为zip，就能直接解压，解压后是各种XML文件以及文档表格中的图片等素材。因此，存储同样多的数据，xlsx格式的文件更小。：单个Excel包含的工作表不受限制，受可用内存和系统资源的限制。：单个工作表最大限制65536行、256列。：单个Excel最多包含255个工作表。

通常情况下，IDE自带的侦测功能会帮我们提示一些错误、警告等。但这对于强迫症患者来说并不友好。以下是去除IDE代码和XML文件中的波浪线（黄色警告线）、拯救强迫症患者的有效方案。作为强迫症患者，去除代码和XML中的波浪线是不是瞬间感觉爽了很多…

两个平台的操作基本是一样的，选择以上任意一个远程仓库托管平台即可，新手建议先使用Gitee熟悉操作。介绍：码云（Gitee）是全国最大的开源项目托管平台，良心平台，速度快，提供免费私有库。按照如下步骤操作即可，需要注意的是，最后要点击Test测试，显示版本表示配置成功。新建文件，添加到Git缓存，编辑代码，使用以下任意一种方式提交代码到本地仓库。代码提交到本地仓库后，就可以将本地仓库推送到远程仓库了。选择需要提交的代码，添加描述，点击Commit提交。按如下操作创建本地仓库，支持选择本地已有的项目仓库。

免费字体：花瓣(素材)：加载图标：可视化规范：阿里矢量图标库：可视化地图：PPChart可视化图表：MCChart可视化图表：Made A Pie可视化图表：华为云UI组件库：

翻译插件：截图工具：图像提升：图像ORC：免费抠图：在线抠图在线抠图：转矢量图：改图鸭(图像处理)：奇迹秀工具箱：羽兔网PS下载：PDF转WORD(记灵)：PDF在线工具：视频去字幕水印(腾讯智影)：

正则表达式是一种强大的文本匹配工具，可以用于在文本中查找特定的模式正则表达式由不同类型的字符组成，包括普通字符、元字符、分隔符和转义字符等。普通字符：用于匹配文本中出现的相同字符元字符：用于匹配特定的字符或字符集合。例如表示匹配任意字符，\d表示匹配数字等分隔符：用于标记正则表达式的开始和结束，通常为或者转义字符：使用将有特殊作用的字符（元字符、分隔符等）转义为普通字符。例如\.表示匹配半角句号一些常用的字符及含义如下：符号含义匹配任意字符（除了换行符\n\d匹配任意数字，等价于[0-9]\D。

规范的函数文档注释有助于他人理解代码，便于团队协作、提高效率。但如果我们自己手写函数文档注释将非常耗时耗力。PyCharm安装后默认没有开启自动化函数文档注释，需要我们开启。

这样，每次新建Python文件时PyCharm会默认在前两行注明文件编码格式。查了资料，按照网友的说法，将一些基本编码环境都设置为。在Python文件头部添加了上述注释，也不行啊。未将PyCharm编码环境与项目编码环境分开。修改后执行报错堆栈中的中文就不会出现乱码了。，检查了一下都没有什么问题，但为啥不行啊。PyCharm环境都已经配置成了。更有甚者，直接放大招，说是在。另外，也有网友表示，修改。

UML（Unified Modeling Language）是一种统一建模语言，为面向对象开发系统的产品进行说明、可视化、和编制文档的一种标准语言，独立于任何具体程序设计语言PlantUML是一款开源的UML图绘制工具，支持通过文本来生成图形，使用起来非常高效。可以支持时序图、类图、对象图、活动图、思维导图等图形的绘制。

步骤：File -> New Projects Setttings -> Settings for New Projects，其它步骤和配置同上。值得注意的是，每次创建新项目时，新项目的Maven仓库总会为C盘的默认地址，因此，我们还需要设置固定的Maven本地仓库地址。步骤：Settings -> Build -> Build Tools -> Maven。Local Repository：Repository本地仓库路径。Maven Home Path：Maven解压目录路径。修改Maven配置文件。

Scala于2001年产生于瑞士的洛桑联邦理工学院（EPFL），是“可扩展语言”（Scalable Language）的缩写，Scala是一门现代的多范式编程语言，旨在以简洁优雅及类型安全的方式来表达通用的编程模型。它平滑地集成了面向对象和函数式编程的各种特性，以提高代码的可读性、可维护性和可扩展性Scala运行在JVM上，可以与Java无缝集成。Scala可以调用Java方法、继承Java类、实现Java接口等，几乎所有Scala代码都大量使用了Java类库。

Git->Log->右键提交记录(Revert Commit)->Merge->处理代码->commit。：Git->Log->右键提交记录(Reset Current Branch)->Reset->Hard。：Git->Branches->(基于已有分支)New Branch->分支名->OK。：Git->Merge Changes->选择要合并的分支->Merge。：Git->Branches->选择要切换的分支->Checkout。Ctrl+鼠标滚轮字体缩放。调整字体、字号、行高。

PowerShell执行策略已设置为RemoteSigned，它允许执行本地脚本和来自受信任发布者的远程脚本（注意：此操作仅修改了当前用户的Windows PowerShell执行策略）Win10默认PowerShell的执行策略是不载入任何配置文件，不运行任何脚本(Restricted)。方式2：电脑搜索PowerShell，以管理员身份运行Windows PowerShell应用。方式1(推荐)：打开PyCharm终端(选择Windows PowerShell)返回结果：Restricted。

由于python在下载包时，容易出现超时等各种问题，主要是因为Python库的服务器都在国外，国内下载库的速度会很慢，所以需要配置国内镜像源来加快下载速度。1）File -> Settings -> Project -> Python Interpreter -> 点击＋（此处可看到所有已安装的库）2）搜索需要安装的库，从以下中选择目标库，点击Install Package安装。点击＋(减号是删除)，输入更换后的镜像源，点击OK即可。目前国内使用最广泛的是清华的镜像源。：通过Terminal终端。

Markdown是一门轻量级文本标记语言。Markdown的工作过程是将.md或.markdown文件解析为HTML输出。

1）Git和SVN是我们最常用的版本控制系统（Version Control System， VCS）2）Git三大区域的划分（详见下文Git基本原理）工作区：能够看见的目录暂存区：也叫Index、Stage，通常存放在.git/index文件下版本库：分为本地版本库和远程版本库3）版本库状态几乎所有的版本控制系统都以某种形式支持分支。使用分支意味着可以把我们的工作从开发主线上分离开来，以免影响开发主线分支是一个代码的副本；

Java开发环境配置：下载、安装、配置、卸载全套