- 博客(12)
- 收藏
- 关注
原创 python使用pip命令 报空字符问题
从官网(https://www.python.org/downloads/) 下载python3.11.5 并安装,cmd窗口使用命令 python 验证安装成功,再使用 pip install requests 下载第三方模块时,报错 ‘SyntaxError: source code string cannot contain null bytes’, 试下只查看第三方模块有哪些 pip list 仍然报一样的错。下面是安装requests模块的过程中…
2023-11-29 12:20:37
1553
原创 spark - 博文参考
博文参考Spark中Task,Partition,RDD、节点数、Executor数、core数目的关系和Application,Driver,Job,Task,Stage理解https://www.cnblogs.com/bonelee/p/11063453.html
2022-01-12 16:26:34
789
原创 ES如何创建索引
环境环境:ES 6.8.10os:Centos 7.8.2003 (Core)创建索引1、创建新的索引(index)PUT indexTest0012、索引设置ES 默认提供了好多索引配置选项,参考https://www.elastic.co/guide/en/elasticsearch/reference/5.6/index-modules.html修改索引设置参考:https://blog.youkuaiyun.com/qq_15958689/article/details/795242913
2022-01-08 10:31:12
26081
原创 介绍 Qubole 的 Spark 调整工具
更新Qubole 的 Spark 调优工具现已开源并命名为Sparklens。要做出贡献,请查看https://github.com/qubole/sparklens 的源代码。要使用Sparklens分析您的Spark应用程序,只需将以下附加配置参数添加到 spark-submit 或 spark-shell:--packages qubole:sparklens:0.1.2-s_2.11--conf spark.extraListeners=com.qubole.sparklens.QuboleJ
2021-11-29 11:36:58
1426
1
原创 Spark 应用优化工具之Sparklens
Sparklens是什么?Sparklens是一个内置 Spark 调度器模拟器的 Spark 分析工具:它可以更容易地理解 Spark 应用程序的可扩展性限制。它有助于了解给定的 Spark 应用程序使用提供给它的计算资源的效率如何。它已在Qubole实施并维护。它是开源的(Apache 许可证 2.0)并已在 Scala 中实现。Sparklens 的一个有趣特性是它能够通过单次运行 Spark 应用程序生成估计值. 它报告信息,例如估计完成时间和估计的集群利用率与不同数量的执行程序,一个作业/阶段
2021-11-29 10:31:38
1681
1
原创 如何利用jmeter向kafka推送数据?
1、下载有kafka相关的jar包。链接:https://pan.baidu.com/s/1b38x-Ikl8bA3WK1EpBS-gQ,提取码:6sel也可手动打jar包,参考文章:https://blog.youkuaiyun.com/masound/article/details/851011012、将jar包存放到apache-jmeter-5.1.1/ib/ext目录下,重启jmeter3、向kafka推送消息在线程下面添加“java请求”如下,填写正确的kafka地址、主题和消息内容。如果要指定
2021-11-17 22:56:45
2353
原创 jmeter之定时器
定时器的作用定时器是在每个取样器(sampler)之前执行的,而不是之后(无论定时器位置在sampler之前还是下面);当执行一个sampler之前时,所有当前作用域内的定时器都会被执行;如果需要定时器仅应用于其中一个sampler,则把定时器作为子节点加入;如果需要在sampler执行完之后再等待,则可以使用Test Action;固定定时器**作用:**在发送2个请求之间需要设置一个等待时间时,类似于代码里面的sleep休眠时间。**执行过程:**取样器>定时器>固定定时器
2021-11-04 11:22:30
552
原创 jmeter可以做哪些测试?
一、JMeter介绍Apache JMeter是Apache组织开发的基于Java的压力测试工具。作用有:1.能够对HTTP和FTP服务器进行压力和性能测试, 也可以对任何数据库进行同样的测试(通过JDBC)。2.完全的可移植性和100% 纯java。3.完全 Swing 和轻量组件支持(预编译的JAR使用 javax.swing.*)包。4.完全多线程 框架允许通过多个线程并发取样和 通过单独的线程组对不同的功能同时取样。5.精心的GUI设计允许快速操作和更精确的计时。6.缓存和离线分析/回
2021-11-03 16:34:09
4820
原创 linux常用命令
查找系列find命令基本格式:find path expression。find命令是根据文件的属性进行查找,如文件名,文件大小,所有者,所属组,是否为空,访问时间,修改时间等。1 按文件名查找在根目录下查找文件startAgent.sh,表示在整个硬盘查找[root@test-xmg ~]# find / -name startAgent.sh/data/ServerAgent-2.2.3/startAgent.sh在/data目录下文件startAgent.sh[root@test
2021-11-02 17:23:04
321
原创 jmeter之jp@gc - Permon Metrics Collector插件使用
jmeter接口性能测试什么是性能测试?压力测试:强调极端暴力稳定性测试:在一定压力下,长时间运行的情况基准测试:在特定条件下的性能测试负载测试:不同负载下的表现容量测试:最优容量外部指标,主要关注如下指标:吞吐量,响应时间,错误率吞吐量:每秒钟系统能够处理的请求数、任务数。吞吐量的指标受到响应时间、服务器软硬件配置、网络状态等多方面因素影响。1.吞吐量越大,响应时间越长。2.服务器硬件配置越高,吞吐量越大。3.网络越差,吞吐量越小。一个系统的吞度量(承压能力)与request
2021-11-02 16:24:36
1938
原创 linux之查看系统信息
linux-查看系统信息定义内存,cpu,硬盘区别内存:(英语:Random Access Memory,缩写:RAM;也叫主存)是与CPU直接交换数据的内部存储器,用来加载各式各样的程序与数据以供CPU直接运行与运用,比如当我们在使用WPS时,在键盘上敲入字符时,它就被存入内存中,当你选择存盘时,内存中的数据才会被存入硬(磁)盘。断电后,内存中的信息全部丢失,存储介质是集成块的RAM类型,电子读写,存储容量较小。cpu:是英语“Central Processing Unit/中央处理器”的缩写,C
2021-11-02 15:08:47
670
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人