Sahi (3) —— 压力测试Load Test以CAS SSO登陆场景为例（103 Tutorial）

Sahi (3) —— 压力测试Load Test以CAS SSO登陆场景为例（103 Tutorial）

---

jvm版本: 1.8.0_65

sahi版本: Sahi Pro 6.1.0

参考来源:

Sahi官网

[Sahi Quick Tutorial](http://sahipro.com/docs/using-sahi/quick-tutorial.html#Download Sahi Pro)

Sahi官方文档：压力测试

Sahi社区论坛：SAHI for performance testing

Sahi (1) —— 快速入门（101 Tutorial）

Sahi (2) —— https/SSL配置（102 Tutorial））

Sahi的压力测试脚本包含了2个子脚本，一个是用来生成压力的，这个脚本被称为“noise”，跑在一个无头（headless）的浏览器上，在“noise”文件中的脚本会一直无限循环执行下去。另一个脚本被称为“subject”，这个脚本是被用来定时执行，然后查看不同压力下的性能指标的。

准备

配置

PhantomJS

由于“noise”是通过PhantomJS在后台运行的，所以我们需要先安装PhantomJS。如果有brew的童鞋可以简单运行下面命令行安装：

brew install phantomjs

写这篇文章的时候PhantomJS的最新稳定版本是2.0.0，但是我们需要较低的1.9.8版本

$ phantomjs --version
2.0.0

原因是Sahi6.1（也是当前最新稳定版）这个版本对于PhantomJS只支持到1.x，如果使用2.0会出现执行时卡死的情况。

• 以下是Mac(Linux)环境下的安装步骤：

  1. 下载PhantomJS到 /usr/local/share

     解压后执行以下命令（1.9以下版本需要）

      sudo ln -s /usr/local/share/phantomjs-1.9.8-macosx/bin/phantomjs /usr/local/share/phantomjs
      sudo ln -s /usr/local/share/phantomjs-1.9.8-macosx/bin/phantomjs /usr/local/bin/phantomjs
      sudo ln -s /usr/local/share/phantomjs-1.9.8-macosx/bin/phantomjs /usr/bin/phantomjs
     

     完成后可以通过命令行查看当前PhantomJS的版本号

      $ phantomjs --version
     

  2. 在Dashboard上点击Configure加入以下配置

     <browserType>
       <name>phantomjs</name>
       <displayName>PhantomJS</displayName>
       <icon>phantomjs.png</icon>
       <path>$sahiDir/ext/phantomjs/sahi_phantomjs.sh</path>
       <options>--proxy=localhost:9999 $sahiDir/ext/phantomjs/phantomsahi.js</options>
       <processName>phantomjs</processName>
       <capacity>100</capacity>
       <useSystemProxy>false</useSystemProxy>
     </browserType>
     

     对于SSL错误，还需要修改配置为（--ignore-ssl-errors=yes）：

     <browserType>
     	<name>phantomjs</name>
     	<displayName>PhantomJS</displayName>
     	<icon>phantomjs.png</icon>
     	<path>$sahiDir/ext/phantomjs/sahi_phantomjs.sh</path>
     	<options>--ignore-ssl-errors=yes --debug=yes --proxy=localhost:9999 $sahiDir/ext/phantomjs/phantomsahi.js</options>
     	<processName>phantomjs</processName>
     	<capacity>100</capacity>
     	<useSystemProxy>false</useSystemProxy>
     </browserType>				
     

  3. 保存并重启Sahi

  4. 命令行运行并测试

     $ ./testrunner.sh demo/sahi_demo.sah http://sahitest.com/demo/ phantomjs
     

     如果成功查看log：

     

压力测试Demo

Sahi6.1官方在安装包下提供了压力测试的示例，我们尝试运行该测试。

首先启动Sahi Dashboard：

$ ./start_dashboard.sh

再运行：

$ ./dload.sh demo/load/noise.sah demo/load/subject.sah http://sahitest.com/demo/training/ firefox

如果完成没有出错Sahi的DLoadRunner会提示成功

查看log与报告

设置ANT

在Sahi的安装目录下<SAHI_INSTALLATION_FOLDER>，新建ant配置文件dload.xml

	<?xml version="1.0" encoding="ISO-8859-1"?>
	<!--
	/**
	 * Copyright Tyto Software Pvt. Ltd.
	 */
	-->
	<project name="demo" default="dloadrun">
	    <taskdef name="sahiload" classname="in.co.sahi.ant.DAntLoadRunner" classpath="lib/ant-sahi.jar"/>

	    <target name="dloadrun">
	    	<sahiload scriptsPathMaster="scripts"
				subject="demo/load/subject.sah"
				baseurl="http://sahitest.com/demo/training/"
				sahihost="localhost"
				sahiport="9999"
				failureproperty="sahi.failed"
				haltonfailure="false"
				browsertype="chrome"
				noise="demo/load/noise.sah"
				noiseBrowserType="phantomjs"
				min="1"
				max="9"
				incrementBy="2"
				interval="5"
				subjectRepeatCount="3"
				ignorePattern=".*(svn|copied).*">
				<node host="localhost" port="9999"/>
				<!--
				<node host="machine2" port="9999"/>
				<node host="machine3" port="9999"/>
				-->
	    	</sahiload>
	        <antcall target="failsahi"/>
	    </target>

		<target name="failsahi" if="sahi.failed">
	        <fail message="Sahi tests failed!"/>
	    </target>
	</project>

然后我们通过命令行运行

ant -f dload.xml

没有安装好ant的也可以通过brew安装

$ brew install ant

录制与修改脚本

在录制脚本的时候，不知何原因，无法在通过https访问本地搭建的sso环境https://sso.hoau.com:8433/cas 同时应用程序客户端https://app1.hoau.com:8413/cas1 也无法正常访问。比较Sahi里面的浏览器和正常的浏览器证书的设置发现（Firefox-> Preferences -> Advanced -> Certificates -> View Certificates）Sahi里的代理浏览器缺少证书，手工导入无果（没有研究如何操作）

于是尝试先用http录制，然后在PhantomJS后台通过--ignore-ssl-errors=yes模式尝试https

首先录制http://sso.hoau.com:8083/cas

_setValue(_textbox("username"), "test01");
_setValue(_password("password"), "psw01");
_click(_submit("登陆"));
_assertExists(_div("msg"));
_assertEqual("Log In Successful You, test01, have successfully logged into the Central Authentication Service. When you are finished, for security reasons, please Log Out and Exit your web browser.", _getText(_div("msg")));

然后更改目标的地址的startURL，并且命令行下运行：

$ ./testrunner.sh my/cas_sso.sah https://sso.hoau.com:8433/cas/ phantomjs

测试成功。

同样方式我们尝试http://app1.hoau.com:8081

得到类似脚本：

_setValue(_textbox("username"), "test01");
_setValue(_password("password"), "psw01");
_click(_submit("登陆"));
_assertExists(_link("test01"));

自动化测试

但如果重复playback会出错，因为浏览器会保持JSESSION的session cookie，记录下曾经登陆的状态，无法重复playback。因此，我们需要清除浏览器的cookie。

Sahi官网上介绍了如何清除浏览器cookie，但我尝试过发现此方法无效：

// Shows all cookies for www.yahoo.com domain.
_navigateTo("http://www.yahoo.com/_s_/dyn/Cookies_showAll"); 
// Click the checkbox to choose all cookies.
_check(_checkbox("_sahi_chooseAll")); 
// Delete the cookies.
_click(_button("Delete")); 
// Shows all cookies again so that you can verify that all cookies have been deleted.
_navigateTo("http://www.yahoo.com/_s_/dyn/Cookies_showAll"); 

*怀疑

• 可能是浏览器版本

  我本地的Chrome版本为：42.0.2311.152 (64-bit)
  Firefox版本为：43.0.2

• 可能是路径原因Sahi清除cookie页面里的javascript脚本执行的目标路径有问题

  "_sendToServer(...)"

这个问题还没有研究出根本原因在哪，不过有方法可以绕过去。

我有另外一片文章介绍过CAS SSO的时序图，并且分析过http的request和Response消息头消息体里面的内容，我们可以通过将head Cookie置空达到清除cookie的目的，修改好以后的脚本如下：

_setHttpHeader("Cookie", "");
_navigateTo("https://app2.hoau.com:8423/cas2/"); 


_setValue(_textbox("username"), "test01");
_setValue(_password("password"), "psw01");
_click(_submit("登陆"));	

这样我们就能重复playback，而且经测试发现数据库中也会生成大量ticket

压力测试

以上工作完成后，我们现在正式开始对CAS SSO的登陆做压力测试。

我以官网的样例为模板稍作修改：

<!--
/**
 * Copyright Tyto Software Pvt. Ltd.
 */
-->
<project name="demo" default="dloadrun">
    <taskdef name="sahiload" classname="in.co.sahi.ant.DAntLoadRunner" classpath="../lib/ant-sahi.jar"/>

    <target name="dloadrun">
    	<sahiload scriptsPathMaster="scripts"
			subject="my/load/subject.sah"
			baseurl="https://app2.hoau.com:8423/cas2/"
			sahihost="localhost"
			sahiport="9999"
			failureproperty="sahi.failed"
			haltonfailure="false"
			browsertype="chrome"
			noise="my/load/subject.sah"
			noiseBrowserType="phantomjs"
			min="1"
			max="999"
			incrementBy="20"
			interval="5"
			subjectRepeatCount="3"
			ignorePattern=".*(svn|copied).*">
			<node host="localhost" port="9999"/>
			<!--
			<node host="machine2" port="9999"/>
			<node host="machine3" port="9999"/>
			-->
    	</sahiload>
        <antcall target="failsahi"/>
    </target>

	<target name="failsahi" if="sahi.failed">
        <fail message="Sahi tests failed!"/>
    </target>
</project>

我们将baseurl指定为测试的目标地址，“subject”浏览器为Chrome，“noise”浏览器为PhantomJS，同时我们将增加线程数的为20，线程从1增长至999最大，为了专注与登陆的压力，我同时将subject和noise都指向了登陆的脚本。有兴趣的童鞋可以尝试以下其他的方式，以及修改参数试试。

可以通过ant运行

$ ant -f dload-sso.xml

然后竟然被我遇到了一个core dev认可，4.1.3版本的major

测试结果：

Github上的答复:

问题

• Sahi的压力测试能否支持部署多个分布式Sahi测试节点？

• Sahi的压力测试除了Subject和Noise这种模式，是否还有需要其他支持，或者提供其他支持？

结束

还未对Sahi做全面评估，网上评论说Sahi比较适合Smoke Web UI，不过单纯从个人角度就易上手程度来主管评价，Sahi相对于Selenium和JMeter较容易上手。