标签: performance-testing

我正在使用 Xcode 7. iPhone 5s 模拟器 (iOS 9.0)。

我试图用它XCTestCase -measureBlock:来衡量在我的某些功能上花费的时间。这会运行块内的代码 10 次，并报告每次运行所需的时间、平均值、STDEV 等结果。

事实证明，第一次运行的时间总是非常高，比如高出 400-500%。一个非常简单的方法也会发生同样的情况，甚至在测量块中什么都没有。我的- (void)setUp或- (void)tearDown.

的结果NSString -stringWithFormat:。请参阅图表第一条的尖峰。 values: [0.000031, 0.000005, 0.000003, 0.000003, 0.000003, 0.000003, 0.000003, 0.000003, 0.000003, 0.000003]

空白块的结果。类似的结果。 values: [0.000007, 0.000001, 0.000000, 0.000000, 0.000000, 0.000000, 0.000000, 0.000000, 0.000000, 0.000001]

这是错误还是什么？到底是怎么回事？

在某些用户定义的活动期间，如何在 CPU、内存或线程使用方面衡量 OS X 中 kext 的性能影响？任何可以从用户空间使用的特定方法工具？或任何可以考虑的方法/方法？

我在 Xcode 上进行了性能测试，基线设置如下所示。

这些基线似乎是本地保存的（如断点），因此我对它们的更改不会通过 git 传输。当我以外的任何人运行我的性能测试并且他们太慢时，测试不会失败。我该如何解决这个问题？

我使用以下开关编译了我的 C++ 代码：

g++ -O0 -g -rdynamic -DNDEBUG -DARMA_NO_DEBUG -std=c++11 -pthread

链接器开关是：

-lboost_system -lboost_thread -lboost_chrono -larmadillo -pthread

但是我在我的应用程序中没有使用线程。我也避免使用任何delay函数。

然后我运行代码并使用perf工具对其进行测试。

sudo perf record ./bin/my_application
sudo perf report -f

结果对我来说很奇怪：

Overhead  Command          Shared Object     Symbol
 50.92%  myApplication  [kernel.kallsyms]  [k] native_sched_clock
 24.73%  myApplication  [kernel.kallsyms]  [k] pick_next_entity
 17.46%  myApplication  [kernel.kallsyms]  [k] prepend_name
  2.57%  myApplication  myApplication      [.] arma::arrayops::copy_small<double>
  1.11%  myApplication  myApplication      [.] arma::Mat<double>::Mat
  1.11%  myApplication  myApplication      [.] myClass::myMethod
  1.11%  myApplication  libblas.so.3       [.] dgemv_
  0.97%  myApplication  myApplication      [.] arma::Mat<double>::init_cold

为什么 kernel.kallsyms函数主宰了执行时间？ …

如何在 gatling 的 StringBody 中使用会话变量？

我已经定义了我的exec喜欢，

val migrateAsset = exec(_.set("assetId", AssetIdGenerator.generateRandomAssetId()))
      .exec(http("Migrate Asset")
      .post(s"$url/asset/metadata")
      .header("Content-Type", "application/json")
      .header("Authorization", s"Bearer ${authToken}")
      .body(StringBody(
          s"""
            |{
            |    "objectType" : "DocumentType",
            |    "fileName" : "main.xml",
            |    "locations" : [
            |        {
            |            "region" : "eu-west-1",
            |            "url" : "https://s3-eu-west-1.amazonaws.com/${bucketName}/${assetId}"
            |        },
            |        {
            |            "region" : "us-east-1",
            |            "url" : s"https://s3.amazonaws.com/${bucketName}/${assetId}"
            |        }
            |    ],
            |    "format" : "MAIN",
            |    "mimeType" : "text/plain"
            |}
          """.stripMargin
      ))
      .check(status.is(200)))

在正文中，我希望assetId欧盟西部和美国东部地区都通过同样的检查。由于 assetId 是随机生成的，因此我将其存储在会话变量中以确保我对两个位置使用相同的 assetId。 …

今天，当服务器是 REST API 时，我正在使用 Jmeter 进行 API 自动化测试和性能测试。

现在开发改为graphQL API，我有两个问题：

1. 执行自动化 API 和性能测试的最佳方法是什么？
2. Jmeter 是否支持 graphQL API？

是否有一种简单的方法可以在 PostMan 脚本中捕获请求和响应的响应时间？

我试图通过创建一个集合然后在测试中执行以下操作，编写以下脚本来捕获值并将其放入环境变量中：

postman.setEnvironmentVariable("MyURLRequest", (responseTime));

这为我提供了 Environment 变量中的值，但我每次都需要专门去那里检查时间。

我尝试过的另一种方法是在集合上使用“Runner”，并从导出结果中的“totalRequestTime”值中获取响应时间。但是当我运行大约 50 个请求时，很难为每个单独的请求捕获相同的请求。

有没有人更早尝试过并能够获得更好的方法来捕获和导出每个发出的请求的响应时间值？

我是 Jmeter 新手，请帮助我，我尝试对我的 nodejs 应用程序进行性能测试。我有一个 api，为此我必须传递参数以及从 .csv 文件发布，但我无法实现所以请提供您宝贵的意见

在非 gui 模式下使用 Jmeter 3.3 进行分布式测试期间，我收到错误，我该如何解决这个问题：

我在 Master 和 Slave 机器上使用相同版本的 JMeter 和 JDK。

JVM 应该已经退出但没有退出。以下非守护进程线程仍在运行（DestroyJavaVM 是可以的）： Thread[main,5,main],

stackTrace:java.net.SocketInputStream#socketRead0
java.net.SocketInputStream#socketRead
java.net.SocketInputStream#read
java.net.SocketInputStream#read
java.io.BufferedInputStream#fill
java.io.BufferedInputStream#read
java.io.DataInputStream#readByte
sun.rmi.transport.StreamRemoteCall#executeCall
sun.rmi.server.UnicastRef#invoke
java.rmi.server.RemoteObjectInvocationHandler#invokeRemoteMethod
java.rmi.server.RemoteObjectInvocationHandler#invoke
com.sun.proxy.$Proxy19#rrunTest
org.apache.jmeter.engine.ClientJMeterEngine#runTest at line:149
org.apache.jmeter.engine.DistributedRunner#start at line:132
org.apache.jmeter.engine.DistributedRunner#start at line:149
org.apache.jmeter.JMeter#runNonGui at line:1005
org.apache.jmeter.JMeter#startNonGui at line:910
org.apache.jmeter.JMeter#start at line:538
sun.reflect.NativeMethodAccessorImpl#invoke0
sun.reflect.NativeMethodAccessorImpl#invoke
sun.reflect.DelegatingMethodAccessorImpl#invoke
java.lang.reflect.Method#invoke
org.apache.jmeter.NewDriver#main at line:248

Google 提供了许多 polyfill 库，用于测量和跟踪分析平台上的首次输入延迟 (FID) 和交互时间 (TTI)。然而，这个指标不是 GA 的标准。

然而，domInteractive 是一个指标，您可以使用 GA 进行开箱即用的跟踪。

有什么不同？我找到的对竞争性交互指标的唯一解释是一个模糊的论坛帖子，解释说 TTI 可能会提供更复杂的交互延迟外观，但没有太多细节。

如果我担心影响转换的输入延迟，我是否最好跟踪我的用户的 TTI，或者我可以坚持使用 domInteractive？