Change next_proto member type.
[chromium-blink-merge.git] / tools / perf / test-info.json
blobfac0a1552dbcfe299dd65e164d19604a328fd42d
2   "_description":"This file contains info about our performance test suites, used by the perf dashboard (http://chromeperf.appspot.com).",
3   "blink_perf":{
4     "description":"Runs all enabled benchmarks in third_party/WebKit/PerformanceTests/",
5     "code":[
6       "chrome/src/tools/perf/measurements/blink_perf.py",
7       "third_party/WebKit/PerformanceTests/"
8     ]
9   },
10   "cc_perftests":{
11     "description":"Microbenchmarks for compositor (cc/) component.",
12     "code":[
13       "chrome/src/cc/cc_tests.gyp",
14       "chrome/src/cc/trees/layer_tree_host_perftest.cc"
15     ]
16   },
17   "dom_perf":{
18     "description":"Performance of DOM operations."
19   },
20   "dromaeo.domcoreattr":{
21     "description":"Setting and getting DOM node attributes."
22   },
23   "dromaeo.domcoremodify":{
24     "description":"Creating and injecting DOM nodes."
25   },
26   "dromaeo.domcorequery":{
27     "description":"Querying DOM elements in a document."
28   },
29   "dromaeo.domcoretraverse":{
30     "description":"Traversing a DOM structure."
31   },
32   "dromaeo.jslibattrjquery":{
33     "description":"Setting and getting DOM node attributes using the jQuery JavaScript Library."
34   },
35   "dromaeo.jslibattrprototype":{
36     "description":"Setting and getting DOM node attributes using the Prototype JavaScript Library."
37   },
38   "dromaeo.jslibeventjquery":{
39     "description":"Binding, removing, and triggering DOM events using the jQuery JavaScript Library."
40   },
41   "dromaeo.jslibeventprototype":{
42     "description":"Binding, removing, and triggering DOM events using the Prototype JavaScript Library."
43   },
44   "dromaeo.jslibmodifyjquery":{
45     "description":"Creating and injecting DOM nodes into a document using the jQuery JavaScript Library"
46   },
47   "dromaeo.jslibmodifyprototype":{
48     "description":"Creating and injecting DOM nodes into a document using the Prototype JavaScript Library."
49   },
50   "dromaeo.jslibstylejquery":{
51     "description":"Getting and setting CSS information on DOM elements using the jQuery JavaScript Library."
52   },
53   "dromaeo.jslibstyleprototype":{
54     "description":"Getting and setting CSS information on DOM elements using the Prototype JavaScript Library."
55   },
56   "dromaeo.jslibtraversejquery":{
57     "description":"Traversing a DOM structure using the jQuery JavaScript Library."
58   },
59   "dromaeo.jslibtraverseprototype":{
60     "description":"Traversing a DOM structure using the Prototype JavaScript Library."
61   },
62   "fast_path.key_mobile_sites":{
63     "description":"Measures CPU usage on rendering critical threads. Both clock and CPU time is measured."
64   },
65   "image_decoding.image_decoding_measurement ":{
66     "description":"Milliseconds to decode a large image of various formats (gif, jpg, png, webp)."
67   },
68   "indexed_db":{
69     "description":"Benchmarks for a variety of IndexedDB operations.",
70     "code":[
71       "chrome/src/chrome/test/data/indexeddb/perf_test.html"
72     ]
73   },
74   "kraken":{
75     "description":"Score on [Mozilla's Kraken JavaScript benchmark](http://krakenbenchmark.mozilla.org/)"
76   },
77   "media.tough_video_cases":{
78     "description":"Obtains media metrics for key user scenarios."
79   },
80   "media_perftests":{
81     "description":"Microbenchmarks for media (media/) component.",
82     "code":[
83       "chrome/src/media/media.gyp"
84     ]
85   },
86   "memory.reload.2012Q3":{
87     "description":"Memory consumption for a set of top pages from 2012, reloading and garbage collecting on each page load."
88   },
89   "memory.top_7_stress":{
90     "description":"Use (recorded versions of) real world web sites and measure memory consumption."
91   },
92   "memory_test":{
93     "description":"Loads a number of URLs across tabs and windows and measures the memory usage.",
94     "code":[
95       "chrome/src/chrome/test/perf/memory_test.cc"
96     ]
97   },
98   "octane":{
99     "description":"Score on the [V8 team's Octane benchmark](http://octane-benchmark.googlecode.com/svn/latest/index.html)"
100   },
101   "page_cycler.bloat":{
102     "description":"Load an image many times and ensure memory usage stays low."
103   },
104   "page_cycler.dhtml":{
105     "description":"Benchmarks for various DHTML operations like simple animations."
106   },
107   "page_cycler.intl_ar_fa_he":{
108     "description":"Page load time benchmark for a variety of pages in Arabic, Farsi and Hebrew. Runs against pages recorded in April, 2013."
109   },
110   "page_cycler.intl_es_fr_pt-BR":{
111     "description":"Page load time benchmark for a variety of pages in Spanish, French and Brazilian Portuguese. Runs against pages recorded in April, 2013."
112   },
113   "page_cycler.intl_hi_ru":{
114     "description":"Page load time benchmark for a variety of pages in Hindi and Russian. Runs against pages recorded in April, 2013."
115   },
116   "page_cycler.intl_ja_zh":{
117     "description":"Page load time benchmark for a variety of pages in Japanese and Chinese. Runs against pages recorded in April, 2013."
118   },
119   "page_cycler.intl_ko_th_vi":{
120     "description":"Page load time benchmark for a variety of pages in Korean, Thai and Vietnamese. Runs against pages recorded in April, 2013."
121   },
122   "page_cycler.morejs":{
123     "description":"Page loading benchmark for a variety of pages that were JavaScript heavy in 2009."
124   },
125   "page_cycler.moz":{
126     "description":"Page loading benchmark for mozilla's original page set. Recorded in December 2000."
127   },
128   "page_cycler.pica":{
129     "description":"Loading benchmark for the Polymer toolkit's [Pica](http://www.polymer-project.org/polymer-all/projects/pica/index.html) demo app"
130   },
131   "page_cycler.netsim.top_10":{
132     "description":"Page loading benchmark for a set of 10 top pages recorded in June, 2013.  Pages are loaded under the simplisticly simulated bandwidth and RTT constraints of a cable modem (5Mbit/s down, 1Mbit/s up, 28ms RTT). Contention is realistically simulated, but slow start is not. DNS lookups are 'free'."
133   },
134   "page_cycler.top_10_mobile":{
135     "description":"Page load time benchmark for the top 10 mobile web pages. Runs against pages recorded in November, 2013."
136   },
137   "page_cycler.key_mobile_sites":{
138     "description":"Page load time benchmark for key mobile sites."
139   },
140   "page_cycler.tough_layout_cases":{
141     "description":"Page loading benchmark for the slowest layouts observed in the Alexa top 1 million sites in July 2013."
142   },
143   "page_cycler.typical_25":{
144     "description":"Page load time benchmark for a 25 typical web pages. Designed to represent typical, not highly optimized or highly popular web sites. Runs against pages recorded in June, 2014."
145   },
146   "robohornet_pro":{
147     "description":"Milliseconds to complete the [RoboHornetPro demo by Microsoft](http://ie.microsoft.com/testdrive/performance/robohornetpro/)"
148   },
149   "peacekeeper":{
150     "description":"Peacekeeper measures browser's performance by testing its JavaScript functionality.\n\nJavaScript is a widely used programming language used in the creation of modern websites to provide features such as animation, navigation,forms and other common requirements. By measuring a browser's ability to handle commonly used JavaScript functions Peacekeeper can evaluate its performance. Peacekeeper scores are measured in operations per second or rendered frames per second depending on the test. Final Score is computed by calculating geometric mean of individual tests scores. [Peacekeeper by Futuremark](http://peacekeeper.futuremark.com)",
151     "code":[
152       "chrome/src/tools/perf/benchmark/peacekeeper.py"
153     ]
154   },
155   "scheduler.tough_scheduling_cases":{
156     "description":"This test measures rendering statistics while interacting with pages that have challenging scheduling properties. Mainly affected by changes to the compositor scheduler or the graphics pipeline."
157   },
158   "service_worker.service_worker":{
159     "description":"This test measures the performance of pages using ServiceWorker. As a page set, two benchamrk page(many registration, many concurrent fetching) and one application (Trained-to-thrill: https://jakearchibald.github.io/trained-to-thrill/) are included. Execution time of these pages will be shown as Speed Index, and TRACE_EVENTs are subsidiary information to know more detail performance regression.",
160     "code":[
161       "chrome/src/tools/perf/benchmarks/service_worker.py"
162     ]
163   },
164   "sizes":{
165     "description":"Tracks binary sizes and number of static initializers.",
166     "code":[
167       "chrome/tools/build/scripts/slave/chromium/sizes.py"
168     ]
169   },
170   "smoothness.top_25_smooth":{
171     "description":"Measures frame rate and a variety of other statistics while scrolling down the top 25 web pages. [Documentation](http://www.chromium.org/developers/design-documents/rendering-benchmarks)."
172   },
173   "smoothness.tough_canvas_cases":{
174     "description":"Measures frame rate and a variety of other statistics on a selection of pages making use of the 2D Canvas API."
175   },
176   "smoothness.tough_filters_cases":{
177     "description":"Measures frame rate and a variety of other statistics on a selection of pages making use of SVG and CSS Filter Effects."
178   },
179   "spaceport":{
180     "description":"Performance on [spaceport.io's perfmarks benchmark](http://spaceport.io/community/perfmarks). This test performs 3 animations (rotate, translate, scale) using a variety of methods (css, webgl, canvas, etc) and reports the number of objects that can be simultaneously animated while still achieving 30FPS."
181   },
182   "startup.cold.blank_page":{
183     "description":"Measures cold startup time with a clean profile."
184   },
185   "startup.cold.dirty.blank_page":{
186     "description":"Measures cold startup time with a dirty profile.",
187     "comment":"The same as startup.cold.blank_page, except for the user profile that's used. Set up in tools/build/scripts/master/factory/chromium_factory.py."
188   },
189   "startup.warm.blank_page":{
190     "description":"Measures warm startup time with a clean profile."
191   },
192   "startup.warm.dirty.blank_page":{
193     "description":"Measures warm startup time with a dirty profile.",
194     "comment":"The same as startup.warm.blank_page, except for the user profile that's used. Set up in tools/build/scripts/master/factory/chromium_factory.py."
195   },
196   "sunspider":{
197     "description":"Performance on the [SunSpider JavaScript benchmark](http://www.webkit.org/perf/sunspider/sunspider.html)"
198   },
199   "tab_switching.top_10":{
200     "description":"This test records the MPArch.RWH_TabSwitchPaintDuration histogram, which is a measure of the time between when a tab was requested to be shown, and when first paint occurred. The script opens 10 pages in different tabs, waits for them to load, and then switches to each tab and records the metric. The pages were chosen from Alexa top ranking sites."
201   },
202   "task_execution_time.key_mobile_sites":{
203     "description":"This benchmark measures the runtimes of various tasks on the renderer main thread while scrolling on key mobile sites. It is used for tracking and guiding optimizations in the Blink scheduler project."
204   },
205   "task_execution_time.tough_scheduling_cases":{
206     "description":"This benchmark measures the runtimes of various tasks on the renderer main thread while scrolling on synthetic pages with challenging scheduling properties. It is used for tracking and guiding optimizations in the Blink scheduler project."
207   }