Ciekawostka - statystyki wydajnościowe 4p

Jako ciekawostka dla zainteresowanych, drobne statystyki. Konkretnie, czas generowania stron, i kilka innych losowych faktów wyciągnietych podczas parsowania access loga (dane od 1 maja do teraz). Żadnych tajnych danych raczej nie ma.

Zrobione z ciekawości, oraz głównie żeby zobaczyć czy źle z kojotem i co warto ewentualnie optymalizować. Bardziej do użytku wewnętrznego, ale jak już powstało to pomyślałem że się podzielę.

<font size="6">wstęp</span>

Opis tego co tu jest prezentowane:

1. Wykresy to box plot (http://en.wikipedia.org/wiki/Box_plot)

Jak to czytać:

Pozycja na osi X oznacza oczywiście czas generowania strony (w sekundach).
Czerwona kreska oznacza medianę (połowa stron generowała się wolniej a połowa szybciej niż czas jaki wskazuje czerwona kreska).
Połowa wyników znajduje się w obszarze ograniczonym przez "pudełko"/"skrzynkę"
"Prawie wszystkie" (dokładne liczby na obrazku) wyniki znajdują się w przedziałach oznaczonych przez "wąsy".

Dlaczego taki wykres - cytując wikipedię: Pozwala ująć na jednym rysunku wiadomości dotyczące położenia, rozproszenia i kształtu rozkładu empirycznego badanej cechy.

2. Surowe liczby
   prosta tabelka, jedyne co wymaga opisu chyba to '5xx%'/'4xx%'/'3xx%'/'2xx%' - to odpowiednio procent ilości requestów kończących się kodem 5xx, 4xx, 3xx, 2xx. mean, median, stddev i timesum odnoszą się do czasu, count to ilość requestów.

<font size="6">4programmers.net</span>

<article> i <topic_list> - artykuły w wiki

         url               |   count    |    5xx%    |    4xx%    |    3xx%    |    2xx%    |    mean    |   median   |   stddev    |  timesum

---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ----------------
/store | 352742 | 0.000 | 0.046 | 88.965 | 10.989 | 0.00134 | 0.00000 | 0.12528 | 472.01
/adm/Log | 93 | 0.000 | 0.000 | 0.000 | 100.000 | 0.47491 | 0.64600 | 0.53628 | 44.17
/adm/Scheduler | 7 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01900 | 0.01800 | 0.00271 | 0.13
/adm/Report | 28 | 0.000 | 3.571 | 0.000 | 96.429 | 0.16039 | 0.03900 | 0.63045 | 4.49
/Post/Revert | 2 | 0.000 | 0.000 | 100.000 | 0.000 | 0.11050 | 0.11050 | 0.11667 | 0.22
/User/Confirm | 163 | 0.000 | 0.000 | 0.000 | 100.000 | 0.04374 | 0.02900 | 0.03221 | 7.13
/User/Pm | 581 | 0.000 | 0.344 | 9.294 | 90.361 | 0.26485 | 0.21100 | 1.74193 | 153.88
/Szukaj | 2318 | 0.000 | 0.820 | 0.000 | 99.180 | 0.03401 | 0.02300 | 0.10964 | 78.84
/adm/Admin | 8 | 0.000 | 0.000 | 0.000 | 100.000 | 0.02400 | 0.02400 | 0.00359 | 0.19
<share_link> | 1326 | 0.000 | 93.891 | 6.109 | 0.000 | 0.00020 | 0.00000 | 0.00079 | 0.26
/Comment/wp-login.php | 2 | 0.000 | 100.000 | 0.000 | 0.000 | 0.00000 | 0.00000 | 0.00000 | 0.00
/adm/Page | 6 | 0.000 | 0.000 | 0.000 | 100.000 | 0.07917 | 0.07950 | 0.00492 | 0.48
/User/Avatar/Upload | 34 | 0.000 | 0.000 | 0.000 | 100.000 | 0.08932 | 0.06050 | 0.06883 | 3.04
/Mikroblogi/__vote | 1013 | 3.850 | 0.000 | 0.000 | 96.150 | 0.03151 | 0.01900 | 0.18446 | 31.92
/User/Notify/Setting | 44 | 0.000 | 0.000 | 31.818 | 68.182 | 0.02957 | 0.02700 | 0.01677 | 1.30
/User/Skill | 105 | 52.381 | 0.000 | 0.000 | 47.619 | 0.03151 | 0.01900 | 0.07636 | 3.31
/User/ajax/pm | 1003 | 0.000 | 0.100 | 0.000 | 99.900 | 0.12173 | 0.11000 | 0.04420 | 122.10
/Mikroblogi/__loadMore | 3464 | 0.000 | 0.000 | 0.000 | 100.000 | 0.05351 | 0.04200 | 0.13477 | 185.37
/User/Visit | 77 | 0.000 | 1.299 | 10.390 | 88.312 | 0.08432 | 0.03100 | 0.29019 | 6.49
/adm/User | 77 | 0.000 | 0.000 | 0.000 | 100.000 | 0.18619 | 0.24700 | 0.09916 | 14.34
/User/Pm/Trash | 108 | 0.000 | 3.704 | 96.296 | 0.000 | 0.08894 | 0.08400 | 0.03420 | 9.61
/User/Psw | 42 | 0.000 | 0.000 | 11.905 | 88.095 | 0.02769 | 0.02700 | 0.00651 | 1.16
/Mikroblogi/Submit | 312 | 0.641 | 0.000 | 0.000 | 99.359 | 0.12095 | 0.09050 | 0.12026 | 37.74
/Attachment/Submit | 1 | 0.000 | 0.000 | 0.000 | 100.000 | 0.02500 | 0.02500 | 0.00000 | 0.03
/Mikroblogi/ | 8 | 0.000 | 0.000 | 0.000 | 100.000 | 0.09250 | 0.08750 | 0.02140 | 0.74
/adm/Logout | 4 | 0.000 | 0.000 | 100.000 | 0.000 | 0.01875 | 0.01850 | 0.00275 | 0.07
/Attachment/Get | 5493 | 0.000 | 0.127 | 0.000 | 99.873 | 0.06840 | 0.01800 | 0.77466 | 375.71
/User/Setting/__save | 5029 | 0.000 | 0.020 | 0.000 | 99.980 | 0.01989 | 0.01600 | 0.13069 | 100.05
/Mikroblogi/__prompt | 171 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01773 | 0.01800 | 0.00391 | 3.03
/User/Password | 252 | 0.000 | 0.000 | 0.000 | 100.000 | 0.03018 | 0.02900 | 0.00753 | 7.61
/User/Order | 40 | 0.000 | 0.000 | 20.000 | 80.000 | 0.03985 | 0.03400 | 0.05586 | 1.59
/User/wp-login.php | 2 | 0.000 | 100.000 | 0.000 | 0.000 | 0.00000 | 0.00000 | 0.00000 | 0.00
/User/Email/Main | 2 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01550 | 0.01550 | 0.00495 | 0.03
/adm/Ban/Submit | 28 | 0.000 | 0.000 | 14.286 | 85.714 | 0.02011 | 0.02000 | 0.00341 | 0.56
/User/Skill/__autocomplete | 321 | 0.000 | 0.000 | 0.000 | 100.000 | 0.04817 | 0.01400 | 0.39534 | 15.46
/ | 80683 | 0.001 | 2.994 | 0.000 | 97.004 | 0.40508 | 0.32200 | 0.72368 | 32683.26
/User/Accept | 60 | 0.000 | 0.000 | 15.000 | 85.000 | 0.03353 | 0.03100 | 0.02591 | 2.01
/adm/Forum/Stat | 2 | 0.000 | 0.000 | 0.000 | 100.000 | 7.51700 | 7.51700 | 0.54730 | 15.03
/User/Vcard | 7360 | 0.000 | 0.190 | 0.000 | 99.810 | 0.02895 | 0.02200 | 0.13403 | 213.08
/User/Watch | 71 | 0.000 | 0.000 | 12.676 | 87.324 | 0.02987 | 0.03100 | 0.00681 | 2.12
/adm/Scheduler/Submit | 6 | 0.000 | 0.000 | 50.000 | 50.000 | 0.02017 | 0.01850 | 0.00343 | 0.12
/Mikroblogi/Following | 6 | 0.000 | 0.000 | 0.000 | 100.000 | 0.06067 | 0.04850 | 0.04341 | 0.36
/User/Report | 448 | 0.000 | 0.000 | 3.571 | 96.429 | 0.03028 | 0.03100 | 0.01119 | 13.56
/Mikroblogi/Tag | 3108 | 3.218 | 0.064 | 0.000 | 96.718 | 0.09713 | 0.06100 | 0.65570 | 301.89
/Tag | 7590 | 0.000 | 0.040 | 0.000 | 99.960 | 0.01917 | 0.01600 | 0.11102 | 145.51
<other> | 346272 | 0.131 | 3.731 | 23.258 | 72.880 | 0.11688 | 0.06000 | 1.34031 | 40473.01
/adm/Whois | 37 | 0.000 | 2.703 | 0.000 | 97.297 | 0.41878 | 0.38600 | 0.18133 | 15.50
/Comment/Submit | 5 | 0.000 | 0.000 | 0.000 | 100.000 | 0.11460 | 0.06400 | 0.08636 | 0.57
/User/index/__logout | 54 | 0.000 | 0.000 | 5.556 | 94.444 | 0.01511 | 0.01500 | 0.00270 | 0.82
/adm/Ban | 34 | 0.000 | 0.000 | 0.000 | 100.000 | 0.02615 | 0.02700 | 0.00343 | 0.89
/Mikroblogi/Edit | 142 | 0.000 | 0.000 | 0.000 | 100.000 | 0.03570 | 0.02800 | 0.01850 | 5.07
/Mikroblogi/Recent | 32 | 37.500 | 0.000 | 0.000 | 62.500 | 0.04678 | 0.05900 | 0.02396 | 1.50
/adm/Route | 7 | 0.000 | 0.000 | 0.000 | 100.000 | 0.03057 | 0.03000 | 0.00981 | 0.21
/User/Password/Change | 95 | 0.000 | 0.000 | 23.158 | 76.842 | 0.02929 | 0.02800 | 0.01641 | 2.78
/User/ajax/infinite | 91 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01845 | 0.01800 | 0.00436 | 1.68
<topic_list> | 23860 | 0.000 | 1.094 | 0.075 | 98.831 | 0.21598 | 0.13600 | 0.63538 | 5153.29
/adm/Search | 1 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01900 | 0.01900 | 0.00000 | 0.02
/scheduler.php | 23411 | 0.000 | 0.000 | 0.000 | 100.000 | 5.42742 | 0.28600 | 9.94830 | 127061.38
/User/Following | 32 | 0.000 | 0.000 | 25.000 | 75.000 | 0.02572 | 0.02550 | 0.00601 | 0.82
/User/ajax/desktop | 338 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01486 | 0.01500 | 0.00863 | 5.02
/adm/User/Submit | 66 | 0.000 | 1.515 | 25.758 | 72.727 | 0.88470 | 0.06750 | 1.15663 | 58.39
/Mikroblogi/Delete | 6 | 0.000 | 0.000 | 0.000 | 100.000 | 0.02667 | 0.01800 | 0.02217 | 0.16
/User/ajax/notify | 7325 | 0.000 | 0.833 | 0.000 | 99.167 | 0.02674 | 0.01800 | 0.12058 | 195.88
/Mikroblogi/View | 6442 | 0.000 | 0.124 | 2.872 | 97.004 | 0.09782 | 0.05000 | 1.36218 | 630.14
/Firmy | 2999 | 0.000 | 0.200 | 0.033 | 99.767 | 0.02528 | 0.01800 | 0.09974 | 75.80
/User/ajax/session | 202094 | 0.000 | 0.635 | 0.000 | 99.365 | 0.03098 | 0.01400 | 1.01546 | 6261.73
/User/ajax/markread | 45 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01600 | 0.01600 | 0.00436 | 0.72
/User/Pm/Submit | 1297 | 0.000 | 0.000 | 82.729 | 17.271 | 0.05661 | 0.03400 | 0.20978 | 73.42
/adm/ban/Submit | 14 | 0.000 | 0.000 | 100.000 | 0.000 | 0.07136 | 0.03400 | 0.08532 | 1.00
/User/Setting | 430 | 0.000 | 0.000 | 16.512 | 83.488 | 0.03927 | 0.03700 | 0.01961 | 16.89
/Post/Source | 1 | 0.000 | 0.000 | 0.000 | 100.000 | 0.02600 | 0.02600 | 0.00000 | 0.03
/adm/fckeditor/editor | 1 | 0.000 | 100.000 | 0.000 | 0.000 | 0.01200 | 0.01200 | 0.00000 | 0.01
/User/Skill/__order | 13 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01677 | 0.01800 | 0.00295 | 0.22
/User/Pm/View | 4027 | 0.000 | 0.621 | 28.632 | 70.747 | 0.51865 | 0.22200 | 0.92699 | 2088.60
/User/Pm/__username | 40 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01547 | 0.01450 | 0.00712 | 0.62
/adm/Route/Submit | 9 | 0.000 | 0.000 | 0.000 | 100.000 | 0.03122 | 0.02900 | 0.00845 | 0.28
/Mikroblogi/__image | 23 | 0.000 | 0.000 | 0.000 | 100.000 | 0.06757 | 0.05400 | 0.07208 | 1.55
/User/Security | 41 | 0.000 | 0.000 | 9.756 | 90.244 | 0.04680 | 0.02800 | 0.04366 | 1.92
/User/Skill/Delete | 17 | 0.000 | 0.000 | 0.000 | 100.000 | 0.02924 | 0.01900 | 0.03393 | 0.50
/User/Vote | 271 | 0.000 | 0.000 | 27.306 | 72.694 | 0.03739 | 0.03400 | 0.02160 | 10.13
/User/Confirm/Email | 418 | 0.000 | 0.000 | 0.000 | 100.000 | 0.03594 | 0.03400 | 0.01260 | 15.02
/User/Avatar/Delete | 1 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01900 | 0.01900 | 0.00000 | 0.02
/User/Notify/Feed | 2 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01450 | 0.01450 | 0.00354 | 0.03
/adm/User/Logged | 1 | 0.000 | 0.000 | 0.000 | 100.000 | 0.03300 | 0.03300 | 0.00000 | 0.03
/User/Order/__save | 72 | 0.000 | 0.000 | 0.000 | 100.000 | 0.02424 | 0.01900 | 0.02301 | 1.74
/User/Notify | 103 | 0.000 | 0.000 | 12.621 | 87.379 | 0.03088 | 0.03200 | 0.01054 | 3.18
/adm/Report/Submit | 34 | 0.000 | 0.000 | 44.118 | 55.882 | 0.02209 | 0.02200 | 0.00476 | 0.75
/Post/Version | 36 | 0.000 | 0.000 | 0.000 | 100.000 | 0.08844 | 0.06150 | 0.06642 | 3.18
/User/Skill/Submit | 59 | 5.085 | 0.000 | 0.000 | 94.915 | 0.02675 | 0.02000 | 0.02180 | 1.58

<article> | 374467 | 0.011 | 1.696 | 0.923 | 97.371 | 0.17769 | 0.13900 | 0.48101 | 66539.34 /User/Stat | 153 | 0.000 | 0.000 | 9.804 | 90.196 | 0.03546 | 0.03300 | 0.03847 | 5.43

<font size="6">4programmers.net/Forum</span>

<article> - wątek
<topic_list> - dział na forum

         url               |   count    |    5xx%    |    4xx%    |    3xx%    |    2xx%    |    mean    |   median   |   stddev    |  timesum

---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ---------------- | ----------------
/User/ajax/infinite | 83 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01913 | 0.01900 | 0.00281 | 1.59
<share_link> | 278686 | 0.000 | 0.054 | 99.946 | 0.000 | 0.00816 | 0.00300 | 0.29153 | 2274.27
<topic_list> | 101263 | 0.005 | 0.215 | 1.083 | 98.696 | 0.16208 | 0.06300 | 0.55384 | 16412.48
/User/ajax/session | 528908 | 0.000 | 1.121 | 0.000 | 98.879 | 0.03097 | 0.01400 | 1.05213 | 16382.77
/User/ajax/markread | 91 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01741 | 0.01700 | 0.00528 | 1.58
/store | 21 | 0.000 | 0.000 | 0.000 | 100.000 | 0.00410 | 0.00000 | 0.01877 | 0.09
/Post/Version | 75 | 0.000 | 13.333 | 0.000 | 86.667 | 0.09743 | 0.07900 | 0.06722 | 7.31
/Post/Source | 3 | 0.000 | 0.000 | 0.000 | 100.000 | 0.02467 | 0.02300 | 0.00289 | 0.07
/User/ajax/desktop | 913 | 0.000 | 0.000 | 0.000 | 100.000 | 0.01581 | 0.01400 | 0.02669 | 14.43
/Tag | 124324 | 0.000 | 0.023 | 0.000 | 99.977 | 0.06602 | 0.05000 | 0.42609 | 8208.32
/User/ajax/pm | 614 | 0.000 | 1.140 | 0.000 | 98.860 | 0.13407 | 0.09700 | 0.23036 | 82.32
<other> | 35825 | 0.039 | 39.269 | 6.331 | 54.361 | 0.17059 | 0.05300 | 5.62849 | 6111.48
/Post/Share | 1 | 0.000 | 0.000 | 100.000 | 0.000 | 0.02300 | 0.02300 | 0.00000 | 0.02
/User/ajax/notify | 8938 | 0.000 | 0.940 | 0.000 | 99.060 | 0.02533 | 0.01800 | 0.10234 | 226.44
/ | 1000948 | 0.000 | 0.072 | 0.001 | 99.926 | 0.31336 | 0.30100 | 0.30320 | 313654.37

<article> | 1749953 | 0.029 | 0.546 | 0.708 | 98.718 | 0.19071 | 0.18600 | 0.47129 | 333740.12

PS. @fasadin wiem że liczyłeś na więcej, ale na razie tyle statystyk musi Ci wystarczyć :P.

PPS. Kodu (skrypt pythonowy) nie udostępniam na razie, bo chyba nie ma sensu. Może jeśli go kiedyś zrefaktoryzuje i rozbuduję :>.

To zdecydowanie najnudniejszy post w historii 4p.

somekind napisał(a):

To zdecydowanie najnudniejszy post w historii 4p.

ale nadal ma wiecej lapek (plusow) niz Twoj ;)

Jedyne ciekawe przedstawienie accessloga - logstalgia