Dieharder test results
Test 2
Here we run almost exactly the same test as the
previous one, using the same set of
devices with the same configuration, except this time when we get a weak
result, we will repeat the same test a larger number of times, and do
that as many times as we need to, in order to obtain an unambiguous
result one way or the other.
With a larger number of samples, the statistical power of the
test will increase and so will the chance that we either get a more
clearly implausible outcome (and so a clear failure of the null
hypothesis that the stream is random), or a more statistically probable
result (and so will have failed to prove that the stream is not random,
again).
Let's take a look at the
first weak result that we need to do that
for.
#===================================================================#
# dieharder version 3.31.1 Copyright 2003 Robert G. Brown #
#===================================================================#
rng_name |rands/second| Seed |
stdin_input_raw| 1.14e+06 | 394420632|
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | |****| | | |
# | | | | | | |****| | | |
# 12| | | | | | |****| | | |
# |****| | |****|****| |****| | | |
# 10|****| | |****|****|****|****|****| | |
# |****| |****|****|****|****|****|****| | |
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_birthdays| 0| 100| 100|0.98118694| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | |****| | | | |
# 16| | | | | |****| | | | |
# | | | | | |****| | | | |
# 14| | | | | |****| | | | |
# |****| | | | |****| | | | |
# 12|****| | | | |****| | | | |
# |****| | | |****|****| |****| | |
# 10|****|****|****| |****|****| |****| | |
# |****|****|****| |****|****| |****|****| |
# 8|****|****|****| |****|****| |****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 6|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_operm5| 0| 1000000| 100|0.23254518| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18|****| | | | | | | | | |
# |****| | | | | | | | | |
# 16|****| |****| | | | | | | |
# |****| |****| | | | | | | |
# 14|****| |****|****| | | | | | |
# |****| |****|****| | | | | | |
# 12|****| |****|****| | |****| | | |
# |****| |****|****| | |****| | | |
# 10|****| |****|****| | |****| | | |
# |****| |****|****| | |****| | | |
# 8|****| |****|****| | |****| | | |
# |****|****|****|****|****|****|****| |****| |
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_rank_32x32| 0| 40000| 100|0.02667343| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | |****| | | | |
# | | | | |****|****| |****| | |
# 12| | | | |****|****| |****| | |
# | |****| | |****|****| |****| | |
# 10| |****|****| |****|****| |****| | |
# | |****|****| |****|****|****|****|****|****|
# 8| |****|****| |****|****|****|****|****|****|
# |****|****|****| |****|****|****|****|****|****|
# 6|****|****|****| |****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_rank_6x8| 0| 100000| 100|0.63379906| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | |****| | | | | | | | |
# 14| |****| |****| | | | | | |
# | |****| |****|****| | | | | |
# 12| |****| |****|****| |****|****| | |
# | |****| |****|****| |****|****| | |
# 10| |****| |****|****| |****|****| | |
# | |****|****|****|****| |****|****| | |
# 8| |****|****|****|****| |****|****| | |
# |****|****|****|****|****| |****|****| |****|
# 6|****|****|****|****|****| |****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_bitstream| 0| 2097152| 100|0.51437174| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | |****|
# | | | | | | | | |****|****|
# 14|****| | | | | | | |****|****|
# |****| | | | | | | |****|****|
# 12|****| | | |****| | | |****|****|
# |****| | | |****| | | |****|****|
# 10|****| |****| |****| | | |****|****|
# |****| |****|****|****| | | |****|****|
# 8|****|****|****|****|****| | |****|****|****|
# |****|****|****|****|****| | |****|****|****|
# 6|****|****|****|****|****| | |****|****|****|
# |****|****|****|****|****| | |****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_opso| 0| 2097152| 100|0.10791019| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | |****| |
# | | | | | | | | |****| |
# 16| | | | | | | | |****| |
# | | | | | | | | |****| |
# 14| | | | | | | | |****| |
# | | | | | | | | |****| |
# 12| | |****| | |****| | |****| |
# | | |****| | |****| | |****| |
# 10|****| |****| |****|****| | |****| |
# |****|****|****| |****|****|****| |****| |
# 8|****|****|****|****|****|****|****| |****| |
# |****|****|****|****|****|****|****|****|****| |
# 6|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_oqso| 0| 2097152| 100|0.96415288| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | |****| | | | |
# | | | | | |****| | |****| |
# 14| | | | | |****| | |****| |
# | | | |****| |****| |****|****| |
# 12| | |****|****| |****| |****|****| |
# | | |****|****| |****| |****|****| |
# 10| |****|****|****| |****| |****|****| |
# | |****|****|****| |****|****|****|****| |
# 8| |****|****|****|****|****|****|****|****| |
# | |****|****|****|****|****|****|****|****| |
# 6| |****|****|****|****|****|****|****|****| |
# | |****|****|****|****|****|****|****|****| |
# 4| |****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 2|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_dna| 0| 2097152| 100|0.31484499| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | |****|
# |****| | | | | | | | |****|
# 14|****| | | | | | | | |****|
# |****| |****| | | | | | |****|
# 12|****| |****| | | | | | |****|
# |****|****|****| | | | | | |****|
# 10|****|****|****| | | | | | |****|
# |****|****|****| | |****| | |****|****|
# 8|****|****|****| |****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 6|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_count_1s_str| 0| 256000| 100|0.25076425| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | |****|****|****| |
# 12| |****| | | | |****|****|****| |
# | |****| | | | |****|****|****|****|
# 10| |****| | |****| |****|****|****|****|
# | |****| | |****| |****|****|****|****|
# 8| |****| |****|****| |****|****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_count_1s_byt| 0| 256000| 100|0.17975768| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | |****| | | |
# 16| | | | | | |****| | | |
# | | | | | | |****| | | |
# 14| | | | | | |****| | | |
# | | | | | | |****| | | |
# 12| |****| | | | |****| | | |
# | |****|****| | |****|****| | | |
# 10| |****|****| |****|****|****| | | |
# | |****|****| |****|****|****| | | |
# 8| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_parking_lot| 0| 12000| 100|0.74215483| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | |****| | | |
# 14| | | | | | |****| | | |
# | | | | | | |****| |****| |
# 12| | | | | | |****| |****| |
# | | |****| | |****|****| |****| |
# 10|****| |****| | |****|****|****|****| |
# |****| |****| |****|****|****|****|****| |
# 8|****| |****|****|****|****|****|****|****| |
# |****| |****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_2dsphere| 2| 8000| 100|0.57551088| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | |****| |
# 14| | | | | | | | |****| |
# | | | | | | | |****|****| |
# 12| | | | |****| | |****|****| |
# | | | | |****| | |****|****|****|
# 10|****|****|****| |****| | |****|****|****|
# |****|****|****| |****| | |****|****|****|
# 8|****|****|****| |****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 6|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_3dsphere| 3| 4000| 100|0.42265981| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# |****| |****| | | | | | | |
# 16|****| |****| | | | | | | |
# |****| |****| | | | | | | |
# 14|****| |****| | | | | | | |
# |****| |****| | | | | | | |
# 12|****| |****| | | |****| | | |
# |****| |****| | |****|****| | |****|
# 10|****| |****| | |****|****| | |****|
# |****|****|****| | |****|****| | |****|
# 8|****|****|****| |****|****|****| | |****|
# |****|****|****| |****|****|****|****| |****|
# 6|****|****|****| |****|****|****|****| |****|
# |****|****|****|****|****|****|****|****| |****|
# 4|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_squeeze| 0| 100000| 100|0.04575717| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16|****| | | | | | | | | |
# |****| | | | | | | | | |
# 14|****| | | | | | | | | |
# |****| | | | | | | | | |
# 12|****|****| |****| | | | | | |
# |****|****| |****| | | | | |****|
# 10|****|****|****|****|****| | | | |****|
# |****|****|****|****|****|****| | | |****|
# 8|****|****|****|****|****|****|****| | |****|
# |****|****|****|****|****|****|****|****| |****|
# 6|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_sums| 0| 100| 100|0.10483792| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | |****| |
# | | | |****| | | | |****| |
# 12| | | |****| | | | |****| |
# | |****| |****| | | |****|****| |
# 10|****|****| |****| | | |****|****| |
# |****|****|****|****| | |****|****|****|****|
# 8|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_runs| 0| 100000| 100|0.95320171| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# |****| | | | | | | | | |
# 18|****| | | | | | | | | |
# |****| | | | | | | | | |
# 16|****| | | | | | | | | |
# |****| | | | | | | | | |
# 14|****| | | | | | | | | |
# |****| | | | |****| | | | |
# 12|****| | | |****|****| | | | |
# |****|****| |****|****|****| | | | |
# 10|****|****| |****|****|****| | | | |
# |****|****| |****|****|****| |****| | |
# 8|****|****| |****|****|****| |****|****| |
# |****|****| |****|****|****| |****|****|****|
# 6|****|****| |****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_runs| 0| 100000| 100|0.08434582| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | |****| | | | | | | |
# | | |****| | | | | | | |
# 14| | |****| | | | | | | |
# | | |****| | | | |****| | |
# 12| | |****| | | | |****| | |
# |****| |****|****| | | |****| | |
# 10|****|****|****|****|****|****| |****| | |
# |****|****|****|****|****|****| |****| | |
# 8|****|****|****|****|****|****| |****| |****|
# |****|****|****|****|****|****| |****| |****|
# 6|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_craps| 0| 200000| 100|0.22475252| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | |****| | |
# 14| | | | | | | |****| | |
# | | | | | | | |****| | |
# 12| | | | | | | |****| | |
# | | |****| |****| |****|****| | |
# 10| | |****| |****| |****|****| | |
# |****| |****|****|****|****|****|****| |****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_craps| 0| 200000| 100|0.99589059| WEAK
The first weak result of this run is for a completely different test,
one that had passed in the previous run. Like the last two weak results
that we looked at though it was only just a bit more uniform than what
is expected for a significance threshold of 0.995, with about a 1 in 243
chance of seeing a result more uniform than this from a random stream.
Let's repeat this same test again then, with
twice as many psamples.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | |****| | | | | | | |
# 24| | |****| | | | |****| | |
# | |****|****| | | | |****| | |
# 20|****|****|****|****| | | |****| |****|
# |****|****|****|****| |****| |****| |****|
# 16|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_craps| 0| 200000| 200|0.39097480| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | | | |****| |****| | |
# |****| |****| |****|****| |****| | |
# 20|****| |****| |****|****| |****| | |
# |****| |****|****|****|****|****|****| | |
# 16|****| |****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
diehard_craps| 0| 200000| 200|0.92750340| PASSED
Repeated with the stronger test, this time we get a result which has
closer to a 1 in 14 chance that a random stream would have a result that
is more uniform than this. If we don't want to give up so easily on the
job of proving that this stream is bad, we should run this same test
again a few more times, possibly with an even larger number of psamples,
to try to reassure ourselves that this outcome wasn't also just a
fluke. But since this page is already close to unmanageably large, we'll
leave the task of continuing that process as an exercise for the reader.
Let's see what the next weak result in this
test run looks like.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | |****| | | | | | | | |
# 18| |****| | | | | | | | |
# | |****| | | | | | | | |
# 16| |****| | | | | | | | |
# | |****| | | | | | | | |
# 14| |****| | | | | | |****| |
# | |****| | | | | | |****| |
# 12| |****| | | | | | |****| |
# | |****| | | | | | |****|****|
# 10| |****| | | | |****|****|****|****|
# | |****|****| |****| |****|****|****|****|
# 8|****|****|****| |****| |****|****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 6|****|****|****|****|****| |****|****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 4|****|****|****|****|****| |****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
marsaglia_tsang_gcd| 0| 10000000| 100|0.66525279| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# |****| | | | | | | | | |
# 16|****| | | | | | | | | |
# |****| | | | | | | | | |
# 14|****| | | | |****| | | | |
# |****| | | | |****| | | | |
# 12|****| |****| | |****| | | | |
# |****| |****|****| |****| | |****| |
# 10|****| |****|****|****|****| |****|****| |
# |****| |****|****|****|****| |****|****| |
# 8|****| |****|****|****|****| |****|****| |
# |****| |****|****|****|****| |****|****|****|
# 6|****| |****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 4|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
marsaglia_tsang_gcd| 0| 10000000| 100|0.33529662| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | |****| | |****|****| |
# | | | | |****| | |****|****| |
# 10| |****|****| |****| | |****|****|****|
# |****|****|****| |****| |****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_monobit| 1| 100000| 100|0.66225758| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | |****| | |****| | | | |
# 12| | |****| | |****| | | | |
# |****| |****| |****|****|****|****| | |
# 10|****| |****| |****|****|****|****|****| |
# |****| |****|****|****|****|****|****|****| |
# 8|****| |****|****|****|****|****|****|****| |
# |****| |****|****|****|****|****|****|****|****|
# 6|****| |****|****|****|****|****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_runs| 2| 100000| 100|0.93993763| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | |****| | | | | | |
# | |****| |****| | | | | | |
# 12| |****|****|****| | | | | | |
# | |****|****|****| | |****| | | |
# 10| |****|****|****| | |****| | |****|
# | |****|****|****| |****|****| | |****|
# 8|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 1| 100000| 100|0.53839591| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | |****|****| | | | | | |
# | | |****|****| |****| | | |****|
# 10|****| |****|****| |****| |****| |****|
# |****| |****|****|****|****|****|****| |****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 2| 100000| 100|0.99983109| WEAK
Here we have another test that is weak this time which had passed on
the original run, and this time we finally have one that is considerably
more uniform than what would expected on average. There's only about a
1 in 5920 chance that the result might be more uniform than this. Still
hardly improbable enough to be implausible, but notably more so than the
last few had been. If we look at
the result from the previous run
though, this test had a p-value of 0.45335227, which is pretty close to
a 50/50 chance that a random sequence would give us a result either more
or less uniform than that one, with it being on the slightly less uniform
side of the average. So maybe this one is just expected variability too
and not a sign of some real problem?
You know the drill by now, let's answer that by
repeating it again with more psamples.
Since the sts_serial test is a single unit in Dieharder,
this means we'll also get to repeat it for all ntuples, not just
for size 2.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | |****| | | |****| |****| |
# 12| | |****| | | |****| |****| |
# | | |****|****|****| |****| |****| |
# 10| | |****|****|****| |****| |****| |
# |****| |****|****|****|****|****|****|****| |
# 8|****| |****|****|****|****|****|****|****| |
# |****| |****|****|****|****|****|****|****| |
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 3| 100000| 100|0.98172549| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | |****| | | | |
# | |****| | | |****| | | | |
# 14| |****| | | |****| | | | |
# | |****| | | |****|****|****| | |
# 12| |****| | |****|****|****|****| | |
# | |****| | |****|****|****|****| | |
# 10| |****| | |****|****|****|****| | |
# | |****| | |****|****|****|****| | |
# 8| |****| | |****|****|****|****|****| |
# |****|****| | |****|****|****|****|****| |
# 6|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 3| 100000| 100|0.64249400| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | |****| | | | | |
# 14| | | | |****| | | | | |
# | | | | |****| | | | | |
# 12| | | |****|****| | |****| | |
# |****| | |****|****| | |****| | |
# 10|****|****| |****|****| |****|****| | |
# |****|****| |****|****| |****|****| |****|
# 8|****|****|****|****|****| |****|****| |****|
# |****|****|****|****|****| |****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 4| 100000| 100|0.72830192| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14|****| | | | | | | | | |
# |****| | | | | | | | | |
# 12|****| | | | |****| |****| | |
# |****|****| |****| |****| |****| | |
# 10|****|****| |****| |****|****|****| | |
# |****|****| |****| |****|****|****|****|****|
# 8|****|****| |****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 6|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 4| 100000| 100|0.79776084| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | |****| | | | | | |
# 12| | | |****|****| | | | | |
# | | |****|****|****| | |****| | |
# 10|****| |****|****|****|****| |****| | |
# |****|****|****|****|****|****|****|****| |****|
# 8|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****| |****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 5| 100000| 100|0.51502170| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | |****| | | | | | | |
# | | |****| | | | | | | |
# 16| | |****| | | | | | | |
# | | |****|****| | | | | | |
# 14| | |****|****| | | | | | |
# | | |****|****| | | | | | |
# 12| | |****|****| | | | | | |
# | | |****|****| |****| | | | |
# 10| | |****|****| |****| | | | |
# | | |****|****| |****| |****| |****|
# 8|****|****|****|****| |****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 5| 100000| 100|0.17453239| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | |****| | | | | |
# 12|****|****|****| |****| | |****|****| |
# |****|****|****| |****| | |****|****| |
# 10|****|****|****| |****|****| |****|****| |
# |****|****|****| |****|****| |****|****| |
# 8|****|****|****| |****|****| |****|****| |
# |****|****|****| |****|****|****|****|****| |
# 6|****|****|****| |****|****|****|****|****|****|
# |****|****|****| |****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 6| 100000| 100|0.47092386| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | |****| | |
# | | | | | | | |****| | |
# 14| | | | | | | |****| | |
# | | | | | | | |****| | |
# 12| | | | | | | |****| | |
# | |****| | |****| | |****| | |
# 10| |****| |****|****|****| |****| | |
# |****|****|****|****|****|****| |****| |****|
# 8|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 6| 100000| 100|0.94524342| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | |****| | | | | | |
# | | | |****| | | | | | |
# 16| | | |****| | | | | | |
# | | | |****| | | | | | |
# 14|****| | |****| | | | | | |
# |****| | |****| | | | | | |
# 12|****| | |****|****| | | | | |
# |****| | |****|****| | | | | |
# 10|****| | |****|****| | | |****| |
# |****| | |****|****| | | |****|****|
# 8|****| |****|****|****|****| |****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 7| 100000| 100|0.30508923| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | |****| | | | |
# 16| | | | | |****|****| | | |
# |****| | | | |****|****| | | |
# 14|****| | | | |****|****| | | |
# |****| | | | |****|****| | | |
# 12|****| | | | |****|****| | | |
# |****| | | | |****|****| | | |
# 10|****| | | | |****|****| | | |
# |****| | | | |****|****| | | |
# 8|****| |****|****| |****|****| | |****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 7| 100000| 100|0.53305813| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | |****| | |
# 12| | | |****| | | |****| | |
# | | |****|****|****| | |****| | |
# 10| |****|****|****|****|****| |****|****| |
# |****|****|****|****|****|****| |****|****| |
# 8|****|****|****|****|****|****| |****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 8| 100000| 100|0.87075128| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | | | | | | | | |
# | | | | | | | | | | |
# 20| | | | | |****| | | | |
# | | | | | |****| | | | |
# 16| | | | | |****| | | | |
# | | | | | |****| | | | |
# 12| |****| | | |****| | | | |
# | |****|****|****| |****| | |****| |
# 8|****|****|****|****| |****|****|****|****| |
# |****|****|****|****| |****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 8| 100000| 100|0.61934031| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | |****| | | | | | | |****|
# 12| |****| | | | | | | |****|
# | |****| | |****| | |****| |****|
# 10|****|****| |****|****| |****|****| |****|
# |****|****|****|****|****| |****|****| |****|
# 8|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****| |****|
# 6|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 9| 100000| 100|0.88124336| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | |****|
# 14| | | |****| | |****| | |****|
# |****| | |****| | |****| | |****|
# 12|****| | |****| | |****| | |****|
# |****| | |****| | |****| | |****|
# 10|****| | |****| | |****| | |****|
# |****| | |****| |****|****| |****|****|
# 8|****|****|****|****| |****|****| |****|****|
# |****|****|****|****| |****|****| |****|****|
# 6|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 9| 100000| 100|0.83710625| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| |****| | | | | | | | |
# | |****| | | | | | | | |
# 12| |****| |****| |****| | | | |
# | |****|****|****|****|****| | | | |
# 10| |****|****|****|****|****|****| |****| |
# | |****|****|****|****|****|****|****|****| |
# 8| |****|****|****|****|****|****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 6| |****|****|****|****|****|****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 4| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 10| 100000| 100|0.67076529| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | |****|****| | | |
# | | | | | |****|****| | | |
# 12| | | |****| |****|****| | | |
# | | | |****| |****|****| | |****|
# 10| | | |****|****|****|****| | |****|
# |****| | |****|****|****|****| | |****|
# 8|****|****| |****|****|****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 10| 100000| 100|0.78759339| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | |****| | | |
# | | | | | | |****| | | |
# 14| | | | |****| |****| | | |
# | | | | |****| |****| | | |
# 12| | | | |****| |****| | | |
# | | | | |****| |****| | |****|
# 10| | | |****|****|****|****| | |****|
# | | |****|****|****|****|****|****| |****|
# 8| |****|****|****|****|****|****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 6| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 11| 100000| 100|0.39324799| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | |****| | |
# 14| | | | | | | |****| | |
# | | | | | |****| |****| | |
# 12| | | | | |****|****|****| |****|
# | | | | |****|****|****|****| |****|
# 10| | | | |****|****|****|****| |****|
# | | | |****|****|****|****|****| |****|
# 8| |****| |****|****|****|****|****|****|****|
# | |****| |****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 11| 100000| 100|0.19016163| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | |****| | | | | | |
# | | | |****| | | | | | |
# 14| | | |****| | | | | | |
# | | | |****| | |****| | | |
# 12| | | |****| |****|****| |****| |
# | | | |****|****|****|****| |****| |
# 10| |****| |****|****|****|****| |****| |
# | |****| |****|****|****|****|****|****|****|
# 8| |****| |****|****|****|****|****|****|****|
# | |****| |****|****|****|****|****|****|****|
# 6| |****| |****|****|****|****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 4| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 12| 100000| 100|0.13919152| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | |****| | | | | | |
# 14| | | |****| | | | | | |
# | | | |****| | | | |****| |
# 12| | | |****|****| | | |****|****|
# | | | |****|****| | | |****|****|
# 10| | |****|****|****| |****| |****|****|
# | | |****|****|****| |****| |****|****|
# 8|****|****|****|****|****| |****| |****|****|
# |****|****|****|****|****| |****| |****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 12| 100000| 100|0.91433823| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | |****| |
# 14| | | | |****| | | |****| |
# | | | | |****| | | |****| |
# 12| | | | |****| |****| |****| |
# |****|****| | |****| |****| |****| |
# 10|****|****| | |****| |****| |****| |
# |****|****|****| |****|****|****| |****| |
# 8|****|****|****| |****|****|****| |****| |
# |****|****|****| |****|****|****| |****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 13| 100000| 100|0.99405376| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | |****| | | | | | | |
# 14| | |****| | | | | | | |
# |****| |****| | | | | | | |
# 12|****| |****| | | | |****| | |
# |****|****|****| | | |****|****|****| |
# 10|****|****|****| | |****|****|****|****| |
# |****|****|****| | |****|****|****|****| |
# 8|****|****|****| |****|****|****|****|****| |
# |****|****|****| |****|****|****|****|****| |
# 6|****|****|****| |****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 13| 100000| 100|0.19574156| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | |****| | | | |
# 14| | | | | |****|****| | | |
# | | | | | |****|****| | | |
# 12|****| | | | |****|****|****| | |
# |****| | |****| |****|****|****| | |
# 10|****| | |****| |****|****|****| | |
# |****| | |****|****|****|****|****| |****|
# 8|****| | |****|****|****|****|****| |****|
# |****| |****|****|****|****|****|****| |****|
# 6|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 14| 100000| 100|0.65755525| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | |****| |
# 14| | | | | | |****| |****| |
# | | | | | | |****| |****| |
# 12|****| |****| | | |****| |****| |
# |****| |****| | | |****| |****| |
# 10|****| |****| | | |****| |****| |
# |****|****|****| | |****|****| |****| |
# 8|****|****|****| |****|****|****| |****|****|
# |****|****|****| |****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 14| 100000| 100|0.93251863| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | |****| | | | | | |
# | | | |****| | | | | | |
# 12| | | |****| | | | |****| |
# | | |****|****| | | | |****| |
# 10| | |****|****| | | |****|****|****|
# | |****|****|****|****| |****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 15| 100000| 100|0.99453137| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | |****| |
# 14| | | | | | | | |****| |
# | |****| | | | | | |****| |
# 12| |****| |****| |****| | |****| |
# | |****| |****| |****| | |****| |
# 10| |****| |****| |****| |****|****|****|
# |****|****|****|****| |****| |****|****|****|
# 8|****|****|****|****| |****| |****|****|****|
# |****|****|****|****| |****| |****|****|****|
# 6|****|****|****|****| |****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 15| 100000| 100|0.81990878| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14|****| | | | | | | | | |
# |****| | | | | |****| | | |
# 12|****| | | | | |****| | | |
# |****| | | | | |****|****| | |
# 10|****|****| | |****|****|****|****| | |
# |****|****| |****|****|****|****|****|****|****|
# 8|****|****| |****|****|****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 6|****|****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 16| 100000| 100|0.86971210| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# |****| | | |****| | | | | |
# 14|****| | | |****| | | | | |
# |****| | | |****| | | | | |
# 12|****| | | |****| | | | | |
# |****| | |****|****| | | | | |
# 10|****| | |****|****| | | |****|****|
# |****| | |****|****|****| |****|****|****|
# 8|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 6|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 16| 100000| 100|0.47036119| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | | | | | | | | |
# | | |****|****|****|****|****| | |****|
# 20| |****|****|****|****|****|****| | |****|
# | |****|****|****|****|****|****| | |****|
# 16|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****| |****|
# 12|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 1| 100000| 200|0.42621792| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | | | | | | | | |
# | | |****| | | | | |****| |
# 20| | |****| | |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 2| 100000| 200|0.99425422| PASSED
With the stronger test, we're back to a more probable result again.
With a 1 in 174 chance of being more uniform than this one, it's perhaps
not as convincingly so as we might like, but being an independent test
it is still a 1 in 174 chance regardless of what the previous results
may have been. If we want to be more certain, then once again, we
should repeat this test a few more times, possibly with even larger
numbers of samples.
Luck being with us for this demo, we're actually going to get the
chance to do that right now, because look at
what test failed next.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | |****| | | | | | | |
# 24| | |****| | | | | |****| |
# | | |****| |****| |****| |****| |
# 20| |****|****| |****| |****| |****| |
# | |****|****| |****|****|****| |****|****|
# 16|****|****|****| |****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 3| 100000| 200|0.99740532| WEAK
Well, how about that. The sts_serial test for
ntuple 2 passed with the larger number of psamples, but now it's
come up weak for ntuple 3 which had passed comfortably in all the
previous tests …
It's a 1 in 385 chance, but we know what to do.
Let's crank up the power by another notch.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| |****| | | | | | | | |
# | |****| | | | | | | | |
# 28| |****| | | | | | | | |
# | |****| | | | |****|****| | |
# 24| |****| | | | |****|****| | |
# | |****| | | | |****|****| | |
# 20| |****| | |****|****|****|****| | |
# | |****|****| |****|****|****|****| | |
# 16| |****|****|****|****|****|****|****| | |
# | |****|****|****|****|****|****|****|****| |
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 3| 100000| 200|0.28612811| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | |****| | | | | | |
# | | | |****| | | | | | |
# 24| | | |****|****| | |****| | |
# | | | |****|****| | |****| | |
# 20| | | |****|****| |****|****| |****|
# |****| |****|****|****| |****|****| |****|
# 16|****|****|****|****|****| |****|****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 4| 100000| 200|0.89221447| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | |****| | | | |
# | | | | | |****| | | | |
# 24|****| | | | |****| | | | |
# |****| | | | |****| | |****| |
# 20|****| | | |****|****|****|****|****| |
# |****| |****| |****|****|****|****|****| |
# 16|****|****|****| |****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 4| 100000| 200|0.75642766| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | |****| |****| | | |
# 24| | |****| |****|****|****| | | |
# | | |****| |****|****|****| | | |
# 20| | |****| |****|****|****| | |****|
# | | |****| |****|****|****| | |****|
# 16| | |****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 5| 100000| 200|0.65571458| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | |****| | | | | | | |
# 24| | |****| | | | | | | |
# | | |****|****| |****|****| | | |
# 20| | |****|****| |****|****| |****|****|
# | |****|****|****| |****|****| |****|****|
# 16| |****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 5| 100000| 200|0.63478108| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | |****| | | | | |
# | | | | |****|****| |****| | |
# 24| | | | |****|****| |****| | |
# | | | | |****|****| |****| | |
# 20| | | | |****|****|****|****|****| |
# |****| | | |****|****|****|****|****| |
# 16|****| |****| |****|****|****|****|****|****|
# |****|****|****| |****|****|****|****|****|****|
# 12|****|****|****| |****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 6| 100000| 200|0.04784831| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | |****| | |
# | | | | | | | |****| | |
# 24| | | | |****| | |****| | |
# | | | | |****| | |****|****| |
# 20| |****| | |****| | |****|****| |
# | |****|****|****|****|****| |****|****| |
# 16| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 6| 100000| 200|0.79347921| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | |****| | | | | | |
# 28| | | |****| | | | | | |
# | | | |****| | | | | | |
# 24| | | |****| | | | | | |
# |****| | |****|****|****| | |****| |
# 20|****| | |****|****|****| | |****| |
# |****| |****|****|****|****|****|****|****| |
# 16|****| |****|****|****|****|****|****|****| |
# |****| |****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 7| 100000| 200|0.82132467| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28|****| | | | | | | | | |
# |****| | | | | |****| | | |
# 24|****|****| | | | |****| | | |
# |****|****| | | |****|****| | | |
# 20|****|****| |****| |****|****| | | |
# |****|****| |****| |****|****| |****| |
# 16|****|****| |****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 7| 100000| 200|0.28785816| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | |****| | | |****| | |
# | | |****|****|****| | |****| | |
# 20| | |****|****|****|****|****|****| | |
# |****|****|****|****|****|****|****|****| | |
# 16|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 8| 100000| 200|0.29821886| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | |****| | | | |
# | | | | | |****| | | | |
# 28| | | | | |****| | | | |
# | | | | | |****| | | | |
# 24|****|****| | | |****| | | | |
# |****|****| | | |****| | |****| |
# 20|****|****| | | |****| | |****| |
# |****|****|****|****| |****| | |****| |
# 16|****|****|****|****|****|****|****| |****| |
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 8| 100000| 200|0.31098046| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | |****| | | | | |
# 24| | | | |****| | | | |****|
# | | | | |****| | | | |****|
# 20|****|****| | |****|****| | | |****|
# |****|****| |****|****|****|****|****| |****|
# 16|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 9| 100000| 200|0.96485306| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28|****| | | | | | | | |****|
# |****| | | | | | | | |****|
# 24|****| | | | | | |****| |****|
# |****| |****| | | | |****| |****|
# 20|****| |****| | | |****|****| |****|
# |****| |****|****| |****|****|****|****|****|
# 16|****| |****|****| |****|****|****|****|****|
# |****| |****|****| |****|****|****|****|****|
# 12|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 9| 100000| 200|0.37983087| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| |****| | | |****| | | | |
# | |****|****| |****|****| | |****| |
# 20| |****|****| |****|****| | |****| |
# | |****|****|****|****|****|****| |****| |
# 16| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 10| 100000| 200|0.68375036| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | | |****|****| | | | |
# | | | |****|****|****|****| | | |
# 20| | | |****|****|****|****|****| | |
# |****|****| |****|****|****|****|****|****| |
# 16|****|****| |****|****|****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 10| 100000| 200|0.62003581| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | | | | | | | | |
# | |****| | |****| | | | | |
# 20| |****|****|****|****|****|****| |****|****|
# | |****|****|****|****|****|****|****|****|****|
# 16| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 11| 100000| 200|0.94597243| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | |****| | | |
# | | | | | | |****| | |****|
# 24| | | | | | |****| | |****|
# | | | | | | |****|****| |****|
# 20|****|****| | | | |****|****| |****|
# |****|****| |****| |****|****|****| |****|
# 16|****|****| |****|****|****|****|****| |****|
# |****|****| |****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 11| 100000| 200|0.21351162| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | |****| | |****| | | |
# 24| | | |****| | |****| |****| |
# | | | |****|****| |****| |****| |
# 20| | | |****|****| |****| |****| |
# | | | |****|****|****|****|****|****| |
# 16|****|****| |****|****|****|****|****|****| |
# |****|****| |****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 12| 100000| 200|0.29936101| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | |****| | | | | | |
# | | | |****| | | | | | |
# 28| | | |****| | | | | | |
# | | | |****| | | | | | |
# 24| | | |****|****| | | |****| |
# | | | |****|****| | | |****| |
# 20| | | |****|****| |****| |****| |
# |****| | |****|****| |****|****|****|****|
# 16|****| |****|****|****| |****|****|****|****|
# |****| |****|****|****| |****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 12| 100000| 200|0.34164233| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | |****| | | |
# 24| | | | | | |****| |****| |
# | |****| | | |****|****| |****| |
# 20|****|****| | |****|****|****| |****| |
# |****|****|****| |****|****|****| |****| |
# 16|****|****|****| |****|****|****| |****| |
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 13| 100000| 200|0.89445793| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# |****| | | | | | | | | |
# 24|****| | | | | | | | | |
# |****| |****| | |****|****|****| | |
# 20|****|****|****| | |****|****|****|****| |
# |****|****|****| | |****|****|****|****| |
# 16|****|****|****| | |****|****|****|****| |
# |****|****|****| |****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 13| 100000| 200|0.50878329| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | | |****|****| |****| | |
# | | | | |****|****|****|****| | |
# 20| | | | |****|****|****|****| |****|
# |****| | | |****|****|****|****| |****|
# 16|****|****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 14| 100000| 200|0.45452478| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | |****| | | |
# | | | | | | |****| |****| |
# 24| | | | | | |****| |****| |
# | | | | | | |****| |****|****|
# 20|****| | | | | |****| |****|****|
# |****|****|****| | | |****| |****|****|
# 16|****|****|****|****|****| |****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 14| 100000| 200|0.34632705| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | | | | |
# 24| | | |****| | |****| | | |
# | | | |****| | |****| |****| |
# 20| |****| |****| | |****| |****|****|
# | |****|****|****| |****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 15| 100000| 200|0.94463112| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | |****| | | | |****| |
# 24| |****| |****| |****| | |****| |
# | |****|****|****| |****| | |****| |
# 20| |****|****|****| |****| |****|****| |
# | |****|****|****| |****| |****|****|****|
# 16| |****|****|****| |****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 12|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 15| 100000| 200|0.91442915| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28|****| | | | | | | | | |
# |****| | | | | | | | | |
# 24|****| | | | | |****|****| | |
# |****| | |****|****| |****|****| | |
# 20|****| | |****|****| |****|****|****| |
# |****| | |****|****| |****|****|****| |
# 16|****| | |****|****| |****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 16| 100000| 200|0.82928130| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# |****| | | | | | | | | |
# 28|****| | | | | | | | | |
# |****| | | | | | | | | |
# 24|****| | |****| | | | | | |
# |****| | |****|****| | | |****| |
# 20|****| |****|****|****| | | |****| |
# |****| |****|****|****|****| | |****| |
# 16|****| |****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 16| 100000| 200|0.33258096| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | |****| | | | | | |
# 36| | |****|****| | | | | | |
# | | |****|****| | | | | | |
# 32| |****|****|****| |****| | | |****|
# | |****|****|****|****|****|****| | |****|
# 28| |****|****|****|****|****|****| | |****|
# | |****|****|****|****|****|****| | |****|
# 24| |****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****| |****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 1| 100000| 300|0.35677851| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | |****| | | | |
# | | | | | |****|****| | | |
# 32| | | | | |****|****| |****|****|
# |****| | |****| |****|****| |****|****|
# 28|****| | |****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 24|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 2| 100000| 300|0.27878508| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | |****| |
# | | | | | | |****| |****| |
# 32| | |****| | | |****| |****|****|
# | | |****| | | |****|****|****|****|
# 28|****| |****| | |****|****|****|****|****|
# |****|****|****| | |****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 3| 100000| 300|0.35364149| PASSED
Now things are starting to look a bit more convincing, this time we
have a result with about a 1 in 3 chance that it might randomly be
less uniform than this one. Which is on the opposite end of the
scale to the previous results, and just the sort of random hopping about
within the range of probability that we would expect from random samples.
And if we look just above this result,
we see that for the ntuple 2 test we now have a p-value of
0.27878508 too.
Even better, our luck (for the sake of this demo) still hasn't run
out yet. Let's look at what happened for the
ntuple 10 test.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| |****| | | |****| | | | |
# | |****| | | |****|****|****| | |
# 32| |****| | |****|****|****|****| | |
# | |****| | |****|****|****|****| | |
# 28| |****| |****|****|****|****|****| | |
# | |****|****|****|****|****|****|****| | |
# 24| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 3| 100000| 300|0.69611764| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | |****| | | | | |****|
# | | | |****| | | |****| |****|
# 32| | | |****|****| |****|****| |****|
# | | | |****|****| |****|****| |****|
# 28|****| | |****|****| |****|****| |****|
# |****|****| |****|****| |****|****|****|****|
# 24|****|****|****|****|****| |****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 4| 100000| 300|0.79510417| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | | | | | | | | |
# 42| | | | | | | | | | |
# | | | | | |****| | | | |
# 36| | | | |****|****| | | | |
# |****| | | |****|****| | |****| |
# 30|****| | | |****|****|****| |****| |
# |****| |****| |****|****|****| |****| |
# 24|****|****|****| |****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 4| 100000| 300|0.72107728| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | |****| | | | | | | |
# 36| | |****| | | | | | |****|
# | | |****| |****| |****| | |****|
# 32| | |****| |****|****|****| | |****|
# | | |****| |****|****|****| | |****|
# 28| | |****| |****|****|****| | |****|
# | | |****|****|****|****|****|****| |****|
# 24|****| |****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 5| 100000| 300|0.45010903| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | |****| |****| |
# 32| | |****| | |****|****| |****| |
# | |****|****| | |****|****|****|****| |
# 28| |****|****|****| |****|****|****|****| |
# | |****|****|****| |****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 5| 100000| 300|0.87016831| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | | | | | | | | |
# 42| | | | | | | | | | |
# | | | | | | | |****| | |
# 36| | | | | | | |****| | |
# | | | | |****|****|****|****| |****|
# 30| | | | |****|****|****|****| |****|
# |****| | | |****|****|****|****|****|****|
# 24|****| | |****|****|****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 6| 100000| 300|0.01197850| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | | | | | | | | |
# 42| | | | | | | |****| | |
# | | | | | | | |****| | |
# 36| | | | | | | |****| | |
# | | | | |****| | |****| |****|
# 30| |****| | |****| | |****|****|****|
# | |****|****| |****| |****|****|****|****|
# 24| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 6| 100000| 300|0.14423616| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | | | | | | | | |
# 42| | | | | | | | | | |
# | | | |****| | | | | | |
# 36| | | |****| | | | |****| |
# | | | |****| | | | |****| |
# 30|****| | |****|****|****| | |****|****|
# |****| | |****|****|****| |****|****|****|
# 24|****| |****|****|****|****|****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 7| 100000| 300|0.15496349| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36|****| | | | | |****| | | |
# |****|****| | | | |****| | | |
# 32|****|****| | | |****|****| | | |
# |****|****| | | |****|****| |****| |
# 28|****|****| | | |****|****|****|****| |
# |****|****| |****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 7| 100000| 300|0.79839673| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | |****| | | | | | |
# 32| | | |****|****|****|****| | |****|
# | | |****|****|****|****|****| | |****|
# 28| | |****|****|****|****|****|****|****|****|
# | | |****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 8| 100000| 300|0.58605346| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | |****| | | | |
# 36| | | | | |****| | | | |
# |****| | |****| |****| | | | |
# 32|****| | |****| |****| | | | |
# |****| | |****| |****| |****|****| |
# 28|****|****| |****| |****| |****|****| |
# |****|****|****|****|****|****| |****|****|****|
# 24|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 8| 100000| 300|0.85784683| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | |****|
# 36| | | | |****| | | | |****|
# | | | | |****| | | | |****|
# 32| | | | |****| | | | |****|
# |****|****|****| |****|****| | | |****|
# 28|****|****|****| |****|****| |****| |****|
# |****|****|****|****|****|****| |****|****|****|
# 24|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 9| 100000| 300|0.64214990| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# |****| | | | | | | | |****|
# 36|****| |****| | | | | | |****|
# |****| |****| | | | |****| |****|
# 32|****| |****| | |****| |****| |****|
# |****| |****| | |****| |****| |****|
# 28|****| |****| | |****| |****| |****|
# |****| |****|****| |****| |****|****|****|
# 24|****| |****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 20|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 9| 100000| 300|0.78792809| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | |****| | |****| | | | | |
# 32| |****| | |****|****| | | |****|
# | |****| | |****|****| | |****|****|
# 28| |****|****|****|****|****| |****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 10| 100000| 300|0.99570832| WEAK
Huh. Now this one is coming up weak, though it was quite comfortably
bouncing about in the middle of the range previously, with p-values of
0.36879694,
0.67076529, and
0.68375036. But if things like this
didn't ever happen, then it wouldn't be random. Has the increased power
started to show up a real weakness here, or is this just normal chance?
We've still got plenty of spare power we can tap into, so let's
dial it up again and find out.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | |****| | | | | |
# | | | | |****|****| | | | |
# 32| | | | |****|****|****|****| | |
# |****|****| | |****|****|****|****| | |
# 28|****|****| | |****|****|****|****|****| |
# |****|****| |****|****|****|****|****|****|****|
# 24|****|****| |****|****|****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 10| 100000| 300|0.30694464| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | |****| | | | | |
# 32| | | | |****| |****| |****| |
# | |****| | |****| |****| |****|****|
# 28|****|****|****|****|****| |****| |****|****|
# |****|****|****|****|****| |****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 11| 100000| 300|0.94627016| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | |****|****| | |
# | | | | | | |****|****| | |
# 32| | | | | | |****|****| |****|
# |****| | |****| | |****|****| |****|
# 28|****|****| |****| |****|****|****| |****|
# |****|****|****|****| |****|****|****| |****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 11| 100000| 300|0.58690397| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | |****| | | |
# 36| | | | | | |****| |****| |
# | | | |****|****| |****| |****| |
# 32| | | |****|****| |****| |****| |
# | | | |****|****| |****| |****| |
# 28| | | |****|****| |****| |****| |
# | |****| |****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 12| 100000| 300|0.53311187| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | | | | | | | | |
# 42| | | |****| | | | | | |
# | | | |****| | | | | | |
# 36| | | |****| | | | |****| |
# | | | |****| | |****| |****| |
# 30| | |****|****|****| |****| |****|****|
# | | |****|****|****| |****|****|****|****|
# 24|****| |****|****|****| |****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 12| 100000| 300|0.24617793| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | |****| |****| |
# 32| | | | | | |****| |****| |
# | | |****|****|****|****|****| |****| |
# 28| |****|****|****|****|****|****| |****| |
# | |****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 13| 100000| 300|0.84095341| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | |****| | | |
# |****| | | | | |****| | | |
# 32|****|****| | | |****|****| | | |
# |****|****| | | |****|****| |****|****|
# 28|****|****| | | |****|****|****|****|****|
# |****|****| | |****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 13| 100000| 300|0.91774306| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | |****| | | | |
# | | | | |****|****|****|****| | |
# 32| | | | |****|****|****|****| |****|
# | | | | |****|****|****|****| |****|
# 28| | | |****|****|****|****|****|****|****|
# | | |****|****|****|****|****|****|****|****|
# 24| | |****|****|****|****|****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 14| 100000| 300|0.02520166| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | |****| | | |
# 36| | | | | | |****|****| | |
# | | | | | | |****|****|****| |
# 32| | |****| | | |****|****|****|****|
# | | |****| | | |****|****|****|****|
# 28|****| |****| | | |****|****|****|****|
# |****| |****|****|****| |****|****|****|****|
# 24|****|****|****|****|****| |****|****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 14| 100000| 300|0.06509942| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | |****| | | | | | |
# 36| | | |****| | | | |****|****|
# | | | |****| | |****| |****|****|
# 32| | | |****| | |****| |****|****|
# | | | |****| | |****|****|****|****|
# 28| |****| |****| | |****|****|****|****|
# | |****|****|****| | |****|****|****|****|
# 24| |****|****|****| |****|****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 15| 100000| 300|0.27327211| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | |****| |
# 36| | | |****| | | | |****| |
# | | | |****| | | |****|****| |
# 32| |****| |****| |****| |****|****| |
# | |****|****|****| |****| |****|****|****|
# 28| |****|****|****| |****| |****|****|****|
# |****|****|****|****| |****| |****|****|****|
# 24|****|****|****|****| |****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 20|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 15| 100000| 300|0.30432463| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | |****| | | |
# 36| | | | | | |****| | | |
# |****| | | | | |****|****| | |
# 32|****| | | |****| |****|****| |****|
# |****| | | |****| |****|****|****|****|
# 28|****| | |****|****|****|****|****|****|****|
# |****| | |****|****|****|****|****|****|****|
# 24|****| | |****|****|****|****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 20|****| |****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 16| 100000| 300|0.18050313| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | |****| | | | | |
# 36| | | | |****| | | |****| |
# |****| | | |****| | | |****| |
# 32|****| | |****|****|****| | |****| |
# |****| | |****|****|****| | |****| |
# 28|****| | |****|****|****| |****|****| |
# |****| | |****|****|****| |****|****| |
# 24|****| |****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 20|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 16|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 16| 100000| 300|0.90969115| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | |****| | | |
# | | |****|****| | |****| | |****|
# 42| | |****|****| |****|****| | |****|
# | | |****|****|****|****|****| | |****|
# 36| |****|****|****|****|****|****| | |****|
# |****|****|****|****|****|****|****| | |****|
# 30|****|****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 1| 100000| 400|0.30127822| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | |****|
# | | | |****| |****|****| | |****|
# 42| |****| |****| |****|****| | |****|
# | |****| |****| |****|****| | |****|
# 36| |****| |****| |****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 2| 100000| 400|0.34344039| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | |****| | |****| | | |
# | | | |****| | |****| | | |
# 42| | | |****| | |****| |****|****|
# | | |****|****| | |****| |****|****|
# 36| |****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 3| 100000| 400|0.65180221| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| |****| | | | | | | | |
# | |****| | | |****| | | | |
# 42| |****| | |****|****| |****|****| |
# | |****| | |****|****|****|****|****| |
# 36| |****| | |****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 3| 100000| 400|0.97430208| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | |****| | | | | |
# 48| | | | |****| | | | | |
# | | | |****|****| | |****| | |
# 42| | | |****|****| | |****| |****|
# | | | |****|****| |****|****| |****|
# 36| | | |****|****| |****|****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 4| 100000| 400|0.49512642| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | |****| | | | | |
# 48| | | | |****| | | | | |
# | | | | |****|****|****| | | |
# 42|****| | | |****|****|****| | | |
# |****| | | |****|****|****| | | |
# 36|****|****|****| |****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 4| 100000| 400|0.63152272| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | |****| |****| | | |
# | | |****| |****| |****| | | |
# 42| | |****| |****| |****| | |****|
# | | |****|****|****|****|****| | |****|
# 36| | |****|****|****|****|****| |****|****|
# | | |****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 5| 100000| 400|0.35590704| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | |****| | |****|****| | | |
# 42| | |****| | |****|****| |****| |
# | | |****| | |****|****|****|****| |
# 36|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 5| 100000| 400|0.88523924| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | |****| | |
# | | | | | |****| |****| | |
# 42| | | | |****|****| |****| | |
# | | | |****|****|****|****|****|****|****|
# 36|****| |****|****|****|****|****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 6| 100000| 400|0.24823854| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | |****| | |
# 48| | | | | | | |****| | |
# | | | | |****| | |****| | |
# 42| | |****| |****| | |****| |****|
# | | |****| |****| | |****|****|****|
# 36|****|****|****|****|****| | |****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 6| 100000| 400|0.60737807| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | |****| | | | | | |
# | | | |****| | | | | |****|
# 42| | |****|****|****| | | |****|****|
# |****| |****|****|****|****| | |****|****|
# 36|****| |****|****|****|****| |****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 30|****| |****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 7| 100000| 400|0.58645100| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# |****|****| | | | | | | | |
# 42|****|****| | | | |****| | | |
# |****|****| | | |****|****|****|****|****|
# 36|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 7| 100000| 400|0.86356648| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | |****|****| | | | |****|
# 42| | | |****|****|****|****| | |****|
# | | |****|****|****|****|****| | |****|
# 36| |****|****|****|****|****|****| | |****|
# | |****|****|****|****|****|****| |****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 8| 100000| 400|0.54334279| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | |****| |****| | | | |
# 42|****| | |****| |****| |****| | |
# |****|****| |****| |****| |****|****| |
# 36|****|****| |****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 8| 100000| 400|0.89796312| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | |****|
# 48| | | | |****| | | | |****|
# | | |****| |****| | | | |****|
# 42| | |****| |****| | | | |****|
# |****| |****| |****| | | |****|****|
# 36|****|****|****| |****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 30|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 9| 100000| 400|0.45253175| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48|****| | | | | | | | |****|
# |****| | | | | | | | |****|
# 42|****| | | | | | |****| |****|
# |****| |****|****| |****| |****|****|****|
# 36|****| |****|****| |****| |****|****|****|
# |****| |****|****| |****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 9| 100000| 400|0.52137098| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| |****| | | | | | | | |
# | |****| | | | | | | | |
# 42| |****| | |****| | |****| |****|
# | |****| |****|****|****| |****|****|****|
# 36| |****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 10| 100000| 400|0.89132296| PASSED
A 1 in 9 chance that a random sample might be more uniform. We're
back in the right ballpark again, and testing with 400 psamples, both the
ntuple 2 and
ntuple 3 results are still looking
good too. Since none of the sts_serial tests are failing
for any ntuple anymore, we can move on to looking at the
next weak result in this run.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | |****| | | | |
# | | | | |****|****| | | | |
# 42| | | |****|****|****|****|****|****| |
# |****|****| |****|****|****|****|****|****| |
# 36|****|****| |****|****|****|****|****|****| |
# |****|****| |****|****|****|****|****|****|****|
# 30|****|****| |****|****|****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 10| 100000| 400|0.27863966| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | |****| | | | | |
# | | | | |****| | | |****| |
# 42| |****| | |****| |****| |****| |
# |****|****| | |****| |****| |****| |
# 36|****|****| |****|****| |****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 11| 100000| 400|0.96333433| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | | | | | |****| | |
# 42| | | | | | |****|****| | |
# | |****|****|****| | |****|****| |****|
# 36|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 11| 100000| 400|0.96412379| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | |****| | | |
# | |****| | | | |****| |****| |
# 42| |****| | | | |****| |****|****|
# | |****| | |****| |****| |****|****|
# 36| |****|****|****|****| |****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 12| 100000| 400|0.68541971| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | |****| | | | | |****|
# 48| | | |****| | | | | |****|
# | | | |****| | | | |****|****|
# 42| | |****|****| | |****| |****|****|
# | | |****|****|****| |****| |****|****|
# 36|****| |****|****|****| |****|****|****|****|
# |****| |****|****|****| |****|****|****|****|
# 30|****| |****|****|****| |****|****|****|****|
# |****| |****|****|****| |****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 12| 100000| 400|0.23179463| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | |****| | | |****| |
# | | | | |****| | | |****| |
# 42| | |****| |****| |****| |****| |
# | | |****| |****|****|****| |****| |
# 36|****| |****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 13| 100000| 400|0.73190105| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | | | |****|****| | | |
# 42|****|****| | | |****|****| | |****|
# |****|****| | | |****|****| | |****|
# 36|****|****|****| |****|****|****| |****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 13| 100000| 400|0.98700087| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | | | | | |
# | | | | |****|****| | | |****|
# 42| | | | |****|****|****| |****|****|
# | | |****| |****|****|****|****|****|****|
# 36| | |****|****|****|****|****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 30|****| |****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 14| 100000| 400|0.09299009| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | | | |****| | | |
# | | | | | | |****| |****| |
# 42| | |****| |****| |****|****|****|****|
# | |****|****| |****| |****|****|****|****|
# 36| |****|****| |****| |****|****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 14| 100000| 400|0.28854990| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | |****| | | | | |****|
# | | | |****| | | |****| |****|
# 42| | | |****| | |****|****| |****|
# | | | |****| | |****|****|****|****|
# 36| |****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 30|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 15| 100000| 400|0.40539210| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | |****| | | | | |****| |
# | | |****| | | | | |****| |
# 42| |****|****|****| | | |****|****|****|
# | |****|****|****| |****| |****|****|****|
# 36|****|****|****|****| |****| |****|****|****|
# |****|****|****|****| |****| |****|****|****|
# 30|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 24|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 15| 100000| 400|0.40739107| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | |****| | | |
# 48| | | | | | |****| | | |
# |****| | | | | |****| | | |
# 42|****| | | |****| |****|****| |****|
# |****| | | |****| |****|****|****|****|
# 36|****| | |****|****|****|****|****|****|****|
# |****| | |****|****|****|****|****|****|****|
# 30|****|****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 16| 100000| 400|0.15017621| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 60| | | | | | | | | | |
# | | | | | | | | | | |
# 54| | | | | | | | | | |
# | | | | | | | | | | |
# 48| | | | |****| | | |****| |
# |****| | | |****| | | |****| |
# 42|****| | | |****|****| | |****| |
# |****| | |****|****|****| |****|****| |
# 36|****| | |****|****|****| |****|****|****|
# |****| | |****|****|****|****|****|****|****|
# 30|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 18|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
sts_serial| 16| 100000| 400|0.62823861| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | |****| | | |
# | |****| | | | |****| | | |
# 14| |****| | | | |****| | | |
# | |****| | | | |****| | |****|
# 12| |****| | | | |****| | |****|
# | |****| |****| | |****| | |****|
# 10| |****|****|****|****| |****| | |****|
# | |****|****|****|****| |****| | |****|
# 8| |****|****|****|****|****|****| | |****|
# | |****|****|****|****|****|****| | |****|
# 6|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 1| 100000| 100|0.82666304| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# |****| | | | | | | |****| |
# 12|****| | |****|****| | |****|****| |
# |****| | |****|****| | |****|****| |
# 10|****| | |****|****| | |****|****| |
# |****|****| |****|****| | |****|****| |
# 8|****|****|****|****|****|****| |****|****| |
# |****|****|****|****|****|****| |****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 2| 100000| 100|0.88510002| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | |****| | | | | | |
# | | | |****| | | | | | |
# 14| | | |****|****| | | | | |
# | | | |****|****| | | | | |
# 12| |****| |****|****| | |****| | |
# | |****|****|****|****| | |****| | |
# 10|****|****|****|****|****| | |****| | |
# |****|****|****|****|****| | |****| | |
# 8|****|****|****|****|****| | |****| | |
# |****|****|****|****|****|****| |****| |****|
# 6|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 3| 100000| 100|0.04257593| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | |****| | |
# 14| |****| | | | | |****| | |
# | |****| | | | | |****| |****|
# 12| |****| | | | | |****| |****|
# | |****| | | | | |****| |****|
# 10| |****| | | | | |****|****|****|
# | |****|****| | |****| |****|****|****|
# 8| |****|****| |****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 4| 100000| 100|0.45789139| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | |****|
# 16| | | | | | | | | |****|
# | | | | | | | | | |****|
# 14| | | | | | | | | |****|
# | | | | |****| | | | |****|
# 12| | | | |****|****|****| | |****|
# | | | | |****|****|****| | |****|
# 10| | | | |****|****|****| | |****|
# |****| | |****|****|****|****|****| |****|
# 8|****| | |****|****|****|****|****|****|****|
# |****| | |****|****|****|****|****|****|****|
# 6|****|****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 5| 100000| 100|0.15229272| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| |****| | | | | | | | |
# | |****| | | | | | | | |
# 14| |****| | | | | | | | |
# | |****| | | | | | |****| |
# 12| |****| | | | | | |****|****|
# | |****| | | | | | |****|****|
# 10| |****| |****| | | |****|****|****|
# | |****| |****| |****| |****|****|****|
# 8| |****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 6| 100000| 100|0.70688592| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | |****| | | | | | | | |
# 12| |****| | | | | | | | |
# | |****| | |****| |****| | | |
# 10|****|****| |****|****| |****|****| |****|
# |****|****| |****|****|****|****|****|****|****|
# 8|****|****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 7| 100000| 100|0.99927969| WEAK
Here we have another test that had passed
in the first run
with about a 1 in 82 chance of a random sample being be more uniform,
which now has a result where that would be more like a 1 in 1388 chance.
Let's try it again with more psamples.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | |****| | | | | | |
# 24| |****| |****| | | | | | |
# |****|****| |****| | |****| | | |
# 20|****|****| |****| | |****|****| | |
# |****|****| |****|****|****|****|****| | |
# 16|****|****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 7| 100000| 200|0.81711466| PASSED
The do-over for this one immediately gives us a 1 in 5 result that
is no longer ambiguous. Let's see what the
next result of interest has to show us.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | |****| |
# |****| | | | | | | |****|****|
# 12|****| | | | | | | |****|****|
# |****| | |****| | | | |****|****|
# 10|****| | |****| | |****| |****|****|
# |****| |****|****|****| |****| |****|****|
# 8|****| |****|****|****|****|****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 6|****| |****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 8| 100000| 100|0.51303683| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14|****| | | | |****| | | | |
# |****| | | | |****| | | | |
# 12|****| | |****| |****| | | | |
# |****| |****|****| |****| |****|****| |
# 10|****| |****|****| |****|****|****|****| |
# |****| |****|****| |****|****|****|****| |
# 8|****|****|****|****| |****|****|****|****| |
# |****|****|****|****| |****|****|****|****| |
# 6|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 4|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 9| 100000| 100|0.74526431| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | |****| | | | | | | |
# 14| | |****| | | | | | | |
# | | |****| | | | |****| | |
# 12|****| |****|****| | | |****| | |
# |****| |****|****| | | |****| | |
# 10|****| |****|****| | | |****| | |
# |****|****|****|****|****|****|****|****| | |
# 8|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 6|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 10| 100000| 100|0.25103797| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | |****| |
# | | | |****| | | |****|****| |
# 12| | | |****| | | |****|****| |
# | |****| |****| | | |****|****| |
# 10| |****| |****|****| | |****|****| |
# |****|****|****|****|****| |****|****|****| |
# 8|****|****|****|****|****| |****|****|****| |
# |****|****|****|****|****| |****|****|****| |
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 11| 100000| 100|0.96575256| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | |****|
# | |****| | | | | | | |****|
# 12| |****|****| | | | | | |****|
# | |****|****| |****| | | | |****|
# 10| |****|****|****|****| | | | |****|
# | |****|****|****|****|****|****|****| |****|
# 8| |****|****|****|****|****|****|****| |****|
# |****|****|****|****|****|****|****|****| |****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_bitdist| 12| 100000| 100|0.86094488| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 140| | | | | | | | | | |
# | | | | | | | | | | |
# 126| | | | | | | | | | |
# | | | | | | | | | |****|
# 112| | | | | | | |****| |****|
# | |****| | | | | |****| |****|
# 98| |****| |****| | |****|****| |****|
# | |****|****|****| |****|****|****| |****|
# 84|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 70|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 56|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 42|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 28|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 14|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_minimum_distance| 2| 10000| 1000|0.34157944| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 120| | | | | | | | | | |
# | | | | | |****| | | | |
# 108|****| | | | |****| |****| | |
# |****|****|****| | |****| |****|****| |
# 96|****|****|****|****| |****| |****|****| |
# |****|****|****|****|****|****| |****|****| |
# 84|****|****|****|****|****|****| |****|****| |
# |****|****|****|****|****|****| |****|****| |
# 72|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 60|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 48|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 36|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_minimum_distance| 3| 10000| 1000|0.17554240| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 140| | | | | | | | | | |
# | | | | | | | | | | |
# 126| | | | | | | | | | |
# | | | | | | | | | |****|
# 112| | | | | | | | | |****|
# |****|****|****| | | | | | |****|
# 98|****|****|****|****|****| | | |****|****|
# |****|****|****|****|****| | | |****|****|
# 84|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 70|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 56|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 42|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 28|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 14|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_minimum_distance| 4| 10000| 1000|0.33189760| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 120| | | | | | | | | | |
# | | | | | | | | | | |
# 108| | | | |****| | |****| | |
# | | | | |****|****|****|****|****| |
# 96|****| | | |****|****|****|****|****|****|
# |****| |****|****|****|****|****|****|****|****|
# 84|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 72|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 60|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 48|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 36|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 24|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_minimum_distance| 5| 10000| 1000|0.21618336| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | |****|
# | | | | | | | | | |****|
# 14| | | | | | | | | |****|
# | | | | | | |****| | |****|
# 12| | | |****| | |****| | |****|
# |****| | |****| | |****| | |****|
# 10|****| | |****|****| |****| | |****|
# |****|****| |****|****| |****| | |****|
# 8|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 6|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_permutations| 2| 100000| 100|0.56311941| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | |****| |
# 16| | | | | | | | |****| |
# | | | | | | | | |****| |
# 14| | | | | | | | |****| |
# | | |****| | | | | |****| |
# 12| | |****| | | | | |****| |
# | | |****| |****| | | |****| |
# 10| | |****| |****| |****| |****|****|
# | |****|****| |****|****|****| |****|****|
# 8|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 6|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_permutations| 3| 100000| 100|0.45343600| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | |****| | | |
# | | | | | | |****| | | |
# 14| | | | | | |****| | | |
# | | | | | | |****| | | |
# 12| | | | |****| |****| | | |
# |****| | | |****| |****|****| | |
# 10|****| |****| |****| |****|****| |****|
# |****|****|****| |****| |****|****| |****|
# 8|****|****|****|****|****| |****|****| |****|
# |****|****|****|****|****|****|****|****| |****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_permutations| 4| 100000| 100|0.89833291| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | |****| | |****| | | |****|
# 12| | |****| |****|****| | | |****|
# | | |****| |****|****| | | |****|
# 10| | |****| |****|****|****| |****|****|
# | |****|****| |****|****|****| |****|****|
# 8| |****|****| |****|****|****|****|****|****|
# |****|****|****| |****|****|****|****|****|****|
# 6|****|****|****| |****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_permutations| 5| 100000| 100|0.77488531| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | |****| | | |
# | | | | | | |****| | | |
# 14| | | | | | |****| | | |
# | |****| | | | |****| | | |
# 12| |****| | | | |****|****|****| |
# | |****| | | | |****|****|****| |
# 10| |****|****| | |****|****|****|****| |
# | |****|****| | |****|****|****|****| |
# 8|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 6|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 4|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 0| 1000000| 100|0.37441192| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | |****| |
# | | | | | | | | |****| |
# 14| | | | | | | |****|****| |
# | | | | | | | |****|****| |
# 12| | | |****| | | |****|****| |
# | | | |****| | | |****|****| |
# 10| | |****|****| |****|****|****|****| |
# | | |****|****|****|****|****|****|****| |
# 8| | |****|****|****|****|****|****|****|****|
# | | |****|****|****|****|****|****|****|****|
# 6| |****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 1| 1000000| 100|0.12953400| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | |****|
# 16| | | | | | | | | |****|
# | | | | | | | | | |****|
# 14| | | | | | | | | |****|
# | | | | | | | | | |****|
# 12| | | |****| | | | | |****|
# | | | |****| |****| | | |****|
# 10| | | |****| |****| | |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 8|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 6|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 2| 1000000| 100|0.34024300| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | |****| | | | |
# | | | | | |****| |****| | |
# 12| | | | | |****| |****| | |
# | | | |****| |****| |****| | |
# 10|****|****| |****| |****|****|****| | |
# |****|****| |****|****|****|****|****|****| |
# 8|****|****|****|****|****|****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 3| 1000000| 100|0.93544305| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | |****| | | | | | | |
# | | |****| | | | | | |****|
# 14| | |****| | | | |****| |****|
# | | |****| | | | |****| |****|
# 12| | |****| | | | |****| |****|
# | | |****| | | | |****| |****|
# 10| | |****| | | | |****| |****|
# | | |****| |****|****| |****|****|****|
# 8| |****|****| |****|****| |****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 4| 1000000| 100|0.52884598| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | |****| | | |
# 12| |****| | | |****|****| | |****|
# | |****|****| | |****|****| | |****|
# 10| |****|****|****| |****|****| | |****|
# | |****|****|****|****|****|****| | |****|
# 8| |****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 5| 1000000| 100|0.98622259| PASSED
This test had returned a weak result in the
first run of Dieharder that
we did for this demo.
This time we have a 1 in 72 result at the same power that it was run
with in the initial test. Once again, not quite the most convincing
swing, but no longer an ambiguous result and nothing that more testing
can't resolve more comfortably if we're feeling suspicious about it
(which we always are, right?).
Before we look at the result of the second test that came up weak in
the first run, we have another test in the rgb_lagged_sum
series which came up weak this time, so let's have a look at the result
for ntuple 14 next.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | |****|
# 16| | | | | | | | | |****|
# | | | | | | | | | |****|
# 14| | | | | | | | | |****|
# | | | | | |****| | | |****|
# 12| | | | | |****| | |****|****|
# | | | | | |****| |****|****|****|
# 10| | |****| | |****| |****|****|****|
# | | |****|****| |****| |****|****|****|
# 8|****| |****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 6|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 6| 1000000| 100|0.10471873| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | |****| | | | | | | | |
# 18| |****| | | | | | | | |
# | |****| | | | | | | | |
# 16| |****| | | | | | | | |
# | |****| | | | | | | | |
# 14| |****| | | | | | | | |
# | |****| | | | | | | | |
# 12| |****| | | |****| | | | |
# | |****| | |****|****| | | | |
# 10|****|****| | |****|****| | | |****|
# |****|****| | |****|****| | |****|****|
# 8|****|****|****|****|****|****| | |****|****|
# |****|****|****|****|****|****| |****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 7| 1000000| 100|0.19629256| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | |****| | | | | |
# 14| | | | |****|****| | | | |
# | | | | |****|****| | | | |
# 12| | | | |****|****| |****| | |
# | | | |****|****|****| |****| | |
# 10| | | |****|****|****| |****| |****|
# | | | |****|****|****|****|****| |****|
# 8|****| |****|****|****|****|****|****| |****|
# |****| |****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 8| 1000000| 100|0.36729598| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | |****|
# | |****| | | | | | | |****|
# 14| |****| | | | | | | |****|
# | |****| | | | | | | |****|
# 12| |****| | | | | | | |****|
# | |****| |****| | | |****| |****|
# 10| |****| |****|****| | |****| |****|
# | |****| |****|****| |****|****| |****|
# 8|****|****| |****|****|****|****|****| |****|
# |****|****| |****|****|****|****|****| |****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 9| 1000000| 100|0.72212413| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# |****| | | |****| | | |****| |
# 12|****| | | |****| | | |****| |
# |****| | | |****| | | |****| |
# 10|****| | | |****| | |****|****|****|
# |****|****| | |****|****| |****|****|****|
# 8|****|****|****| |****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 10| 1000000| 100|0.79751779| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | |****| | |
# 14| |****| | | | | |****| | |
# | |****| | | | | |****| | |
# 12| |****| | | | |****|****| | |
# | |****| | |****| |****|****| |****|
# 10| |****| | |****|****|****|****| |****|
# | |****| | |****|****|****|****| |****|
# 8| |****|****| |****|****|****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 6| |****|****|****|****|****|****|****|****|****|
# | |****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 11| 1000000| 100|0.54303799| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | |****| | |
# 16| | | | | | | |****| | |
# | | | |****| | | |****| | |
# 14| | | |****| | | |****| | |
# | | |****|****| | | |****|****| |
# 12| | |****|****| | | |****|****| |
# | | |****|****| | | |****|****| |
# 10| | |****|****|****| | |****|****| |
# | | |****|****|****| | |****|****|****|
# 8| | |****|****|****| | |****|****|****|
# | | |****|****|****| |****|****|****|****|
# 6|****| |****|****|****| |****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 12| 1000000| 100|0.15229876| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | |****| | | | |
# 14| | | | | |****| |****| | |
# | | | | | |****| |****| | |
# 12| | | | | |****| |****| | |
# | | | | | |****|****|****| | |
# 10| | | | | |****|****|****|****| |
# | |****|****|****| |****|****|****|****| |
# 8|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 13| 1000000| 100|0.43618007| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | |****| | | | | | | |
# 12| | |****| | | | | | |****|
# |****| |****|****| | | | | |****|
# 10|****| |****|****| |****| | | |****|
# |****| |****|****|****|****|****|****| |****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 14| 1000000| 100|0.99800490| WEAK
This time we have a 1 in 501 chance result for this test. It was
unambiguous on the first run
with a 1 in 18 result, but let's
run it again with more psamples
and see what we get from a stronger test.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 40| | | | | | | | | | |
# | | | | | | | | | | |
# 36| | | | | | | | | | |
# | | | | | | | | | | |
# 32| | | | | | | | | | |
# | | | | | | | | | | |
# 28| | | | | | | | | | |
# | | | | | | | |****| | |
# 24|****| | | | | | |****| | |
# |****| | | | | | |****| | |
# 20|****| |****| | | |****|****| |****|
# |****| |****|****| |****|****|****|****|****|
# 16|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 12|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 14| 1000000| 200|0.86307747| PASSED
Repeating this one gives us a more plausible 1 in 7 result with the
stronger test.
So for this run, the only thing we have left to look at (taking for
granted that you've confirmed all the other test results looked ok) is
the new results for the second test which gave us a weak result in the
first Dieharder run. Let's look at the rgb_lagged_sum
ntuple 20 test.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | |****| |****| |****| |
# | | | | |****| |****| |****| |
# 10| |****| |****|****| |****|****|****|****|
# |****|****| |****|****| |****|****|****|****|
# 8|****|****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 15| 1000000| 100|0.79715210| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | |****| | | | |****|
# | | | | |****| | | | |****|
# 12| | | | |****| | | | |****|
# | | | | |****|****| | | |****|
# 10| |****|****| |****|****| |****|****|****|
# |****|****|****| |****|****| |****|****|****|
# 8|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 6|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 16| 1000000| 100|0.86703572| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | |****| | | | |
# 12| | |****| | |****| | | |****|
# | | |****| | |****| |****| |****|
# 10|****| |****| |****|****| |****|****|****|
# |****| |****| |****|****| |****|****|****|
# 8|****|****|****|****|****|****| |****|****|****|
# |****|****|****|****|****|****| |****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 17| 1000000| 100|0.87097033| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | |****|
# 16| | | | | | | | | |****|
# | | | | | | | | | |****|
# 14| | | | | | | | | |****|
# | | | |****| |****| | | |****|
# 12| | |****|****| |****| | | |****|
# | | |****|****| |****| | | |****|
# 10| | |****|****|****|****| | | |****|
# | | |****|****|****|****| | |****|****|
# 8| | |****|****|****|****| |****|****|****|
# | | |****|****|****|****| |****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 18| 1000000| 100|0.30242134| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | |****| | | | | | |
# | | | |****| | | | | | |
# 14| | | |****| | | | | | |
# | | | |****| |****| | | | |
# 12| | | |****| |****| | | | |
# | | | |****| |****|****| | | |
# 10| | | |****| |****|****|****| | |
# |****|****|****|****| |****|****|****| |****|
# 8|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****| |****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 19| 1000000| 100|0.96174109| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | |****| | | | | | |
# 14| | | |****| | | | | | |
# | | | |****|****| | | | | |
# 12| |****| |****|****| | | | |****|
# | |****|****|****|****| | | | |****|
# 10| |****|****|****|****| | | |****|****|
# | |****|****|****|****| | | |****|****|
# 8| |****|****|****|****| | |****|****|****|
# |****|****|****|****|****| | |****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 20| 1000000| 100|0.45423949| PASSED
This is the test that had returned the
second weak result
we saw in the first full run of Dieharder.
On the second attempt at the default power, we have a result which is
just slightly less uniform than what we'd expect on average. A series of
random samples would be expected to be either more or less uniform than
this in almost equal proportions.
Which is either good news or terrible news depending on how committed
you are to proving this source is really not random. By increasing the
power of tests which returned ambiguous weak results, we've obtained a
more certain result for all of them. Since none of them were pushed to
indicate a conclusive failure and all are now in the expected range of
probability, we've clearly failed to prove this source was bad. This
time. Which doesn't mean we won't be able to prove that with more runs,
or by increasing the power of all tests in subsequent runs. But we have
demonstrated that by applying just a small amount of real attention and
diligence to this testing, we can turn WEAK results, that we can't be
sure what they really mean, into a much clearer final outcome.
At first blush then, everything seems to be working roughly as we
might expect it would with a random source. We're getting some weak
results which show that improbable but not implausible outcomes do occur
as we would expect them to, and repeating those tests and increasing the
statistical power of them is showing that they are statistically plausible
and probably not a systemic bias in the stream, or at least not one that
could be detected in the number of samples tested here. It is a little
suspicious that the weak results we have seen in these runs have tended
to be on the more uniform side of probability, but whether that really is
statistically significant or also just chance would need more testing to
confirm. It may well be that disabling the folding did make this stream
less than ideally random, but the intuitive expectation we have is that
it would more probably make the stream less uniform rather than more so.
That said, it also wouldn't be the first thing that had subtly deviated
from naive intuition either – there really is no substitute for
detailed and careful testing of anything to do with this. In any case,
having only two runs like this is definitely not enough to make any firm
claim about the real quality of the source one way or another. We can
definitely say that it hasn't definitely failed this testing yet –
but that's very different to claiming that it has somehow
passed Dieharder
.
For completeness, let's have a look at a
third full test run, this time with
the hardware devices all running in their normal default mode.
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | |****| | |
# 12| |****|****| | | | |****|****| |
# | |****|****| | |****| |****|****|****|
# 10| |****|****| | |****| |****|****|****|
# |****|****|****| | |****| |****|****|****|
# 8|****|****|****| | |****|****|****|****|****|
# |****|****|****| |****|****|****|****|****|****|
# 6|****|****|****| |****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 21| 1000000| 100|0.83845666| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| |****| | | | | | | | |
# | |****| | | | | | | | |
# 12|****|****| | | | | | | | |
# |****|****| |****| | | | | |****|
# 10|****|****|****|****| | |****| | |****|
# |****|****|****|****|****| |****|****| |****|
# 8|****|****|****|****|****| |****|****|****|****|
# |****|****|****|****|****| |****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 22| 1000000| 100|0.34715866| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | |****| | | | | |
# 16| | | | |****| | | | | |
# | | | | |****| | | | | |
# 14| | | | |****| | | | | |
# | | | | |****| | | | | |
# 12| | | | |****|****| | |****| |
# | | | | |****|****| | |****|****|
# 10|****| | | |****|****| | |****|****|
# |****| | | |****|****| |****|****|****|
# 8|****|****| |****|****|****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 6|****|****| |****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 23| 1000000| 100|0.25385681| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | |****|
# 16| | | | | | | | | |****|
# | | | | | | | | | |****|
# 14| | |****| | | | | | |****|
# | | |****| | | | | | |****|
# 12| | |****| | |****| | | |****|
# | |****|****| | |****| | | |****|
# 10|****|****|****| | |****|****| | |****|
# |****|****|****| |****|****|****| | |****|
# 8|****|****|****|****|****|****|****| | |****|
# |****|****|****|****|****|****|****| |****|****|
# 6|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 4|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 24| 1000000| 100|0.65808843| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | |****| | | |****| |
# 14| | | | |****| | | |****| |
# | | | | |****|****| | |****| |
# 12| | | | |****|****| | |****| |
# | | | | |****|****| | |****| |
# 10| | |****| |****|****| |****|****| |
# |****| |****| |****|****| |****|****|****|
# 8|****| |****| |****|****| |****|****|****|
# |****| |****| |****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 25| 1000000| 100|0.22852471| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | |****| |
# | | | | | | | | |****| |
# 12| | | | | | | | |****| |
# |****| | |****| |****| | |****| |
# 10|****| |****|****| |****| | |****| |
# |****|****|****|****| |****|****|****|****| |
# 8|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 26| 1000000| 100|0.98188640| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | |****| | | | |
# 14| | | | | |****| | | | |
# | | | | | |****| | | | |
# 12| | | | | |****|****| | |****|
# | | | | | |****|****| | |****|
# 10|****|****| | | |****|****|****| |****|
# |****|****| | | |****|****|****| |****|
# 8|****|****|****|****| |****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 27| 1000000| 100|0.54879841| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | |****| |
# | | | | | | | | |****| |
# 14| | | | | |****| | |****| |
# | | | | | |****| | |****| |
# 12| | | | | |****| | |****| |
# |****| | | | |****|****| |****| |
# 10|****| | |****| |****|****| |****| |
# |****|****| |****| |****|****| |****| |
# 8|****|****|****|****| |****|****|****|****| |
# |****|****|****|****|****|****|****|****|****| |
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 28| 1000000| 100|0.81148158| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | |****| |
# 14| | | | | | | | |****| |
# | | | | | |****| | |****| |
# 12| | | | | |****| | |****| |
# | | |****|****| |****| | |****| |
# 10| |****|****|****| |****| |****|****|****|
# | |****|****|****| |****| |****|****|****|
# 8| |****|****|****| |****|****|****|****|****|
# | |****|****|****| |****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 29| 1000000| 100|0.78300475| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | |****| | | | | |
# | | | | |****| | | | | |
# 14| | | | |****| | | | | |
# | | | |****|****| | | | | |
# 12| | | |****|****| | | | | |
# | |****| |****|****| | | | | |
# 10| |****|****|****|****| |****|****|****| |
# | |****|****|****|****| |****|****|****| |
# 8| |****|****|****|****| |****|****|****| |
# | |****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 30| 1000000| 100|0.65394688| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | |****|
# 16| | | | | | | | | |****|
# | | | | | | | | | |****|
# 14|****| | | | | | | | |****|
# |****| |****| | | | | |****|****|
# 12|****| |****|****| | | | |****|****|
# |****| |****|****| | | | |****|****|
# 10|****| |****|****| | | | |****|****|
# |****| |****|****| | | | |****|****|
# 8|****|****|****|****| | |****| |****|****|
# |****|****|****|****|****| |****| |****|****|
# 6|****|****|****|****|****| |****| |****|****|
# |****|****|****|****|****|****|****| |****|****|
# 4|****|****|****|****|****|****|****| |****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 31| 1000000| 100|0.16125920| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | |****|
# | | | | | | | | | |****|
# 14| | | | | | | | | |****|
# |****| | | | | | | | |****|
# 12|****| | | | | | | | |****|
# |****| | | | | | | | |****|
# 10|****| |****| | |****| |****|****|****|
# |****| |****| | |****| |****|****|****|
# 8|****| |****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 6|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 4|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 2|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_lagged_sum| 32| 1000000| 100|0.78514355| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 140| | | | | | | | | | |
# | | | | | | | | | | |
# 126| | | | | | | | | | |
# | | | | | |****| |****| | |
# 112| | | | | |****| |****| | |
# | |****| | | |****| |****| |****|
# 98| |****| | |****|****| |****| |****|
# |****|****| |****|****|****| |****| |****|
# 84|****|****| |****|****|****|****|****|****|****|
# |****|****| |****|****|****|****|****|****|****|
# 70|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 56|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 42|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 28|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# 14|****|****|****|****|****|****|****|****|****|****|
# |****|****|****|****|****|****|****|****|****|****|
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
rgb_kstest_test| 0| 10000| 1000|0.12175624| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | | | | | | | |
# | | | | | | | | | | |
# 10| | | | | | | | | | |
# | | | | | | | | | | |
# 8| | | | | | | | | | |
# | | | | | | | | | | |
# 6| | | | | | | | | | |
# | | | | | | | | | | |
# 4| | | | | | | | | | |
# | | | | | | | | | | |
# 2| | | | | | | | | | |
# | |****| | | | | | | | |
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
dab_bytedistrib| 0| 51200000| 1|0.15128334| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | | | | | | | |
# | | | | | | | | | | |
# 10| | | | | | | | | | |
# | | | | | | | | | | |
# 8| | | | | | | | | | |
# | | | | | | | | | | |
# 6| | | | | | | | | | |
# | | | | | | | | | | |
# 4| | | | | | | | | | |
# | | | | | | | | | | |
# 2| | | | | | | | | | |
# | | |****| | | | | | | |
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
dab_dct| 256| 50000| 1|0.27991241| PASSED
Preparing to run test 207. ntuple = 0
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | | | | | | | |
# | | | | | | | | | | |
# 10| | | | | | | | | | |
# | | | | | | | | | | |
# 8| | | | | | | | | | |
# | | | | | | | | | | |
# 6| | | | | | | | | | |
# | | | | | | | | | | |
# 4| | | | | | | | | | |
# | | | | | | | | | | |
# 2| | | | | | | | | | |
# | | | | | | | |****| | |
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
dab_filltree| 32| 15000000| 1|0.76647424| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | | | | | | | |
# | | | | | | | | | | |
# 10| | | | | | | | | | |
# | | | | | | | | | | |
# 8| | | | | | | | | | |
# | | | | | | | | | | |
# 6| | | | | | | | | | |
# | | | | | | | | | | |
# 4| | | | | | | | | | |
# | | | | | | | | | | |
# 2| | | | | | | | | | |
# | | | |****| | | | | | |
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
dab_filltree| 32| 15000000| 1|0.35468712| PASSED
Preparing to run test 208. ntuple = 0
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | | | | | | | |
# | | | | | | | | | | |
# 10| | | | | | | | | | |
# | | | | | | | | | | |
# 8| | | | | | | | | | |
# | | | | | | | | | | |
# 6| | | | | | | | | | |
# | | | | | | | | | | |
# 4| | | | | | | | | | |
# | | | | | | | | | | |
# 2| | | | | | | | | | |
# | | | | | | | | |****| |
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
dab_filltree2| 0| 5000000| 1|0.87398987| PASSED
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | | | | | | | |
# | | | | | | | | | | |
# 10| | | | | | | | | | |
# | | | | | | | | | | |
# 8| | | | | | | | | | |
# | | | | | | | | | | |
# 6| | | | | | | | | | |
# | | | | | | | | | | |
# 4| | | | | | | | | | |
# | | | | | | | | | | |
# 2| | | | | | | | | | |
# | | | |****| | | | | | |
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
dab_filltree2| 1| 5000000| 1|0.33227287| PASSED
Preparing to run test 209. ntuple = 0
#===================================================================#
# Histogram of test p-values #
#===================================================================#
# Bin scale = 0.100000
# 20| | | | | | | | | | |
# | | | | | | | | | | |
# 18| | | | | | | | | | |
# | | | | | | | | | | |
# 16| | | | | | | | | | |
# | | | | | | | | | | |
# 14| | | | | | | | | | |
# | | | | | | | | | | |
# 12| | | | | | | | | | |
# | | | | | | | | | | |
# 10| | | | | | | | | | |
# | | | | | | | | | | |
# 8| | | | | | | | | | |
# | | | | | | | | | | |
# 6| | | | | | | | | | |
# | | | | | | | | | | |
# 4| | | | | | | | | | |
# | | | | | | | | | | |
# 2| | | | | | | | | | |
# | | | | | | | | |****| |
# |--------------------------------------------------
# | 0.1| 0.2| 0.3| 0.4| 0.5| 0.6| 0.7| 0.8| 0.9| 1.0|
#===================================================================#
#===================================================================#
test_name |ntup| tsamples |psamples| p-value |Assessment
#===================================================================#
dab_monobit2| 12| 65000000| 1|0.85768229| PASSED
Compare this to the Test 3 results.