Fio 1.27.4

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Remove a reference check

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

File close fixes

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Merge branch 'master' of ssh://router/data/git/fio

More documentation updates

fio.1 should now be in sync with HOWTO.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Documentation update

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.27.3

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix slat numbers

After commit 306ddc9752eef70c3fbb111af63d197a3a6d447f, it was logging
the blocksize since arguments 3 and 4 were switched.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix bad min rate check

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

parser: get rid of FIO_OPT_STR_VAL_INT

It's treated the same as FIO_OPT_INT since we got rid of the
int vs siint distinction.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Use __e for errno

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.27.2

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix problem with too many opened files

If using raw block devices, we would leak the fd from the bdev_size()
function. Also add some debug triggers to catch this in the future.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Bad indent

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix fd leak in cache line checking

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Missed int to pointer conversion check for ->ratemin

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Merge branch 'master' of ssh://router/data/git/fio

Add support for limiting only rate in only one direction

So now you can say 'limit writes to 10MB/sec' and have reads go
full throttle, for instance.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix bug in parser with postfix and truncated direction values

If you pass in foo=500k, then the 'k' multiplier will go unnoticed.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.27.1

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix fill_device with read/randread

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Move td_* ddir defines

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add pre_read to man page

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.27

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Improve throughput ETA display

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add iops rate to ETA display

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix bug with rwmix and multiple loops over the same set

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

More fio.h cleanups

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Split off diskutil include

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Move file service type defines to file.h

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add iolog defines

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Move IO engine flags

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add ioengine.h header

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Move more file stuff to file.h

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Cleanup verify headers

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Clean up file flags

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix problem with fill_device and read workloads

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Make pre_read imply invalidate=0

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

mmap engine: don't invalidate cache on segment remap

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

mmap engine: remove 'mmap too large' check for 32-bit

We now support large files regardless of architecture, so just kill
the check again.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

mmap engine: allow large files on 32-bit archs

Map chunks of 2GB at the time in total, remapping as we go
along.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio man page still refers to old mailing list

Point it at the vger list instead.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix problem with fadvise() and fill_device option

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Merge branch 'master' of ssh://router/data/git/fio

Increase accuracy of disk utility percentage

If a job file contains more than one job that works on separate
disks, then the job that finishes first will get more idle time
accounted to it.

Fix this by only doing disk util stats when we have files open
on that device.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Remove io_u->endpos

It's only set in one location and never read.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Make sure that exec_prerun/postrun work for shell commands

Pass the arguments to sh for execution.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix old printf() in pre_read()

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.26.4

pre_read option was buggy, so tag a new release now.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

pre_read fixes

1) Add a specific runstate for pre-read, so we can see that this
   is what the job is currently doing.
2) open/close files for pre-read

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.26.3

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add fio_generate_plots.1 man page from debian package

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

man page fix to make lintian happy

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add pre_read option

With this option set, files will be pre-read into memory before
starting the given IO operation(s).

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add appropriate warning in mmap engine for large maps failing

On 32-bit archs, this can trigger for large files. This should be fixed by
mapping lazily, for now just catch the error.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Clear f on error get_next_file_rr()

Otherwise we could return an invalid non-open file and trigger and
assertion failure later in the process.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Return EILSEQ on verify errors instead of EIO

Suggested by Randy Dunlap <randy.dunlap@oracle.com>

This makes it easier to differentiate between an error to read/write
from disk versus getting the wrong data back.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Include transfer size in the clat/slat measurements

It's useful to know the block size that matches the given latency, so
add that to the end.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix garbling of clat/slat logs if a shared log file is used

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Merge branch 'master' of ssh://router/data/git/fio

fio howto typo fixes

Fix a few typos in the fio HOWTO file.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

fio docs corrections

Correct fio mailing list address and unit of time for cpuchunks.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

net engine: fix compilation warnings on Solaris

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.26.2

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Merge branch 'master' of ssh://brick.kernel.dk/data/git/fio

'V' is a running state, not an idle state. Correct HOWTO.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Align io units to processor cache line size

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix name of the slat log file

Currently the slat and clat logs go to the same clat log file when the
latency log file is specified.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Don't populate random data for verify reads

I was seeing some performance drop during the read verification phase
of a test, and from the code in io_u.c in get_io_u function, we
prepare/populate the buffer in the io_u structure based on the verify
patterns/options.
This makes sense when we are doing writes, but I dont understand why
we do this for the read phase when this data is going to be
overwritten anyways(and in case of truncated reads, we do modify the
buf_len).
So based on that I changed the code to populate the buffer(io_u->buf)
only if its a write with verify enabled.
This works for my tests, but I do not know if there was a reason why
this was populated for reads as well to begin with.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.26.1

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Filename must be parsed after directory option

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Update bssplit documentation in fio.1

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

fio: Include support for ARM

Assembly instructions picked from include/asm-arm/system.h

Signed-off-by: Kedar Sovani <kedars@marvell.com>
Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.26

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add sample job for doing a quick SSD performance analysis

Nothing SSD special about it really, but this sort of test is
useful on SSD drives to see if they are crap or not.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix issue with random offset being off if io_size != real_file_size

get_next_free_block() would generate offset that were larger than the
requested size, either causing failures or just causing the test
to exit prematurely.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Remove debug printf()

Left in by mistake.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add support for different weights for reads and writes with bssplit

You can now do:

bssplit=4k/20:8k/80,1k/50:4k/50

To have 20% 4k reads and 80% 8k reads, while having 50% 1k writes
and 50% 4k writes. This is identical to how the bs= option treats
reads and writes.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Allow IO logging even for diskless engines

Helps to verify IO patterns.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

splice engine: fix vmsplice() problem with block sizes larger than a pipe

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.25.2

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix throughput reporting

It was off by 1024/1024 :/

Initial patch from Carl Henrik Lunde <chlunde@ping.uio.no>

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix crash with multiple files

There's an off-by-one in add_file() when it calculates the size
for the file array.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.25.1

Silly segfault with cpuio/null engines.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Merge branch 'master' of ssh://brick.kernel.dk/data/git/fio

Use td_io_get_file_size() instead of calling ->get_file_size()

It may be NULL on some engines, causing a crash.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fio 1.25

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Reseed random generator for loop/time based runs

Then we get repeatable 2nd/3rd/etc runs. This is important
if the file layout was random, otherwise subsequent runs will
get very different results.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

File reset should clear random map as well

Fixes infinite loop on time based runs, where it repeatedly
fails getting a new offset.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Merge branch 'master' of ssh://router/data/git/fio

aio: fixed a signedness issue that could cause abort on strace

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add some missing options to the man page

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Man page typo on zero_buffers

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add blockalign/ba option

Allows the job to specify alignment of the IO specifically, instead
of relying on using blocksize as the offset alignment.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix integer store bug in parser

With commit f7fa2653589f9ecf0d3d106286f17620bcf32de0 I forgot to check
the type, so we would mis-store on platforms where sizeof(int) is different
from sizeof(long).

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Add some missing options to the man page

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Get rid of int vs siint difference

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Update HOWTO with 0x base for siint

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Allow 0x (or 0X) prefix for any int value to indicate hex base

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Fix failure to strip end of line with comment

We left a space at the end, which confused the postfix checking.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>