[PATCH] Total io size / eta fix

Inadvertently the files were counted twice, hence ETA ended at 50%.
This was also the real bug for the verify ETA fixed a few days ago,
so reinstate the proper check when doing verifies as well.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Fix a bunch of bugs

- engines/fio-engine-libaio.o needs to link against -laio and fio need not
  anymore. This caused funky crashes with libaio io engine.

- Fix a few bugs in the libaio engine.

- Only do sync/cleanup in do_io() if we exit without error.

- ->io_ops may be NULL in reap_threads(), if the job exited.

- Allocate io engine, don't reuse the dlopen() object.

- Overlapping sprintf() in init_disk_util().

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

Merge branch 'master' of ssh://router/data/git/fio

[PATCH] Make io engines -W clean

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Make fio -W clean again

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Sync and invalidate cache prior to running verify

Make sure we re-read the contents from disk, not from memory.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] More verify code move

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Split out the verify io parts

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Split status/eta code out of fio.c

All in the name of making the code base easier to go through.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Cleanup the io engine methods

Always use td_io_#name so that it's clear that we are calling
into the io engine.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Verify eta time fix

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] mmap: fix bug introduced with the io engine split

We never initialized the mmap area, because it forgot
to get FIO_MMAPIO.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Add support for unlinking io files

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH Various fixes

- Multiple files fixes
- Fix for unaligned io issued for raw io

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] First cut at supporting > 1 file per job

This is likely very buggy, a simple test works though.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] engines/Makefile should use -g as well

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Fix segfault if ioengine isn't set

Don't do it in the ioengine_cb callback, it needs to be done
unconditionally.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Allow io engine to do the file setup

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Don't hardcode ioengine path

Use the prefix in the Makefile, so it can be packaged properly.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] engines/Makefile had extra LIBS line

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Remember to check ioops version in loaded module

It could be for an older version of fio, reject failed version.

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Fixup failure to load io engine object logging

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Separate io engines into separate loadable objects

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Fix compile on hosts that have the splice stuff included

Newer distros (FC6-test3 at least) do have the splice syscall and
flag definitions, so check for that in os-linux.h

Signed-off-by: Jens Axboe <jens.axboe@oracle.com>

[PATCH] Basic support for a cpu cycle eater job

This will allow you to put some cpu load on the box, while other
threads are doing IO.

[PATCH] email update

[PATCH] Correct command line parsing

It worked if you used -t10, but not -t 10. Correct the idx++ usage to
just match optind instead, then things just work.

Problem reported by "Randy.Dunlap" <rdunlap@xenotime.net>

[PATCH] Drop "-f jobfile" from usage help

[PATCH] libaio returns long, not int

[PATCH] Only print eta when we have nr_running > 0

[PATCH] Use lstat() instead of stat() in sysfs lookup

Otherwise we cannot detect the symlinks, and the directory
lookup will get into an infinite loop.

[PATCH] Fix timout variable setting

By mistake, it assigned the temporary timeout to ull, but
set ->timeout to ul1.

[PATCH] Fixup nice() return value and duplicate volatiles

[PATCH] Get _syscallX() functions from <linux/unistd.h>

[PATCH] Remove redundant -f job option

It just confuses the job file setup.

[PATCH] Stonewalling wasn't properly done in some circumstances

We don't want to stonewall individual jobs in a file, but that
happened inadvertently with the multi file change. Get it right,
stonewall the first job in all files except the first.

[PATCH fio-1.5

[PATCH] Various little fixes and lots of commenting

[PATCH] Remove last remnants of file extending

[PATCH] Always create full file, don't extend

[PATCH] Pass full required size into create_file()

[PATCH] Fix non-overwrite bug

[PATCH] Add option for terse parseable output

[PATCH] Don't hide submission latency numbers, even if they are 0.

[PATCH] Check and error for graph generation if gnuplot isn't available

[PATCH] Update usage() text to match options

[PATCH] Remove the old job command line options

It's all possible to specify in the job file.

[PATCH] Make it easier to match up filename and job number

[PATCH] Misc: stall progress ouput during file creation, ini_file frees.

[PATCH] Add support for giving multiple job files

[PATCH] Documentation updates

[PATCH] When logging to a file, stderr should go both to stderr and file

[PATCH] Enable output logging to file instead of stdout

[PATCH] Also print pending string if some threads have yet to run

[PATCH] Improve run_str[] updates and printing

[PATCH] Note when thread is fsyncing

[PATCH] Docu update

[PATCH] Remember to define OS_O_DIRECT to OS type if available

[PATCH] Compile and works on OpenSolaris (tested on BeleniX)

[PATCH] Let thread exit cleanup the small allocs

Makes it easier to just inherit the allocations.

[PATCH] 'parent' is always set in get_new_job()

So just inherit everything with a structure copy, clear/set unrelated
or allocated fields.

[PATCH] Warn on conflicting read/write iolog

[PATCH] rwmix seed got broken with random abstraction, fixup

[PATCH] Broken write_iolog option if iolog given

We don't want to reject the option as bad, just ignore it.

[PATCH] fio.h is missing unistd.h include

[PATCH] Cleanups and 'td' size reduction

[PATCH] Easy process shared semaphores

We really need a pshared semaphore, but those aren't always available.
Just implement a cruddy local semaphore type, fio only really needs
to signal start/stop conditions.

[PATCH] Final FreeBSD compile fixups

It actually builds now!

[PATCH] OS abstract out the random seed and value retrieval

This is pretty crappy on FreeBSD, the seed function doesn't seed the
state we want. But it works, so it'll have to suffice for now...

[PATCH] Get closer to FreeBSD compile

[PATCH] Guard ioscheduler= option with FIO_HAVE_IOSCHED_SWITCH

[PATCH] More function moving

[PATCH] ini parser user friendliness

[PATCH] Bad option clarifications (dump supported types)

[PATCH] Convert some options to use check_strstore() if they only dupe the arg

[PATCH] Add name=x option to name jobs

This makes it easier to see what is going on with large job files.

[PATCH] Shorten the file names, stupid to prefix everything with fio-

[PATCH] Juggle some includes, add cscope make target

[PATCH] Split up fio.c into log/stat/time parts

[PATCH] Change logging unit from MiB to KiB

[PATCH] Aggregate bandwidth off-by 1.024

[PATCH] Cleanup allocation frees on exit

[PATCH] Add ioscheduler=x option to allow setting io scheduler

[PATCH] Add exec_prerun/exec_postrun options

Allows one to specify a command line program to run before and
after job io has finished.

[PATCH] Dynamically allocate the big filename entries in td

[PATCH] Remove debug printf() in read/write_iolog setup

[PATCH] Add link to Pascal's RPM repository

[PATCH] Fio 1.4

[PATCH] Fixup merge error

Merge branch 'master' of ssh://router/data/git/fio

Conflicts:

fio.h

[PATCH] Add support for specifying job nice value with nice=x

[PATCH] Add support for specifying read/write mix workloads better

Added options:

- rwmixcycle=x, use x msecs as the cycle period for read/write switches
- rwmixread=x, x% of ios will be reads
- rwmixwrite=x, x% of ios will be writes

Last given of the latter two will override the first.

[PATCH] Add write_iolog support

[PATCH] More 32-bit fixes (unsigned long -> unsigned long long conversions)

[PATCH] Fix random io truncate on 32-bit archs

[PATCH] Introduce an extra runstate for monitoring thread startup

This way we can detect whether a thread is hanging in init, and take
it down after a timeout. This would have caught the /dev/random
problems fixed yesterday.

Also limit the Client message printed at the beginnig, to only show
the first and last of identical job types instead of everything
in between.

[PATCH] Fixup stat queue file read

Apparently a stat file got added to the partition directory as
well, which broke the lookup.

[PATCH] Use /dev/urandom instead of /dev/random

We are not cryptographic software, and with many threads it's
actually possible to run out of entropy.

[PATCH] Don't allow mlock of more than real_mem-128MiB

[PATCH] Use mmap for mlocked memory