Add strong madvise() hint for cache pruning
[fio.git] / engines / guasi.c
index 04215a2f16028f0e3bcf7282ca5be463e1d47b40..15d4801ad2ae1f37d9710d02254acb61d67a7bda 100644 (file)
@@ -3,9 +3,12 @@
  *
  * IO engine using the GUASI library.
  *
- * This is currently disabled, add -lguasi to the fio Makefile target
- * and add a #define FIO_HAVE_GUASI to os-linux.h to enable it. You'll
- * need the GUASI lib as well:
+ * This is currently disabled. To enable it, execute:
+ *
+ * $ export EXTFLAGS="-DFIO_HAVE_GUASI"
+ * $ export EXTLIBS="-lguasi"
+ *
+ * before running make. You'll need the GUASI lib as well:
  *
  * http://www.xmailserver.org/guasi-lib.html
  *
 #include <assert.h>
 
 #include "../fio.h"
-#include "../os.h"
 
 #ifdef FIO_HAVE_GUASI
 
 #define GFIO_MIN_THREADS 32
+#ifndef GFIO_MAX_THREADS
+#define GFIO_MAX_THREADS 2000
+#endif
 
 #include <guasi.h>
 #include <guasi_syscalls.h>
 #define GDBG_PRINT(a) (void) 0
 #endif
 
-#define STFU_GCC(a) a = a
-
-
 struct guasi_data {
        guasi_t hctx;
        int max_reqs;
        guasi_req_t *reqs;
        struct io_u **io_us;
+       int queued_nr;
        int reqs_nr;
 };
 
 static int fio_guasi_prep(struct thread_data fio_unused *td, struct io_u *io_u)
 {
-       STFU_GCC(io_u);
 
        GDBG_PRINT(("fio_guasi_prep(%p)\n", io_u));
+       io_u->greq = NULL;
 
        return 0;
 }
@@ -60,7 +63,7 @@ static struct io_u *fio_guasi_event(struct thread_data *td, int event)
 
        GDBG_PRINT(("fio_guasi_event(%d)\n", event));
        if (guasi_req_info(ld->reqs[event], &rinf) < 0) {
-               fprintf(stderr, "guasi_req_info(%d) FAILED!\n", event);
+               log_err("guasi_req_info(%d) FAILED!\n", event);
                return NULL;
        }
        io_u = rinf.asid;
@@ -83,11 +86,11 @@ static struct io_u *fio_guasi_event(struct thread_data *td, int event)
        return io_u;
 }
 
-static int fio_guasi_getevents(struct thread_data *td, int min, int max,
-                              struct timespec *t)
+static int fio_guasi_getevents(struct thread_data *td, unsigned int min,
+                              unsigned int max, struct timespec *t)
 {
        struct guasi_data *ld = td->io_ops->data;
-       int n = 0, r;
+       int n, r;
        long timeo = -1;
 
        GDBG_PRINT(("fio_guasi_getevents(%d, %d)\n", min, max));
@@ -97,14 +100,21 @@ static int fio_guasi_getevents(struct thread_data *td, int min, int max,
                max = ld->max_reqs;
        if (t)
                timeo = t->tv_sec * 1000L + t->tv_nsec / 1000000L;
+       for (n = 0; n < ld->reqs_nr; n++)
+               guasi_req_free(ld->reqs[n]);
+       n = 0;
        do {
-               r = guasi_fetch(ld->hctx, ld->reqs + n, max - n, timeo);
-               if (r < 0)
+               r = guasi_fetch(ld->hctx, ld->reqs + n, min - n,
+                               max - n, timeo);
+               if (r < 0) {
+                       log_err("guasi_fetch() FAILED! (%d)\n", r);
                        break;
+               }
                n += r;
                if (n >= min)
                        break;
        } while (1);
+       ld->reqs_nr = n;
        GDBG_PRINT(("fio_guasi_getevents() -> %d\n", n));
 
        return n;
@@ -114,24 +124,33 @@ static int fio_guasi_queue(struct thread_data *td, struct io_u *io_u)
 {
        struct guasi_data *ld = td->io_ops->data;
 
+       fio_ro_check(td, io_u);
+
        GDBG_PRINT(("fio_guasi_queue(%p)\n", io_u));
-       if (ld->reqs_nr == (int) td->iodepth)
+       if (ld->queued_nr == (int) td->o.iodepth)
                return FIO_Q_BUSY;
 
-       ld->io_us[ld->reqs_nr] = io_u;
-       ld->reqs_nr++;
+       ld->io_us[ld->queued_nr] = io_u;
+       ld->queued_nr++;
        return FIO_Q_QUEUED;
 }
 
-static void fio_guasi_queued(struct thread_data *td, struct io_u **io_us,
-                            unsigned int nr)
+static void fio_guasi_queued(struct thread_data *td, struct io_u **io_us, int nr)
 {
+       int i;
+       struct io_u *io_u;
        struct timeval now;
-       struct io_u *io_u = io_us[nr];
 
+       if (!fio_fill_issue_time(td))
+               return;
+
+       io_u_mark_submit(td, nr);
        fio_gettime(&now, NULL);
-       memcpy(&io_u->issue_time, &now, sizeof(now));
-       io_u_queued(td, io_u);
+       for (i = 0; i < nr; i++) {
+               io_u = io_us[i];
+               memcpy(&io_u->issue_time, &now, sizeof(now));
+               io_u_queued(td, io_u);
+       }
 }
 
 static int fio_guasi_commit(struct thread_data *td)
@@ -141,9 +160,10 @@ static int fio_guasi_commit(struct thread_data *td)
        struct io_u *io_u;
        struct fio_file *f;
 
-       GDBG_PRINT(("fio_guasi_commit()\n"));
-       for (i = 0; i < ld->reqs_nr; i++) {
+       GDBG_PRINT(("fio_guasi_commit(%d)\n", ld->queued_nr));
+       for (i = 0; i < ld->queued_nr; i++) {
                io_u = ld->io_us[i];
+               GDBG_PRINT(("fio_guasi_commit(%d) --> %p\n", i, io_u));
                f = io_u->file;
                io_u->greq = NULL;
                if (io_u->ddir == DDIR_READ)
@@ -154,42 +174,50 @@ static int fio_guasi_commit(struct thread_data *td)
                        io_u->greq = guasi__pwrite(ld->hctx, ld, io_u, 0,
                                                   f->fd, io_u->xfer_buf, io_u->xfer_buflen,
                                                   io_u->offset);
-               else if (io_u->ddir == DDIR_SYNC)
+               else if (ddir_sync(io_u->ddir))
                        io_u->greq = guasi__fsync(ld->hctx, ld, io_u, 0, f->fd);
                else {
-                       fprintf(stderr, "fio_guasi_commit() FAILED: unknow request %d\n",
+                       log_err("fio_guasi_commit() FAILED: unknow request %d\n",
                                io_u->ddir);
                }
-               if (io_u->greq != NULL)
-                       fio_guasi_queued(td, ld->io_us, i);
+               if (io_u->greq == NULL) {
+                       log_err("fio_guasi_commit() FAILED: submit failed (%s)\n",
+                               strerror(errno));
+                       return -1;
+               }
        }
-       ld->reqs_nr = 0;
+       fio_guasi_queued(td, ld->io_us, i);
+       ld->queued_nr = 0;
        GDBG_PRINT(("fio_guasi_commit() -> %d\n", i));
 
        return 0;
 }
 
-static int fio_guasi_cancel(struct thread_data *td, struct io_u *io_u)
+static int fio_guasi_cancel(struct thread_data fio_unused *td,
+                           struct io_u *io_u)
 {
-       struct guasi_data *ld = td->io_ops->data;
+       GDBG_PRINT(("fio_guasi_cancel(%p) req=%p\n", io_u, io_u->greq));
+       if (io_u->greq != NULL)
+               guasi_req_cancel(io_u->greq);
 
-       STFU_GCC(ld);
-       GDBG_PRINT(("fio_guasi_cancel(%p)\n", io_u));
-
-       return guasi_req_cancel(io_u->greq);
+       return 0;
 }
 
 static void fio_guasi_cleanup(struct thread_data *td)
 {
        struct guasi_data *ld = td->io_ops->data;
+       int n;
 
+       GDBG_PRINT(("fio_guasi_cleanup(%p)\n", ld));
        if (ld) {
+               for (n = 0; n < ld->reqs_nr; n++)
+                       guasi_req_free(ld->reqs[n]);
                guasi_free(ld->hctx);
                free(ld->reqs);
                free(ld->io_us);
                free(ld);
-               td->io_ops->data = NULL;
        }
+       GDBG_PRINT(("fio_guasi_cleanup(%p) DONE\n", ld));
 }
 
 static int fio_guasi_init(struct thread_data *td)
@@ -197,22 +225,25 @@ static int fio_guasi_init(struct thread_data *td)
        int maxthr;
        struct guasi_data *ld = malloc(sizeof(*ld));
 
-       GDBG_PRINT(("fio_guasi_init(): depth=%d\n", td->iodepth));
+       GDBG_PRINT(("fio_guasi_init(): depth=%d\n", td->o.iodepth));
        memset(ld, 0, sizeof(*ld));
-       maxthr = td->iodepth > GFIO_MIN_THREADS ? td->iodepth: GFIO_MIN_THREADS;
+       maxthr = td->o.iodepth > GFIO_MIN_THREADS ? td->o.iodepth: GFIO_MIN_THREADS;
+       if (maxthr > GFIO_MAX_THREADS)
+               maxthr = GFIO_MAX_THREADS;
        if ((ld->hctx = guasi_create(GFIO_MIN_THREADS, maxthr, 1)) == NULL) {
                td_verror(td, errno, "guasi_create");
                free(ld);
                return 1;
        }
-       ld->max_reqs = td->iodepth;
+       ld->max_reqs = td->o.iodepth;
        ld->reqs = malloc(ld->max_reqs * sizeof(guasi_req_t));
        ld->io_us = malloc(ld->max_reqs * sizeof(struct io_u *));
        memset(ld->io_us, 0, ld->max_reqs * sizeof(struct io_u *));
+       ld->queued_nr = 0;
        ld->reqs_nr = 0;
 
        td->io_ops->data = ld;
-       GDBG_PRINT(("fio_guasi_init(): depth=%d -> %p\n", td->iodepth, ld));
+       GDBG_PRINT(("fio_guasi_init(): depth=%d -> %p\n", td->o.iodepth, ld));
 
        return 0;
 }
@@ -230,6 +261,7 @@ static struct ioengine_ops ioengine = {
        .cleanup        = fio_guasi_cleanup,
        .open_file      = generic_open_file,
        .close_file     = generic_close_file,
+       .get_file_size  = generic_get_file_size,
 };
 
 #else /* FIO_HAVE_GUASI */