t/io_uring: add support for registered files
[fio.git] / os / io_uring.h
1 /* SPDX-License-Identifier: GPL-2.0 WITH Linux-syscall-note */
2 /*
3  * Header file for the io_uring interface.
4  *
5  * Copyright (C) 2019 Jens Axboe
6  * Copyright (C) 2019 Christoph Hellwig
7  */
8 #ifndef LINUX_IO_URING_H
9 #define LINUX_IO_URING_H
10
11 #include <linux/fs.h>
12 #include <linux/types.h>
13
14 /*
15  * IO submission data structure (Submission Queue Entry)
16  */
17 struct io_uring_sqe {
18         __u8    opcode;         /* type of operation for this sqe */
19         __u8    flags;          /* IOSQE_ flags below */
20         __u16   ioprio;         /* ioprio for the request */
21         __s32   fd;             /* file descriptor to do IO on */
22         __u64   off;            /* offset into file */
23         union {
24                 void    *addr;  /* buffer or iovecs */
25                 __u64   __pad;
26         };
27         __u32   len;            /* buffer size or number of iovecs */
28         union {
29                 __kernel_rwf_t  rw_flags;
30                 __u32           __resv;
31         };
32         __u16   buf_index;      /* index into fixed buffers, if used */
33         __u16   __pad2[3];
34         __u64   data;           /* data to be passed back at completion time */
35 };
36
37 /*
38  * sqe->flags
39  */
40 #define IOSQE_FIXED_BUFFER      (1 << 0)        /* use fixed buffer */
41 #define IOSQE_FIXED_FILE        (1 << 1)        /* use fixed fileset */
42
43 /*
44  * io_uring_setup() flags
45  */
46 #define IORING_SETUP_IOPOLL     (1 << 0)        /* io_context is polled */
47 #define IORING_SETUP_SQPOLL     (1 << 1)        /* SQ poll thread */
48 #define IORING_SETUP_SQ_AFF     (1 << 2)        /* sq_thread_cpu is valid */
49
50 #define IORING_OP_READV         1
51 #define IORING_OP_WRITEV        2
52 #define IORING_OP_FSYNC         3
53 #define IORING_OP_FDSYNC        4
54
55 /*
56  * IO completion data structure (Completion Queue Entry)
57  */
58 struct io_uring_cqe {
59         __u64   data;           /* sqe->data submission passed back */
60         __s32   res;            /* result code for this event */
61         __u32   flags;
62 };
63
64 /*
65  * io_uring_event->flags
66  */
67 #define IOCQE_FLAG_CACHEHIT     (1 << 0)        /* IO did not hit media */
68
69 /*
70  * Magic offsets for the application to mmap the data it needs
71  */
72 #define IORING_OFF_SQ_RING              0ULL
73 #define IORING_OFF_CQ_RING              0x8000000ULL
74 #define IORING_OFF_SQES                 0x10000000ULL
75
76 /*
77  * Filled with the offset for mmap(2)
78  */
79 struct io_sqring_offsets {
80         __u32 head;
81         __u32 tail;
82         __u32 ring_mask;
83         __u32 ring_entries;
84         __u32 flags;
85         __u32 dropped;
86         __u32 array;
87         __u32 resv[3];
88 };
89
90 #define IORING_SQ_NEED_WAKEUP   (1 << 0) /* needs io_uring_enter wakeup */
91
92 struct io_cqring_offsets {
93         __u32 head;
94         __u32 tail;
95         __u32 ring_mask;
96         __u32 ring_entries;
97         __u32 overflow;
98         __u32 cqes;
99         __u32 resv[4];
100 };
101
102 /*
103  * io_uring_enter(2) flags
104  */
105 #define IORING_ENTER_GETEVENTS  (1 << 0)
106
107 /*
108  * Passed in for io_uring_setup(2). Copied back with updated info on success
109  */
110 struct io_uring_params {
111         __u32 sq_entries;
112         __u32 cq_entries;
113         __u32 flags;
114         __u16 sq_thread_cpu;
115         __u16 resv[9];
116         struct io_sqring_offsets sq_off;
117         struct io_cqring_offsets cq_off;
118 };
119
120 /*
121  * io_uring_register(2) opcodes and arguments
122  */
123 #define IORING_REGISTER_BUFFERS         0
124 #define IORING_UNREGISTER_BUFFERS       1
125 #define IORING_REGISTER_FILES           2
126 #define IORING_UNREGISTER_FILES         3
127
128 struct io_uring_register_buffers {
129         struct iovec *iovecs;
130         unsigned nr_iovecs;
131 };
132
133 struct io_uring_register_files {
134         int *fds;
135         unsigned nr_fds;
136 };
137
138 #endif