fs/ubifs/dir.c

   1 /* * This file is part of UBIFS.
   2  *
   3  * Copyright (C) 2006-2008 Nokia Corporation.
   4  * Copyright (C) 2006, 2007 University of Szeged, Hungary
   5  *
   6  * This program is free software; you can redistribute it and/or modify it
   7  * under the terms of the GNU General Public License version 2 as published by
   8  * the Free Software Foundation.
   9  *
  10  * This program is distributed in the hope that it will be useful, but WITHOUT
  11  * ANY WARRANTY; without even the implied warranty of MERCHANTABILITY or
  12  * FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License for
  13  * more details.
  14  *
  15  * You should have received a copy of the GNU General Public License along with
  16  * this program; if not, write to the Free Software Foundation, Inc., 51
  17  * Franklin St, Fifth Floor, Boston, MA 02110-1301 USA
  18  *
  19  * Authors: Artem Bityutskiy (Битюцкий Артём)
  20  *          Adrian Hunter
  21  *          Zoltan Sogor
  22  */
  23
  24 /*
  25  * This file implements directory operations.
  26  *
  27  * All FS operations in this file allocate budget before writing anything to the
  28  * media. If they fail to allocate it, the error is returned. The only
  29  * exceptions are 'ubifs_unlink()' and 'ubifs_rmdir()' which keep working even
  30  * if they unable to allocate the budget, because deletion %-ENOSPC failure is
  31  * not what users are usually ready to get. UBIFS budgeting subsystem has some
  32  * space reserved for these purposes.
  33  *
  34  * All operations in this file write all inodes which they change straight
  35  * away, instead of marking them dirty. For example, 'ubifs_link()' changes
  36  * @i_size of the parent inode and writes the parent inode together with the
  37  * target inode. This was done to simplify file-system recovery which would
  38  * otherwise be very difficult to do. The only exception is rename which marks
  39  * the re-named inode dirty (because its @i_ctime is updated) but does not
  40  * write it, but just marks it as dirty.
  41  */
  42
  43 #include "ubifs.h"
  44
  45 /**
  46  * inherit_flags - inherit flags of the parent inode.
  47  * @dir: parent inode
  48  * @mode: new inode mode flags
  49  *
  50  * This is a helper function for 'ubifs_new_inode()' which inherits flag of the
  51  * parent directory inode @dir. UBIFS inodes inherit the following flags:
  52  * o %UBIFS_COMPR_FL, which is useful to switch compression on/of on
  53  *   sub-directory basis;
  54  * o %UBIFS_SYNC_FL - useful for the same reasons;
  55  * o %UBIFS_DIRSYNC_FL - similar, but relevant only to directories.
  56  *
  57  * This function returns the inherited flags.
  58  */
  59 static int inherit_flags(const struct inode *dir, umode_t mode)
  60 {
  61         int flags;
  62         const struct ubifs_inode *ui = ubifs_inode(dir);
  63
  64         if (!S_ISDIR(dir->i_mode))
  65                 /*
  66                  * The parent is not a directory, which means that an extended
  67                  * attribute inode is being created. No flags.
  68                  */
  69                 return 0;
  70
  71         flags = ui->flags & (UBIFS_COMPR_FL | UBIFS_SYNC_FL | UBIFS_DIRSYNC_FL);
  72         if (!S_ISDIR(mode))
  73                 /* The "DIRSYNC" flag only applies to directories */
  74                 flags &= ~UBIFS_DIRSYNC_FL;
  75         return flags;
  76 }
  77
  78 /**
  79  * ubifs_new_inode - allocate new UBIFS inode object.
  80  * @c: UBIFS file-system description object
  81  * @dir: parent directory inode
  82  * @mode: inode mode flags
  83  *
  84  * This function finds an unused inode number, allocates new inode and
  85  * initializes it. Returns new inode in case of success and an error code in
  86  * case of failure.
  87  */
  88 struct inode *ubifs_new_inode(struct ubifs_info *c, struct inode *dir,
  89                               umode_t mode)
  90 {
  91         int err;
  92         struct inode *inode;
  93         struct ubifs_inode *ui;
  94         bool encrypted = false;
  95
  96         if (ubifs_crypt_is_encrypted(dir)) {
  97                 err = fscrypt_get_encryption_info(dir);
  98                 if (err) {
  99                         ubifs_err(c, "fscrypt_get_encryption_info failed: %i", err);
 100                         return ERR_PTR(err);
 101                 }
 102
 103                 if (!fscrypt_has_encryption_key(dir))
 104                         return ERR_PTR(-EPERM);
 105
 106                 encrypted = true;
 107         }
 108
 109         inode = new_inode(c->vfs_sb);
 110         ui = ubifs_inode(inode);
 111         if (!inode)
 112                 return ERR_PTR(-ENOMEM);
 113
 114         /*
 115          * Set 'S_NOCMTIME' to prevent VFS form updating [mc]time of inodes and
 116          * marking them dirty in file write path (see 'file_update_time()').
 117          * UBIFS has to fully control "clean <-> dirty" transitions of inodes
 118          * to make budgeting work.
 119          */
 120         inode->i_flags |= S_NOCMTIME;
 121
 122         inode_init_owner(inode, dir, mode);
 123         inode->i_mtime = inode->i_atime = inode->i_ctime =
 124                          ubifs_current_time(inode);
 125         inode->i_mapping->nrpages = 0;
 126
 127         switch (mode & S_IFMT) {
 128         case S_IFREG:
 129                 inode->i_mapping->a_ops = &ubifs_file_address_operations;
 130                 inode->i_op = &ubifs_file_inode_operations;
 131                 inode->i_fop = &ubifs_file_operations;
 132                 break;
 133         case S_IFDIR:
 134                 inode->i_op  = &ubifs_dir_inode_operations;
 135                 inode->i_fop = &ubifs_dir_operations;
 136                 inode->i_size = ui->ui_size = UBIFS_INO_NODE_SZ;
 137                 break;
 138         case S_IFLNK:
 139                 inode->i_op = &ubifs_symlink_inode_operations;
 140                 break;
 141         case S_IFSOCK:
 142         case S_IFIFO:
 143         case S_IFBLK:
 144         case S_IFCHR:
 145                 inode->i_op  = &ubifs_file_inode_operations;
 146                 break;
 147         default:
 148                 BUG();
 149         }
 150
 151         ui->flags = inherit_flags(dir, mode);
 152         ubifs_set_inode_flags(inode);
 153         if (S_ISREG(mode))
 154                 ui->compr_type = c->default_compr;
 155         else
 156                 ui->compr_type = UBIFS_COMPR_NONE;
 157         ui->synced_i_size = 0;
 158
 159         spin_lock(&c->cnt_lock);
 160         /* Inode number overflow is currently not supported */
 161         if (c->highest_inum >= INUM_WARN_WATERMARK) {
 162                 if (c->highest_inum >= INUM_WATERMARK) {
 163                         spin_unlock(&c->cnt_lock);
 164                         ubifs_err(c, "out of inode numbers");
 165                         make_bad_inode(inode);
 166                         iput(inode);
 167                         return ERR_PTR(-EINVAL);
 168                 }
 169                 ubifs_warn(c, "running out of inode numbers (current %lu, max %u)",
 170                            (unsigned long)c->highest_inum, INUM_WATERMARK);
 171         }
 172
 173         inode->i_ino = ++c->highest_inum;
 174         /*
 175          * The creation sequence number remains with this inode for its
 176          * lifetime. All nodes for this inode have a greater sequence number,
 177          * and so it is possible to distinguish obsolete nodes belonging to a
 178          * previous incarnation of the same inode number - for example, for the
 179          * purpose of rebuilding the index.
 180          */
 181         ui->creat_sqnum = ++c->max_sqnum;
 182         spin_unlock(&c->cnt_lock);
 183
 184         if (encrypted) {
 185                 err = fscrypt_inherit_context(dir, inode, &encrypted, true);
 186                 if (err) {
 187                         ubifs_err(c, "fscrypt_inherit_context failed: %i", err);
 188                         make_bad_inode(inode);
 189                         iput(inode);
 190                         return ERR_PTR(err);
 191                 }
 192         }
 193
 194         return inode;
 195 }
 196
 197 static int dbg_check_name(const struct ubifs_info *c,
 198                           const struct ubifs_dent_node *dent,
 199                           const struct fscrypt_name *nm)
 200 {
 201         if (!dbg_is_chk_gen(c))
 202                 return 0;
 203         if (le16_to_cpu(dent->nlen) != fname_len(nm))
 204                 return -EINVAL;
 205         if (memcmp(dent->name, fname_name(nm), fname_len(nm)))
 206                 return -EINVAL;
 207         return 0;
 208 }
 209
 210 static struct dentry *ubifs_lookup(struct inode *dir, struct dentry *dentry,
 211                                    unsigned int flags)
 212 {
 213         int err;
 214         union ubifs_key key;
 215         struct inode *inode = NULL;
 216         struct ubifs_dent_node *dent;
 217         struct ubifs_info *c = dir->i_sb->s_fs_info;
 218         struct fscrypt_name nm;
 219
 220         dbg_gen("'%pd' in dir ino %lu", dentry, dir->i_ino);
 221
 222         if (ubifs_crypt_is_encrypted(dir)) {
 223                 err = fscrypt_get_encryption_info(dir);
 224
 225                 /*
 226                  * DCACHE_ENCRYPTED_WITH_KEY is set if the dentry is
 227                  * created while the directory was encrypted and we
 228                  * have access to the key.
 229                  */
 230                 if (fscrypt_has_encryption_key(dir))
 231                         fscrypt_set_encrypted_dentry(dentry);
 232                 fscrypt_set_d_op(dentry);
 233                 if (err && err != -ENOKEY)
 234                         return ERR_PTR(err);
 235         }
 236
 237         err = fscrypt_setup_filename(dir, &dentry->d_name, 1, &nm);
 238         if (err)
 239                 return ERR_PTR(err);
 240
 241         if (fname_len(&nm) > UBIFS_MAX_NLEN) {
 242                 err = -ENAMETOOLONG;
 243                 goto out_fname;
 244         }
 245
 246         dent = kmalloc(UBIFS_MAX_DENT_NODE_SZ, GFP_NOFS);
 247         if (!dent) {
 248                 err = -ENOMEM;
 249                 goto out_fname;
 250         }
 251
 252         if (nm.hash) {
 253                 ubifs_assert(fname_len(&nm) == 0);
 254                 ubifs_assert(fname_name(&nm) == NULL);
 255                 dent_key_init_hash(c, &key, dir->i_ino, nm.hash);
 256                 err = ubifs_tnc_lookup_dh(c, &key, dent, nm.minor_hash);
 257         } else {
 258                 dent_key_init(c, &key, dir->i_ino, &nm);
 259                 err = ubifs_tnc_lookup_nm(c, &key, dent, &nm);
 260         }
 261
 262         if (err) {
 263                 if (err == -ENOENT) {
 264                         dbg_gen("not found");
 265                         goto done;
 266                 }
 267                 goto out_dent;
 268         }
 269
 270         if (dbg_check_name(c, dent, &nm)) {
 271                 err = -EINVAL;
 272                 goto out_dent;
 273         }
 274
 275         inode = ubifs_iget(dir->i_sb, le64_to_cpu(dent->inum));
 276         if (IS_ERR(inode)) {
 277                 /*
 278                  * This should not happen. Probably the file-system needs
 279                  * checking.
 280                  */
 281                 err = PTR_ERR(inode);
 282                 ubifs_err(c, "dead directory entry '%pd', error %d",
 283                           dentry, err);
 284                 ubifs_ro_mode(c, err);
 285                 goto out_dent;
 286         }
 287
 288 done:
 289         kfree(dent);
 290         fscrypt_free_filename(&nm);
 291         /*
 292          * Note, d_splice_alias() would be required instead if we supported
 293          * NFS.
 294          */
 295         d_add(dentry, inode);
 296         return NULL;
 297
 298 out_dent:
 299         kfree(dent);
 300 out_fname:
 301         fscrypt_free_filename(&nm);
 302         return ERR_PTR(err);
 303 }
 304
 305 static int ubifs_create(struct inode *dir, struct dentry *dentry, umode_t mode,
 306                         bool excl)
 307 {
 308         struct inode *inode;
 309         struct ubifs_info *c = dir->i_sb->s_fs_info;
 310         struct ubifs_budget_req req = { .new_ino = 1, .new_dent = 1,
 311                                         .dirtied_ino = 1 };
 312         struct ubifs_inode *dir_ui = ubifs_inode(dir);
 313         struct fscrypt_name nm;
 314         int err, sz_change;
 315
 316         /*
 317          * Budget request settings: new inode, new direntry, changing the
 318          * parent directory inode.
 319          */
 320
 321         dbg_gen("dent '%pd', mode %#hx in dir ino %lu",
 322                 dentry, mode, dir->i_ino);
 323
 324         err = ubifs_budget_space(c, &req);
 325         if (err)
 326                 return err;
 327
 328         err = fscrypt_setup_filename(dir, &dentry->d_name, 0, &nm);
 329         if (err)
 330                 goto out_budg;
 331
 332         sz_change = CALC_DENT_SIZE(fname_len(&nm));
 333
 334         inode = ubifs_new_inode(c, dir, mode);
 335         if (IS_ERR(inode)) {
 336                 err = PTR_ERR(inode);
 337                 goto out_fname;
 338         }
 339
 340         err = ubifs_init_security(dir, inode, &dentry->d_name);
 341         if (err)
 342                 goto out_inode;
 343
 344         mutex_lock(&dir_ui->ui_mutex);
 345         dir->i_size += sz_change;
 346         dir_ui->ui_size = dir->i_size;
 347         dir->i_mtime = dir->i_ctime = inode->i_ctime;
 348         err = ubifs_jnl_update(c, dir, &nm, inode, 0, 0);
 349         if (err)
 350                 goto out_cancel;
 351         mutex_unlock(&dir_ui->ui_mutex);
 352
 353         ubifs_release_budget(c, &req);
 354         fscrypt_free_filename(&nm);
 355         insert_inode_hash(inode);
 356         d_instantiate(dentry, inode);
 357         return 0;
 358
 359 out_cancel:
 360         dir->i_size -= sz_change;
 361         dir_ui->ui_size = dir->i_size;
 362         mutex_unlock(&dir_ui->ui_mutex);
 363 out_inode:
 364         make_bad_inode(inode);
 365         iput(inode);
 366 out_fname:
 367         fscrypt_free_filename(&nm);
 368 out_budg:
 369         ubifs_release_budget(c, &req);
 370         ubifs_err(c, "cannot create regular file, error %d", err);
 371         return err;
 372 }
 373
 374 static int do_tmpfile(struct inode *dir, struct dentry *dentry,
 375                       umode_t mode, struct inode **whiteout)
 376 {
 377         struct inode *inode;
 378         struct ubifs_info *c = dir->i_sb->s_fs_info;
 379         struct ubifs_budget_req req = { .new_ino = 1, .new_dent = 1};
 380         struct ubifs_budget_req ino_req = { .dirtied_ino = 1 };
 381         struct ubifs_inode *ui, *dir_ui = ubifs_inode(dir);
 382         int err, instantiated = 0;
 383         struct fscrypt_name nm;
 384
 385         /*
 386          * Budget request settings: new dirty inode, new direntry,
 387          * budget for dirtied inode will be released via writeback.
 388          */
 389
 390         dbg_gen("dent '%pd', mode %#hx in dir ino %lu",
 391                 dentry, mode, dir->i_ino);
 392
 393         if (ubifs_crypt_is_encrypted(dir)) {
 394                 err = fscrypt_get_encryption_info(dir);
 395                 if (err)
 396                         return err;
 397
 398                 if (!fscrypt_has_encryption_key(dir)) {
 399                         return -EPERM;
 400                 }
 401         }
 402
 403         err = fscrypt_setup_filename(dir, &dentry->d_name, 0, &nm);
 404         if (err)
 405                 return err;
 406
 407         err = ubifs_budget_space(c, &req);
 408         if (err) {
 409                 fscrypt_free_filename(&nm);
 410                 return err;
 411         }
 412
 413         err = ubifs_budget_space(c, &ino_req);
 414         if (err) {
 415                 ubifs_release_budget(c, &req);
 416                 fscrypt_free_filename(&nm);
 417                 return err;
 418         }
 419
 420         inode = ubifs_new_inode(c, dir, mode);
 421         if (IS_ERR(inode)) {
 422                 err = PTR_ERR(inode);
 423                 goto out_budg;
 424         }
 425         ui = ubifs_inode(inode);
 426
 427         if (whiteout) {
 428                 init_special_inode(inode, inode->i_mode, WHITEOUT_DEV);
 429                 ubifs_assert(inode->i_op == &ubifs_file_inode_operations);
 430         }
 431
 432         err = ubifs_init_security(dir, inode, &dentry->d_name);
 433         if (err)
 434                 goto out_inode;
 435
 436         mutex_lock(&ui->ui_mutex);
 437         insert_inode_hash(inode);
 438
 439         if (whiteout) {
 440                 mark_inode_dirty(inode);
 441                 drop_nlink(inode);
 442                 *whiteout = inode;
 443         } else {
 444                 d_tmpfile(dentry, inode);
 445         }
 446         ubifs_assert(ui->dirty);
 447
 448         instantiated = 1;
 449         mutex_unlock(&ui->ui_mutex);
 450
 451         mutex_lock(&dir_ui->ui_mutex);
 452         err = ubifs_jnl_update(c, dir, &nm, inode, 1, 0);
 453         if (err)
 454                 goto out_cancel;
 455         mutex_unlock(&dir_ui->ui_mutex);
 456
 457         ubifs_release_budget(c, &req);
 458
 459         return 0;
 460
 461 out_cancel:
 462         mutex_unlock(&dir_ui->ui_mutex);
 463 out_inode:
 464         make_bad_inode(inode);
 465         if (!instantiated)
 466                 iput(inode);
 467 out_budg:
 468         ubifs_release_budget(c, &req);
 469         if (!instantiated)
 470                 ubifs_release_budget(c, &ino_req);
 471         fscrypt_free_filename(&nm);
 472         ubifs_err(c, "cannot create temporary file, error %d", err);
 473         return err;
 474 }
 475
 476 static int ubifs_tmpfile(struct inode *dir, struct dentry *dentry,
 477                          umode_t mode)
 478 {
 479         return do_tmpfile(dir, dentry, mode, NULL);
 480 }
 481
 482 /**
 483  * vfs_dent_type - get VFS directory entry type.
 484  * @type: UBIFS directory entry type
 485  *
 486  * This function converts UBIFS directory entry type into VFS directory entry
 487  * type.
 488  */
 489 static unsigned int vfs_dent_type(uint8_t type)
 490 {
 491         switch (type) {
 492         case UBIFS_ITYPE_REG:
 493                 return DT_REG;
 494         case UBIFS_ITYPE_DIR:
 495                 return DT_DIR;
 496         case UBIFS_ITYPE_LNK:
 497                 return DT_LNK;
 498         case UBIFS_ITYPE_BLK:
 499                 return DT_BLK;
 500         case UBIFS_ITYPE_CHR:
 501                 return DT_CHR;
 502         case UBIFS_ITYPE_FIFO:
 503                 return DT_FIFO;
 504         case UBIFS_ITYPE_SOCK:
 505                 return DT_SOCK;
 506         default:
 507                 BUG();
 508         }
 509         return 0;
 510 }
 511
 512 /*
 513  * The classical Unix view for directory is that it is a linear array of
 514  * (name, inode number) entries. Linux/VFS assumes this model as well.
 515  * Particularly, 'readdir()' call wants us to return a directory entry offset
 516  * which later may be used to continue 'readdir()'ing the directory or to
 517  * 'seek()' to that specific direntry. Obviously UBIFS does not really fit this
 518  * model because directory entries are identified by keys, which may collide.
 519  *
 520  * UBIFS uses directory entry hash value for directory offsets, so
 521  * 'seekdir()'/'telldir()' may not always work because of possible key
 522  * collisions. But UBIFS guarantees that consecutive 'readdir()' calls work
 523  * properly by means of saving full directory entry name in the private field
 524  * of the file description object.
 525  *
 526  * This means that UBIFS cannot support NFS which requires full
 527  * 'seekdir()'/'telldir()' support.
 528  */
 529 static int ubifs_readdir(struct file *file, struct dir_context *ctx)
 530 {
 531         int fstr_real_len, err = 0;
 532         struct fscrypt_name nm;
 533         struct fscrypt_str fstr = {0};
 534         union ubifs_key key;
 535         struct ubifs_dent_node *dent;
 536         struct inode *dir = file_inode(file);
 537         struct ubifs_info *c = dir->i_sb->s_fs_info;
 538         bool encrypted = ubifs_crypt_is_encrypted(dir);
 539
 540         dbg_gen("dir ino %lu, f_pos %#llx", dir->i_ino, ctx->pos);
 541
 542         if (ctx->pos > UBIFS_S_KEY_HASH_MASK || ctx->pos == 2)
 543                 /*
 544                  * The directory was seek'ed to a senseless position or there
 545                  * are no more entries.
 546                  */
 547                 return 0;
 548
 549         if (encrypted) {
 550                 err = fscrypt_get_encryption_info(dir);
 551                 if (err && err != -ENOKEY)
 552                         return err;
 553
 554                 err = fscrypt_fname_alloc_buffer(dir, UBIFS_MAX_NLEN, &fstr);
 555                 if (err)
 556                         return err;
 557
 558                 fstr_real_len = fstr.len;
 559         }
 560
 561         if (file->f_version == 0) {
 562                 /*
 563                  * The file was seek'ed, which means that @file->private_data
 564                  * is now invalid. This may also be just the first
 565                  * 'ubifs_readdir()' invocation, in which case
 566                  * @file->private_data is NULL, and the below code is
 567                  * basically a no-op.
 568                  */
 569                 kfree(file->private_data);
 570                 file->private_data = NULL;
 571         }
 572
 573         /*
 574          * 'generic_file_llseek()' unconditionally sets @file->f_version to
 575          * zero, and we use this for detecting whether the file was seek'ed.
 576          */
 577         file->f_version = 1;
 578
 579         /* File positions 0 and 1 correspond to "." and ".." */
 580         if (ctx->pos < 2) {
 581                 ubifs_assert(!file->private_data);
 582                 if (!dir_emit_dots(file, ctx)) {
 583                         if (encrypted)
 584                                 fscrypt_fname_free_buffer(&fstr);
 585                         return 0;
 586                 }
 587
 588                 /* Find the first entry in TNC and save it */
 589                 lowest_dent_key(c, &key, dir->i_ino);
 590                 fname_len(&nm) = 0;
 591                 dent = ubifs_tnc_next_ent(c, &key, &nm);
 592                 if (IS_ERR(dent)) {
 593                         err = PTR_ERR(dent);
 594                         goto out;
 595                 }
 596
 597                 ctx->pos = key_hash_flash(c, &dent->key);
 598                 file->private_data = dent;
 599         }
 600
 601         dent = file->private_data;
 602         if (!dent) {
 603                 /*
 604                  * The directory was seek'ed to and is now readdir'ed.
 605                  * Find the entry corresponding to @ctx->pos or the closest one.
 606                  */
 607                 dent_key_init_hash(c, &key, dir->i_ino, ctx->pos);
 608                 fname_len(&nm) = 0;
 609                 dent = ubifs_tnc_next_ent(c, &key, &nm);
 610                 if (IS_ERR(dent)) {
 611                         err = PTR_ERR(dent);
 612                         goto out;
 613                 }
 614                 ctx->pos = key_hash_flash(c, &dent->key);
 615                 file->private_data = dent;
 616         }
 617
 618         while (1) {
 619                 dbg_gen("feed '%s', ino %llu, new f_pos %#x",
 620                         dent->name, (unsigned long long)le64_to_cpu(dent->inum),
 621                         key_hash_flash(c, &dent->key));
 622                 ubifs_assert(le64_to_cpu(dent->ch.sqnum) >
 623                              ubifs_inode(dir)->creat_sqnum);
 624
 625                 fname_len(&nm) = le16_to_cpu(dent->nlen);
 626                 fname_name(&nm) = dent->name;
 627
 628                 if (encrypted) {
 629                         fstr.len = fstr_real_len;
 630
 631                         err = fscrypt_fname_disk_to_usr(dir, key_hash_flash(c,
 632                                                         &dent->key),
 633                                                         le32_to_cpu(dent->cookie),
 634                                                         &nm.disk_name, &fstr);
 635                         if (err)
 636                                 goto out;
 637                 } else {
 638                         fstr.len = fname_len(&nm);
 639                         fstr.name = fname_name(&nm);
 640                 }
 641
 642                 if (!dir_emit(ctx, fstr.name, fstr.len,
 643                                le64_to_cpu(dent->inum),
 644                                vfs_dent_type(dent->type))) {
 645                         if (encrypted)
 646                                 fscrypt_fname_free_buffer(&fstr);
 647                         return 0;
 648                 }
 649
 650                 /* Switch to the next entry */
 651                 key_read(c, &dent->key, &key);
 652                 dent = ubifs_tnc_next_ent(c, &key, &nm);
 653                 if (IS_ERR(dent)) {
 654                         err = PTR_ERR(dent);
 655                         goto out;
 656                 }
 657
 658                 kfree(file->private_data);
 659                 ctx->pos = key_hash_flash(c, &dent->key);
 660                 file->private_data = dent;
 661                 cond_resched();
 662         }
 663
 664 out:
 665         kfree(file->private_data);
 666         file->private_data = NULL;
 667
 668         if (encrypted)
 669                 fscrypt_fname_free_buffer(&fstr);
 670
 671         if (err != -ENOENT)
 672                 ubifs_err(c, "cannot find next direntry, error %d", err);
 673         else
 674                 /*
 675                  * -ENOENT is a non-fatal error in this context, the TNC uses
 676                  * it to indicate that the cursor moved past the current directory
 677                  * and readdir() has to stop.
 678                  */
 679                 err = 0;
 680
 681
 682         /* 2 is a special value indicating that there are no more direntries */
 683         ctx->pos = 2;
 684         return err;
 685 }
 686
 687 /* Free saved readdir() state when the directory is closed */
 688 static int ubifs_dir_release(struct inode *dir, struct file *file)
 689 {
 690         kfree(file->private_data);
 691         file->private_data = NULL;
 692         return 0;
 693 }
 694
 695 /**
 696  * lock_2_inodes - a wrapper for locking two UBIFS inodes.
 697  * @inode1: first inode
 698  * @inode2: second inode
 699  *
 700  * We do not implement any tricks to guarantee strict lock ordering, because
 701  * VFS has already done it for us on the @i_mutex. So this is just a simple
 702  * wrapper function.
 703  */
 704 static void lock_2_inodes(struct inode *inode1, struct inode *inode2)
 705 {
 706         mutex_lock_nested(&ubifs_inode(inode1)->ui_mutex, WB_MUTEX_1);
 707         mutex_lock_nested(&ubifs_inode(inode2)->ui_mutex, WB_MUTEX_2);
 708 }
 709
 710 /**
 711  * unlock_2_inodes - a wrapper for unlocking two UBIFS inodes.
 712  * @inode1: first inode
 713  * @inode2: second inode
 714  */
 715 static void unlock_2_inodes(struct inode *inode1, struct inode *inode2)
 716 {
 717         mutex_unlock(&ubifs_inode(inode2)->ui_mutex);
 718         mutex_unlock(&ubifs_inode(inode1)->ui_mutex);
 719 }
 720
 721 static int ubifs_link(struct dentry *old_dentry, struct inode *dir,
 722                       struct dentry *dentry)
 723 {
 724         struct ubifs_info *c = dir->i_sb->s_fs_info;
 725         struct inode *inode = d_inode(old_dentry);
 726         struct ubifs_inode *ui = ubifs_inode(inode);
 727         struct ubifs_inode *dir_ui = ubifs_inode(dir);
 728         int err, sz_change = CALC_DENT_SIZE(dentry->d_name.len);
 729         struct ubifs_budget_req req = { .new_dent = 1, .dirtied_ino = 2,
 730                                 .dirtied_ino_d = ALIGN(ui->data_len, 8) };
 731         struct fscrypt_name nm;
 732
 733         /*
 734          * Budget request settings: new direntry, changing the target inode,
 735          * changing the parent inode.
 736          */
 737
 738         dbg_gen("dent '%pd' to ino %lu (nlink %d) in dir ino %lu",
 739                 dentry, inode->i_ino,
 740                 inode->i_nlink, dir->i_ino);
 741         ubifs_assert(inode_is_locked(dir));
 742         ubifs_assert(inode_is_locked(inode));
 743
 744         if (ubifs_crypt_is_encrypted(dir)) {
 745                 if (!fscrypt_has_permitted_context(dir, inode))
 746                         return -EPERM;
 747
 748                 err = fscrypt_get_encryption_info(inode);
 749                 if (err)
 750                         return err;
 751
 752                 if (!fscrypt_has_encryption_key(inode))
 753                         return -EPERM;
 754         }
 755
 756         err = fscrypt_setup_filename(dir, &dentry->d_name, 0, &nm);
 757         if (err)
 758                 return err;
 759
 760         err = dbg_check_synced_i_size(c, inode);
 761         if (err)
 762                 goto out_fname;
 763
 764         err = ubifs_budget_space(c, &req);
 765         if (err)
 766                 goto out_fname;
 767
 768         lock_2_inodes(dir, inode);
 769         inc_nlink(inode);
 770         ihold(inode);
 771         inode->i_ctime = ubifs_current_time(inode);
 772         dir->i_size += sz_change;
 773         dir_ui->ui_size = dir->i_size;
 774         dir->i_mtime = dir->i_ctime = inode->i_ctime;
 775         err = ubifs_jnl_update(c, dir, &nm, inode, 0, 0);
 776         if (err)
 777                 goto out_cancel;
 778         unlock_2_inodes(dir, inode);
 779
 780         ubifs_release_budget(c, &req);
 781         d_instantiate(dentry, inode);
 782         fscrypt_free_filename(&nm);
 783         return 0;
 784
 785 out_cancel:
 786         dir->i_size -= sz_change;
 787         dir_ui->ui_size = dir->i_size;
 788         drop_nlink(inode);
 789         unlock_2_inodes(dir, inode);
 790         ubifs_release_budget(c, &req);
 791         iput(inode);
 792 out_fname:
 793         fscrypt_free_filename(&nm);
 794         return err;
 795 }
 796
 797 static int ubifs_unlink(struct inode *dir, struct dentry *dentry)
 798 {
 799         struct ubifs_info *c = dir->i_sb->s_fs_info;
 800         struct inode *inode = d_inode(dentry);
 801         struct ubifs_inode *dir_ui = ubifs_inode(dir);
 802         int err, sz_change, budgeted = 1;
 803         struct ubifs_budget_req req = { .mod_dent = 1, .dirtied_ino = 2 };
 804         unsigned int saved_nlink = inode->i_nlink;
 805         struct fscrypt_name nm;
 806
 807         /*
 808          * Budget request settings: deletion direntry, deletion inode (+1 for
 809          * @dirtied_ino), changing the parent directory inode. If budgeting
 810          * fails, go ahead anyway because we have extra space reserved for
 811          * deletions.
 812          */
 813
 814         dbg_gen("dent '%pd' from ino %lu (nlink %d) in dir ino %lu",
 815                 dentry, inode->i_ino,
 816                 inode->i_nlink, dir->i_ino);
 817
 818         if (ubifs_crypt_is_encrypted(dir)) {
 819                 err = fscrypt_get_encryption_info(dir);
 820                 if (err && err != -ENOKEY)
 821                         return err;
 822         }
 823
 824         err = fscrypt_setup_filename(dir, &dentry->d_name, 1, &nm);
 825         if (err)
 826                 return err;
 827
 828         sz_change = CALC_DENT_SIZE(fname_len(&nm));
 829
 830         ubifs_assert(inode_is_locked(dir));
 831         ubifs_assert(inode_is_locked(inode));
 832         err = dbg_check_synced_i_size(c, inode);
 833         if (err)
 834                 goto out_fname;
 835
 836         err = ubifs_budget_space(c, &req);
 837         if (err) {
 838                 if (err != -ENOSPC)
 839                         goto out_fname;
 840                 budgeted = 0;
 841         }
 842
 843         lock_2_inodes(dir, inode);
 844         inode->i_ctime = ubifs_current_time(dir);
 845         drop_nlink(inode);
 846         dir->i_size -= sz_change;
 847         dir_ui->ui_size = dir->i_size;
 848         dir->i_mtime = dir->i_ctime = inode->i_ctime;
 849         err = ubifs_jnl_update(c, dir, &nm, inode, 1, 0);
 850         if (err)
 851                 goto out_cancel;
 852         unlock_2_inodes(dir, inode);
 853
 854         if (budgeted)
 855                 ubifs_release_budget(c, &req);
 856         else {
 857                 /* We've deleted something - clean the "no space" flags */
 858                 c->bi.nospace = c->bi.nospace_rp = 0;
 859                 smp_wmb();
 860         }
 861         fscrypt_free_filename(&nm);
 862         return 0;
 863
 864 out_cancel:
 865         dir->i_size += sz_change;
 866         dir_ui->ui_size = dir->i_size;
 867         set_nlink(inode, saved_nlink);
 868         unlock_2_inodes(dir, inode);
 869         if (budgeted)
 870                 ubifs_release_budget(c, &req);
 871 out_fname:
 872         fscrypt_free_filename(&nm);
 873         return err;
 874 }
 875
 876 /**
 877  * check_dir_empty - check if a directory is empty or not.
 878  * @dir: VFS inode object of the directory to check
 879  *
 880  * This function checks if directory @dir is empty. Returns zero if the
 881  * directory is empty, %-ENOTEMPTY if it is not, and other negative error codes
 882  * in case of of errors.
 883  */
 884 int ubifs_check_dir_empty(struct inode *dir)
 885 {
 886         struct ubifs_info *c = dir->i_sb->s_fs_info;
 887         struct fscrypt_name nm = { 0 };
 888         struct ubifs_dent_node *dent;
 889         union ubifs_key key;
 890         int err;
 891
 892         lowest_dent_key(c, &key, dir->i_ino);
 893         dent = ubifs_tnc_next_ent(c, &key, &nm);
 894         if (IS_ERR(dent)) {
 895                 err = PTR_ERR(dent);
 896                 if (err == -ENOENT)
 897                         err = 0;
 898         } else {
 899                 kfree(dent);
 900                 err = -ENOTEMPTY;
 901         }
 902         return err;
 903 }
 904
 905 static int ubifs_rmdir(struct inode *dir, struct dentry *dentry)
 906 {
 907         struct ubifs_info *c = dir->i_sb->s_fs_info;
 908         struct inode *inode = d_inode(dentry);
 909         int err, sz_change, budgeted = 1;
 910         struct ubifs_inode *dir_ui = ubifs_inode(dir);
 911         struct ubifs_budget_req req = { .mod_dent = 1, .dirtied_ino = 2 };
 912         struct fscrypt_name nm;
 913
 914         /*
 915          * Budget request settings: deletion direntry, deletion inode and
 916          * changing the parent inode. If budgeting fails, go ahead anyway
 917          * because we have extra space reserved for deletions.
 918          */
 919
 920         dbg_gen("directory '%pd', ino %lu in dir ino %lu", dentry,
 921                 inode->i_ino, dir->i_ino);
 922         ubifs_assert(inode_is_locked(dir));
 923         ubifs_assert(inode_is_locked(inode));
 924         err = ubifs_check_dir_empty(d_inode(dentry));
 925         if (err)
 926                 return err;
 927
 928         if (ubifs_crypt_is_encrypted(dir)) {
 929                 err = fscrypt_get_encryption_info(dir);
 930                 if (err && err != -ENOKEY)
 931                         return err;
 932         }
 933
 934         err = fscrypt_setup_filename(dir, &dentry->d_name, 1, &nm);
 935         if (err)
 936                 return err;
 937
 938         sz_change = CALC_DENT_SIZE(fname_len(&nm));
 939
 940         err = ubifs_budget_space(c, &req);
 941         if (err) {
 942                 if (err != -ENOSPC)
 943                         goto out_fname;
 944                 budgeted = 0;
 945         }
 946
 947         lock_2_inodes(dir, inode);
 948         inode->i_ctime = ubifs_current_time(dir);
 949         clear_nlink(inode);
 950         drop_nlink(dir);
 951         dir->i_size -= sz_change;
 952         dir_ui->ui_size = dir->i_size;
 953         dir->i_mtime = dir->i_ctime = inode->i_ctime;
 954         err = ubifs_jnl_update(c, dir, &nm, inode, 1, 0);
 955         if (err)
 956                 goto out_cancel;
 957         unlock_2_inodes(dir, inode);
 958
 959         if (budgeted)
 960                 ubifs_release_budget(c, &req);
 961         else {
 962                 /* We've deleted something - clean the "no space" flags */
 963                 c->bi.nospace = c->bi.nospace_rp = 0;
 964                 smp_wmb();
 965         }
 966         fscrypt_free_filename(&nm);
 967         return 0;
 968
 969 out_cancel:
 970         dir->i_size += sz_change;
 971         dir_ui->ui_size = dir->i_size;
 972         inc_nlink(dir);
 973         set_nlink(inode, 2);
 974         unlock_2_inodes(dir, inode);
 975         if (budgeted)
 976                 ubifs_release_budget(c, &req);
 977 out_fname:
 978         fscrypt_free_filename(&nm);
 979         return err;
 980 }
 981
 982 static int ubifs_mkdir(struct inode *dir, struct dentry *dentry, umode_t mode)
 983 {
 984         struct inode *inode;
 985         struct ubifs_inode *dir_ui = ubifs_inode(dir);
 986         struct ubifs_info *c = dir->i_sb->s_fs_info;
 987         int err, sz_change;
 988         struct ubifs_budget_req req = { .new_ino = 1, .new_dent = 1 };
 989         struct fscrypt_name nm;
 990
 991         /*
 992          * Budget request settings: new inode, new direntry and changing parent
 993          * directory inode.
 994          */
 995
 996         dbg_gen("dent '%pd', mode %#hx in dir ino %lu",
 997                 dentry, mode, dir->i_ino);
 998
 999         err = ubifs_budget_space(c, &req);
1000         if (err)
1001                 return err;
1002
1003         if (ubifs_crypt_is_encrypted(dir)) {
1004                 err = fscrypt_get_encryption_info(dir);
1005                 if (err)
1006                         goto out_budg;
1007
1008                 if (!fscrypt_has_encryption_key(dir)) {
1009                         err = -EPERM;
1010                         goto out_budg;
1011                 }
1012         }
1013
1014         err = fscrypt_setup_filename(dir, &dentry->d_name, 0, &nm);
1015         if (err)
1016                 goto out_budg;
1017
1018         sz_change = CALC_DENT_SIZE(fname_len(&nm));
1019
1020         inode = ubifs_new_inode(c, dir, S_IFDIR | mode);
1021         if (IS_ERR(inode)) {
1022                 err = PTR_ERR(inode);
1023                 goto out_fname;
1024         }
1025
1026         err = ubifs_init_security(dir, inode, &dentry->d_name);
1027         if (err)
1028                 goto out_inode;
1029
1030         mutex_lock(&dir_ui->ui_mutex);
1031         insert_inode_hash(inode);
1032         inc_nlink(inode);
1033         inc_nlink(dir);
1034         dir->i_size += sz_change;
1035         dir_ui->ui_size = dir->i_size;
1036         dir->i_mtime = dir->i_ctime = inode->i_ctime;
1037         err = ubifs_jnl_update(c, dir, &nm, inode, 0, 0);
1038         if (err) {
1039                 ubifs_err(c, "cannot create directory, error %d", err);
1040                 goto out_cancel;
1041         }
1042         mutex_unlock(&dir_ui->ui_mutex);
1043
1044         ubifs_release_budget(c, &req);
1045         d_instantiate(dentry, inode);
1046         fscrypt_free_filename(&nm);
1047         return 0;
1048
1049 out_cancel:
1050         dir->i_size -= sz_change;
1051         dir_ui->ui_size = dir->i_size;
1052         drop_nlink(dir);
1053         mutex_unlock(&dir_ui->ui_mutex);
1054 out_inode:
1055         make_bad_inode(inode);
1056         iput(inode);
1057 out_fname:
1058         fscrypt_free_filename(&nm);
1059 out_budg:
1060         ubifs_release_budget(c, &req);
1061         return err;
1062 }
1063
1064 static int ubifs_mknod(struct inode *dir, struct dentry *dentry,
1065                        umode_t mode, dev_t rdev)
1066 {
1067         struct inode *inode;
1068         struct ubifs_inode *ui;
1069         struct ubifs_inode *dir_ui = ubifs_inode(dir);
1070         struct ubifs_info *c = dir->i_sb->s_fs_info;
1071         union ubifs_dev_desc *dev = NULL;
1072         int sz_change;
1073         int err, devlen = 0;
1074         struct ubifs_budget_req req = { .new_ino = 1, .new_dent = 1,
1075                                         .new_ino_d = ALIGN(devlen, 8),
1076                                         .dirtied_ino = 1 };
1077         struct fscrypt_name nm;
1078
1079         /*
1080          * Budget request settings: new inode, new direntry and changing parent
1081          * directory inode.
1082          */
1083
1084         dbg_gen("dent '%pd' in dir ino %lu", dentry, dir->i_ino);
1085
1086         if (S_ISBLK(mode) || S_ISCHR(mode)) {
1087                 dev = kmalloc(sizeof(union ubifs_dev_desc), GFP_NOFS);
1088                 if (!dev)
1089                         return -ENOMEM;
1090                 devlen = ubifs_encode_dev(dev, rdev);
1091         }
1092
1093         err = ubifs_budget_space(c, &req);
1094         if (err) {
1095                 kfree(dev);
1096                 return err;
1097         }
1098
1099         if (ubifs_crypt_is_encrypted(dir)) {
1100                 err = fscrypt_get_encryption_info(dir);
1101                 if (err)
1102                         goto out_budg;
1103
1104                 if (!fscrypt_has_encryption_key(dir)) {
1105                         err = -EPERM;
1106                         goto out_budg;
1107                 }
1108         }
1109
1110         err = fscrypt_setup_filename(dir, &dentry->d_name, 0, &nm);
1111         if (err)
1112                 goto out_budg;
1113
1114         sz_change = CALC_DENT_SIZE(fname_len(&nm));
1115
1116         inode = ubifs_new_inode(c, dir, mode);
1117         if (IS_ERR(inode)) {
1118                 kfree(dev);
1119                 err = PTR_ERR(inode);
1120                 goto out_fname;
1121         }
1122
1123         init_special_inode(inode, inode->i_mode, rdev);
1124         inode->i_size = ubifs_inode(inode)->ui_size = devlen;
1125         ui = ubifs_inode(inode);
1126         ui->data = dev;
1127         ui->data_len = devlen;
1128
1129         err = ubifs_init_security(dir, inode, &dentry->d_name);
1130         if (err)
1131                 goto out_inode;
1132
1133         mutex_lock(&dir_ui->ui_mutex);
1134         dir->i_size += sz_change;
1135         dir_ui->ui_size = dir->i_size;
1136         dir->i_mtime = dir->i_ctime = inode->i_ctime;
1137         err = ubifs_jnl_update(c, dir, &nm, inode, 0, 0);
1138         if (err)
1139                 goto out_cancel;
1140         mutex_unlock(&dir_ui->ui_mutex);
1141
1142         ubifs_release_budget(c, &req);
1143         insert_inode_hash(inode);
1144         d_instantiate(dentry, inode);
1145         fscrypt_free_filename(&nm);
1146         return 0;
1147
1148 out_cancel:
1149         dir->i_size -= sz_change;
1150         dir_ui->ui_size = dir->i_size;
1151         mutex_unlock(&dir_ui->ui_mutex);
1152 out_inode:
1153         make_bad_inode(inode);
1154         iput(inode);
1155 out_fname:
1156         fscrypt_free_filename(&nm);
1157 out_budg:
1158         ubifs_release_budget(c, &req);
1159         return err;
1160 }
1161
1162 static int ubifs_symlink(struct inode *dir, struct dentry *dentry,
1163                          const char *symname)
1164 {
1165         struct inode *inode;
1166         struct ubifs_inode *ui;
1167         struct ubifs_inode *dir_ui = ubifs_inode(dir);
1168         struct ubifs_info *c = dir->i_sb->s_fs_info;
1169         int err, len = strlen(symname);
1170         int sz_change = CALC_DENT_SIZE(len);
1171         struct fscrypt_str disk_link = FSTR_INIT((char *)symname, len + 1);
1172         struct fscrypt_symlink_data *sd = NULL;
1173         struct ubifs_budget_req req = { .new_ino = 1, .new_dent = 1,
1174                                         .new_ino_d = ALIGN(len, 8),
1175                                         .dirtied_ino = 1 };
1176         struct fscrypt_name nm;
1177
1178         if (ubifs_crypt_is_encrypted(dir)) {
1179                 err = fscrypt_get_encryption_info(dir);
1180                 if (err)
1181                         goto out_budg;
1182
1183                 if (!fscrypt_has_encryption_key(dir)) {
1184                         err = -EPERM;
1185                         goto out_budg;
1186                 }
1187
1188                 disk_link.len = (fscrypt_fname_encrypted_size(dir, len) +
1189                                 sizeof(struct fscrypt_symlink_data));
1190         }
1191
1192         /*
1193          * Budget request settings: new inode, new direntry and changing parent
1194          * directory inode.
1195          */
1196
1197         dbg_gen("dent '%pd', target '%s' in dir ino %lu", dentry,
1198                 symname, dir->i_ino);
1199
1200         if (disk_link.len > UBIFS_MAX_INO_DATA)
1201                 return -ENAMETOOLONG;
1202
1203         err = ubifs_budget_space(c, &req);
1204         if (err)
1205                 return err;
1206
1207         err = fscrypt_setup_filename(dir, &dentry->d_name, 0, &nm);
1208         if (err)
1209                 goto out_budg;
1210
1211         inode = ubifs_new_inode(c, dir, S_IFLNK | S_IRWXUGO);
1212         if (IS_ERR(inode)) {
1213                 err = PTR_ERR(inode);
1214                 goto out_fname;
1215         }
1216
1217         ui = ubifs_inode(inode);
1218         ui->data = kmalloc(disk_link.len, GFP_NOFS);
1219         if (!ui->data) {
1220                 err = -ENOMEM;
1221                 goto out_inode;
1222         }
1223
1224         if (ubifs_crypt_is_encrypted(dir)) {
1225                 struct qstr istr = QSTR_INIT(symname, len);
1226                 struct fscrypt_str ostr;
1227
1228                 sd = kzalloc(disk_link.len, GFP_NOFS);
1229                 if (!sd) {
1230                         err = -ENOMEM;
1231                         goto out_inode;
1232                 }
1233
1234                 err = fscrypt_get_encryption_info(inode);
1235                 if (err) {
1236                         kfree(sd);
1237                         goto out_inode;
1238                 }
1239
1240                 if (!fscrypt_has_encryption_key(inode)) {
1241                         kfree(sd);
1242                         err = -EPERM;
1243                         goto out_inode;
1244                 }
1245
1246                 ostr.name = sd->encrypted_path;
1247                 ostr.len = disk_link.len;
1248
1249                 err = fscrypt_fname_usr_to_disk(inode, &istr, &ostr);
1250                 if (err) {
1251                         kfree(sd);
1252                         goto out_inode;
1253                 }
1254
1255                 sd->len = cpu_to_le16(ostr.len);
1256                 disk_link.name = (char *)sd;
1257         } else {
1258                 inode->i_link = ui->data;
1259         }
1260
1261         memcpy(ui->data, disk_link.name, disk_link.len);
1262         ((char *)ui->data)[disk_link.len - 1] = '\0';
1263
1264         /*
1265          * The terminating zero byte is not written to the flash media and it
1266          * is put just to make later in-memory string processing simpler. Thus,
1267          * data length is @len, not @len + %1.
1268          */
1269         ui->data_len = disk_link.len - 1;
1270         inode->i_size = ubifs_inode(inode)->ui_size = disk_link.len - 1;
1271
1272         err = ubifs_init_security(dir, inode, &dentry->d_name);
1273         if (err)
1274                 goto out_inode;
1275
1276         mutex_lock(&dir_ui->ui_mutex);
1277         dir->i_size += sz_change;
1278         dir_ui->ui_size = dir->i_size;
1279         dir->i_mtime = dir->i_ctime = inode->i_ctime;
1280         err = ubifs_jnl_update(c, dir, &nm, inode, 0, 0);
1281         if (err)
1282                 goto out_cancel;
1283         mutex_unlock(&dir_ui->ui_mutex);
1284
1285         ubifs_release_budget(c, &req);
1286         insert_inode_hash(inode);
1287         d_instantiate(dentry, inode);
1288         fscrypt_free_filename(&nm);
1289         return 0;
1290
1291 out_cancel:
1292         dir->i_size -= sz_change;
1293         dir_ui->ui_size = dir->i_size;
1294         mutex_unlock(&dir_ui->ui_mutex);
1295 out_inode:
1296         make_bad_inode(inode);
1297         iput(inode);
1298 out_fname:
1299         fscrypt_free_filename(&nm);
1300 out_budg:
1301         ubifs_release_budget(c, &req);
1302         return err;
1303 }
1304
1305 /**
1306  * lock_4_inodes - a wrapper for locking three UBIFS inodes.
1307  * @inode1: first inode
1308  * @inode2: second inode
1309  * @inode3: third inode
1310  * @inode4: fouth inode
1311  *
1312  * This function is used for 'ubifs_rename()' and @inode1 may be the same as
1313  * @inode2 whereas @inode3 and @inode4 may be %NULL.
1314  *
1315  * We do not implement any tricks to guarantee strict lock ordering, because
1316  * VFS has already done it for us on the @i_mutex. So this is just a simple
1317  * wrapper function.
1318  */
1319 static void lock_4_inodes(struct inode *inode1, struct inode *inode2,
1320                           struct inode *inode3, struct inode *inode4)
1321 {
1322         mutex_lock_nested(&ubifs_inode(inode1)->ui_mutex, WB_MUTEX_1);
1323         if (inode2 != inode1)
1324                 mutex_lock_nested(&ubifs_inode(inode2)->ui_mutex, WB_MUTEX_2);
1325         if (inode3)
1326                 mutex_lock_nested(&ubifs_inode(inode3)->ui_mutex, WB_MUTEX_3);
1327         if (inode4)
1328                 mutex_lock_nested(&ubifs_inode(inode4)->ui_mutex, WB_MUTEX_4);
1329 }
1330
1331 /**
1332  * unlock_4_inodes - a wrapper for unlocking three UBIFS inodes for rename.
1333  * @inode1: first inode
1334  * @inode2: second inode
1335  * @inode3: third inode
1336  * @inode4: fouth inode
1337  */
1338 static void unlock_4_inodes(struct inode *inode1, struct inode *inode2,
1339                             struct inode *inode3, struct inode *inode4)
1340 {
1341         if (inode4)
1342                 mutex_unlock(&ubifs_inode(inode4)->ui_mutex);
1343         if (inode3)
1344                 mutex_unlock(&ubifs_inode(inode3)->ui_mutex);
1345         if (inode1 != inode2)
1346                 mutex_unlock(&ubifs_inode(inode2)->ui_mutex);
1347         mutex_unlock(&ubifs_inode(inode1)->ui_mutex);
1348 }
1349
1350 static int do_rename(struct inode *old_dir, struct dentry *old_dentry,
1351                      struct inode *new_dir, struct dentry *new_dentry,
1352                      unsigned int flags)
1353 {
1354         struct ubifs_info *c = old_dir->i_sb->s_fs_info;
1355         struct inode *old_inode = d_inode(old_dentry);
1356         struct inode *new_inode = d_inode(new_dentry);
1357         struct inode *whiteout = NULL;
1358         struct ubifs_inode *old_inode_ui = ubifs_inode(old_inode);
1359         struct ubifs_inode *whiteout_ui = NULL;
1360         int err, release, sync = 0, move = (new_dir != old_dir);
1361         int is_dir = S_ISDIR(old_inode->i_mode);
1362         int unlink = !!new_inode, new_sz, old_sz;
1363         struct ubifs_budget_req req = { .new_dent = 1, .mod_dent = 1,
1364                                         .dirtied_ino = 3 };
1365         struct ubifs_budget_req ino_req = { .dirtied_ino = 1,
1366                         .dirtied_ino_d = ALIGN(old_inode_ui->data_len, 8) };
1367         struct timespec time;
1368         unsigned int uninitialized_var(saved_nlink);
1369         struct fscrypt_name old_nm, new_nm;
1370
1371         if (flags & ~RENAME_NOREPLACE)
1372                 return -EINVAL;
1373
1374         /*
1375          * Budget request settings: deletion direntry, new direntry, removing
1376          * the old inode, and changing old and new parent directory inodes.
1377          *
1378          * However, this operation also marks the target inode as dirty and
1379          * does not write it, so we allocate budget for the target inode
1380          * separately.
1381          */
1382
1383         dbg_gen("dent '%pd' ino %lu in dir ino %lu to dent '%pd' in dir ino %lu flags 0x%x",
1384                 old_dentry, old_inode->i_ino, old_dir->i_ino,
1385                 new_dentry, new_dir->i_ino, flags);
1386
1387         if (unlink)
1388                 ubifs_assert(inode_is_locked(new_inode));
1389
1390         if (old_dir != new_dir) {
1391                 if (ubifs_crypt_is_encrypted(new_dir) &&
1392                     !fscrypt_has_permitted_context(new_dir, old_inode))
1393                         return -EPERM;
1394         }
1395
1396         if (unlink && is_dir) {
1397                 err = ubifs_check_dir_empty(new_inode);
1398                 if (err)
1399                         return err;
1400         }
1401
1402         err = fscrypt_setup_filename(old_dir, &old_dentry->d_name, 0, &old_nm);
1403         if (err)
1404                 return err;
1405
1406         err = fscrypt_setup_filename(new_dir, &new_dentry->d_name, 0, &new_nm);
1407         if (err) {
1408                 fscrypt_free_filename(&old_nm);
1409                 return err;
1410         }
1411
1412         new_sz = CALC_DENT_SIZE(fname_len(&new_nm));
1413         old_sz = CALC_DENT_SIZE(fname_len(&old_nm));
1414
1415         err = ubifs_budget_space(c, &req);
1416         if (err) {
1417                 fscrypt_free_filename(&old_nm);
1418                 fscrypt_free_filename(&new_nm);
1419                 return err;
1420         }
1421         err = ubifs_budget_space(c, &ino_req);
1422         if (err) {
1423                 fscrypt_free_filename(&old_nm);
1424                 fscrypt_free_filename(&new_nm);
1425                 ubifs_release_budget(c, &req);
1426                 return err;
1427         }
1428
1429         if (flags & RENAME_WHITEOUT) {
1430                 union ubifs_dev_desc *dev = NULL;
1431
1432                 dev = kmalloc(sizeof(union ubifs_dev_desc), GFP_NOFS);
1433                 if (!dev) {
1434                         ubifs_release_budget(c, &req);
1435                         ubifs_release_budget(c, &ino_req);
1436                         return -ENOMEM;
1437                 }
1438
1439                 err = do_tmpfile(old_dir, old_dentry, S_IFCHR | WHITEOUT_MODE, &whiteout);
1440                 if (err) {
1441                         ubifs_release_budget(c, &req);
1442                         ubifs_release_budget(c, &ino_req);
1443                         kfree(dev);
1444                         return err;
1445                 }
1446
1447                 whiteout->i_state |= I_LINKABLE;
1448                 whiteout_ui = ubifs_inode(whiteout);
1449                 whiteout_ui->data = dev;
1450                 whiteout_ui->data_len = ubifs_encode_dev(dev, MKDEV(0, 0));
1451                 ubifs_assert(!whiteout_ui->dirty);
1452         }
1453
1454         lock_4_inodes(old_dir, new_dir, new_inode, whiteout);
1455
1456         /*
1457          * Like most other Unix systems, set the @i_ctime for inodes on a
1458          * rename.
1459          */
1460         time = ubifs_current_time(old_dir);
1461         old_inode->i_ctime = time;
1462
1463         /* We must adjust parent link count when renaming directories */
1464         if (is_dir) {
1465                 if (move) {
1466                         /*
1467                          * @old_dir loses a link because we are moving
1468                          * @old_inode to a different directory.
1469                          */
1470                         drop_nlink(old_dir);
1471                         /*
1472                          * @new_dir only gains a link if we are not also
1473                          * overwriting an existing directory.
1474                          */
1475                         if (!unlink)
1476                                 inc_nlink(new_dir);
1477                 } else {
1478                         /*
1479                          * @old_inode is not moving to a different directory,
1480                          * but @old_dir still loses a link if we are
1481                          * overwriting an existing directory.
1482                          */
1483                         if (unlink)
1484                                 drop_nlink(old_dir);
1485                 }
1486         }
1487
1488         old_dir->i_size -= old_sz;
1489         ubifs_inode(old_dir)->ui_size = old_dir->i_size;
1490         old_dir->i_mtime = old_dir->i_ctime = time;
1491         new_dir->i_mtime = new_dir->i_ctime = time;
1492
1493         /*
1494          * And finally, if we unlinked a direntry which happened to have the
1495          * same name as the moved direntry, we have to decrement @i_nlink of
1496          * the unlinked inode and change its ctime.
1497          */
1498         if (unlink) {
1499                 /*
1500                  * Directories cannot have hard-links, so if this is a
1501                  * directory, just clear @i_nlink.
1502                  */
1503                 saved_nlink = new_inode->i_nlink;
1504                 if (is_dir)
1505                         clear_nlink(new_inode);
1506                 else
1507                         drop_nlink(new_inode);
1508                 new_inode->i_ctime = time;
1509         } else {
1510                 new_dir->i_size += new_sz;
1511                 ubifs_inode(new_dir)->ui_size = new_dir->i_size;
1512         }
1513
1514         /*
1515          * Do not ask 'ubifs_jnl_rename()' to flush write-buffer if @old_inode
1516          * is dirty, because this will be done later on at the end of
1517          * 'ubifs_rename()'.
1518          */
1519         if (IS_SYNC(old_inode)) {
1520                 sync = IS_DIRSYNC(old_dir) || IS_DIRSYNC(new_dir);
1521                 if (unlink && IS_SYNC(new_inode))
1522                         sync = 1;
1523         }
1524
1525         if (whiteout) {
1526                 struct ubifs_budget_req wht_req = { .dirtied_ino = 1,
1527                                 .dirtied_ino_d = \
1528                                 ALIGN(ubifs_inode(whiteout)->data_len, 8) };
1529
1530                 err = ubifs_budget_space(c, &wht_req);
1531                 if (err) {
1532                         ubifs_release_budget(c, &req);
1533                         ubifs_release_budget(c, &ino_req);
1534                         kfree(whiteout_ui->data);
1535                         whiteout_ui->data_len = 0;
1536                         iput(whiteout);
1537                         return err;
1538                 }
1539
1540                 inc_nlink(whiteout);
1541                 mark_inode_dirty(whiteout);
1542                 whiteout->i_state &= ~I_LINKABLE;
1543                 iput(whiteout);
1544         }
1545
1546         err = ubifs_jnl_rename(c, old_dir, old_inode, &old_nm, new_dir,
1547                                new_inode, &new_nm, whiteout, sync);
1548         if (err)
1549                 goto out_cancel;
1550
1551         unlock_4_inodes(old_dir, new_dir, new_inode, whiteout);
1552         ubifs_release_budget(c, &req);
1553
1554         mutex_lock(&old_inode_ui->ui_mutex);
1555         release = old_inode_ui->dirty;
1556         mark_inode_dirty_sync(old_inode);
1557         mutex_unlock(&old_inode_ui->ui_mutex);
1558
1559         if (release)
1560                 ubifs_release_budget(c, &ino_req);
1561         if (IS_SYNC(old_inode))
1562                 err = old_inode->i_sb->s_op->write_inode(old_inode, NULL);
1563
1564         fscrypt_free_filename(&old_nm);
1565         fscrypt_free_filename(&new_nm);
1566         return err;
1567
1568 out_cancel:
1569         if (unlink) {
1570                 set_nlink(new_inode, saved_nlink);
1571         } else {
1572                 new_dir->i_size -= new_sz;
1573                 ubifs_inode(new_dir)->ui_size = new_dir->i_size;
1574         }
1575         old_dir->i_size += old_sz;
1576         ubifs_inode(old_dir)->ui_size = old_dir->i_size;
1577         if (is_dir) {
1578                 if (move) {
1579                         inc_nlink(old_dir);
1580                         if (!unlink)
1581                                 drop_nlink(new_dir);
1582                 } else {
1583                         if (unlink)
1584                                 inc_nlink(old_dir);
1585                 }
1586         }
1587         if (whiteout) {
1588                 drop_nlink(whiteout);
1589                 iput(whiteout);
1590         }
1591         unlock_4_inodes(old_dir, new_dir, new_inode, whiteout);
1592         ubifs_release_budget(c, &ino_req);
1593         ubifs_release_budget(c, &req);
1594         fscrypt_free_filename(&old_nm);
1595         fscrypt_free_filename(&new_nm);
1596         return err;
1597 }
1598
1599 static int ubifs_xrename(struct inode *old_dir, struct dentry *old_dentry,
1600                         struct inode *new_dir, struct dentry *new_dentry)
1601 {
1602         struct ubifs_info *c = old_dir->i_sb->s_fs_info;
1603         struct ubifs_budget_req req = { .new_dent = 1, .mod_dent = 1,
1604                                 .dirtied_ino = 2 };
1605         int sync = IS_DIRSYNC(old_dir) || IS_DIRSYNC(new_dir);
1606         struct inode *fst_inode = d_inode(old_dentry);
1607         struct inode *snd_inode = d_inode(new_dentry);
1608         struct timespec time;
1609         int err;
1610         struct fscrypt_name fst_nm, snd_nm;
1611
1612         ubifs_assert(fst_inode && snd_inode);
1613
1614         if ((ubifs_crypt_is_encrypted(old_dir) ||
1615             ubifs_crypt_is_encrypted(new_dir)) &&
1616             (old_dir != new_dir) &&
1617             (!fscrypt_has_permitted_context(new_dir, fst_inode) ||
1618              !fscrypt_has_permitted_context(old_dir, snd_inode)))
1619                 return -EPERM;
1620
1621         err = fscrypt_setup_filename(old_dir, &old_dentry->d_name, 0, &fst_nm);
1622         if (err)
1623                 return err;
1624
1625         err = fscrypt_setup_filename(new_dir, &new_dentry->d_name, 0, &snd_nm);
1626         if (err) {
1627                 fscrypt_free_filename(&fst_nm);
1628                 return err;
1629         }
1630
1631         lock_4_inodes(old_dir, new_dir, NULL, NULL);
1632
1633         time = ubifs_current_time(old_dir);
1634         fst_inode->i_ctime = time;
1635         snd_inode->i_ctime = time;
1636         old_dir->i_mtime = old_dir->i_ctime = time;
1637         new_dir->i_mtime = new_dir->i_ctime = time;
1638
1639         if (old_dir != new_dir) {
1640                 if (S_ISDIR(fst_inode->i_mode) && !S_ISDIR(snd_inode->i_mode)) {
1641                         inc_nlink(new_dir);
1642                         drop_nlink(old_dir);
1643                 }
1644                 else if (!S_ISDIR(fst_inode->i_mode) && S_ISDIR(snd_inode->i_mode)) {
1645                         drop_nlink(new_dir);
1646                         inc_nlink(old_dir);
1647                 }
1648         }
1649
1650         err = ubifs_jnl_xrename(c, old_dir, fst_inode, &fst_nm, new_dir,
1651                                 snd_inode, &snd_nm, sync);
1652
1653         unlock_4_inodes(old_dir, new_dir, NULL, NULL);
1654         ubifs_release_budget(c, &req);
1655
1656         fscrypt_free_filename(&fst_nm);
1657         fscrypt_free_filename(&snd_nm);
1658         return err;
1659 }
1660
1661 static int ubifs_rename(struct inode *old_dir, struct dentry *old_dentry,
1662                         struct inode *new_dir, struct dentry *new_dentry,
1663                         unsigned int flags)
1664 {
1665         if (flags & ~(RENAME_NOREPLACE | RENAME_WHITEOUT | RENAME_EXCHANGE))
1666                 return -EINVAL;
1667
1668         ubifs_assert(inode_is_locked(old_dir));
1669         ubifs_assert(inode_is_locked(new_dir));
1670
1671         if (flags & RENAME_EXCHANGE)
1672                 return ubifs_xrename(old_dir, old_dentry, new_dir, new_dentry);
1673
1674         return do_rename(old_dir, old_dentry, new_dir, new_dentry, flags);
1675 }
1676
1677 int ubifs_getattr(struct vfsmount *mnt, struct dentry *dentry,
1678                   struct kstat *stat)
1679 {
1680         loff_t size;
1681         struct inode *inode = d_inode(dentry);
1682         struct ubifs_inode *ui = ubifs_inode(inode);
1683
1684         mutex_lock(&ui->ui_mutex);
1685         generic_fillattr(inode, stat);
1686         stat->blksize = UBIFS_BLOCK_SIZE;
1687         stat->size = ui->ui_size;
1688
1689         /*
1690          * Unfortunately, the 'stat()' system call was designed for block
1691          * device based file systems, and it is not appropriate for UBIFS,
1692          * because UBIFS does not have notion of "block". For example, it is
1693          * difficult to tell how many block a directory takes - it actually
1694          * takes less than 300 bytes, but we have to round it to block size,
1695          * which introduces large mistake. This makes utilities like 'du' to
1696          * report completely senseless numbers. This is the reason why UBIFS
1697          * goes the same way as JFFS2 - it reports zero blocks for everything
1698          * but regular files, which makes more sense than reporting completely
1699          * wrong sizes.
1700          */
1701         if (S_ISREG(inode->i_mode)) {
1702                 size = ui->xattr_size;
1703                 size += stat->size;
1704                 size = ALIGN(size, UBIFS_BLOCK_SIZE);
1705                 /*
1706                  * Note, user-space expects 512-byte blocks count irrespectively
1707                  * of what was reported in @stat->size.
1708                  */
1709                 stat->blocks = size >> 9;
1710         } else
1711                 stat->blocks = 0;
1712         mutex_unlock(&ui->ui_mutex);
1713         return 0;
1714 }
1715
1716 static int ubifs_dir_open(struct inode *dir, struct file *file)
1717 {
1718         if (ubifs_crypt_is_encrypted(dir))
1719                 return fscrypt_get_encryption_info(dir) ? -EACCES : 0;
1720
1721         return 0;
1722 }
1723
1724 const struct inode_operations ubifs_dir_inode_operations = {
1725         .lookup      = ubifs_lookup,
1726         .create      = ubifs_create,
1727         .link        = ubifs_link,
1728         .symlink     = ubifs_symlink,
1729         .unlink      = ubifs_unlink,
1730         .mkdir       = ubifs_mkdir,
1731         .rmdir       = ubifs_rmdir,
1732         .mknod       = ubifs_mknod,
1733         .rename      = ubifs_rename,
1734         .setattr     = ubifs_setattr,
1735         .getattr     = ubifs_getattr,
1736         .listxattr   = ubifs_listxattr,
1737 #ifdef CONFIG_UBIFS_ATIME_SUPPORT
1738         .update_time = ubifs_update_time,
1739 #endif
1740         .tmpfile     = ubifs_tmpfile,
1741 };
1742
1743 const struct file_operations ubifs_dir_operations = {
1744         .llseek         = generic_file_llseek,
1745         .release        = ubifs_dir_release,
1746         .read           = generic_read_dir,
1747         .iterate_shared = ubifs_readdir,
1748         .fsync          = ubifs_fsync,
1749         .unlocked_ioctl = ubifs_ioctl,
1750         .open           = ubifs_dir_open,
1751 #ifdef CONFIG_COMPAT
1752         .compat_ioctl   = ubifs_compat_ioctl,
1753 #endif
1754 };