kthread: rename probe_kthread_data() to kthread_probe_data()
[linux-2.6-block.git] / kernel / ptrace.c
1 /*
2  * linux/kernel/ptrace.c
3  *
4  * (C) Copyright 1999 Linus Torvalds
5  *
6  * Common interfaces for "ptrace()" which we do not want
7  * to continually duplicate across every architecture.
8  */
9
10 #include <linux/capability.h>
11 #include <linux/export.h>
12 #include <linux/sched.h>
13 #include <linux/errno.h>
14 #include <linux/mm.h>
15 #include <linux/highmem.h>
16 #include <linux/pagemap.h>
17 #include <linux/ptrace.h>
18 #include <linux/security.h>
19 #include <linux/signal.h>
20 #include <linux/uio.h>
21 #include <linux/audit.h>
22 #include <linux/pid_namespace.h>
23 #include <linux/syscalls.h>
24 #include <linux/uaccess.h>
25 #include <linux/regset.h>
26 #include <linux/hw_breakpoint.h>
27 #include <linux/cn_proc.h>
28 #include <linux/compat.h>
29
30
31 /*
32  * ptrace a task: make the debugger its new parent and
33  * move it to the ptrace list.
34  *
35  * Must be called with the tasklist lock write-held.
36  */
37 void __ptrace_link(struct task_struct *child, struct task_struct *new_parent)
38 {
39         BUG_ON(!list_empty(&child->ptrace_entry));
40         list_add(&child->ptrace_entry, &new_parent->ptraced);
41         child->parent = new_parent;
42 }
43
44 /**
45  * __ptrace_unlink - unlink ptracee and restore its execution state
46  * @child: ptracee to be unlinked
47  *
48  * Remove @child from the ptrace list, move it back to the original parent,
49  * and restore the execution state so that it conforms to the group stop
50  * state.
51  *
52  * Unlinking can happen via two paths - explicit PTRACE_DETACH or ptracer
53  * exiting.  For PTRACE_DETACH, unless the ptracee has been killed between
54  * ptrace_check_attach() and here, it's guaranteed to be in TASK_TRACED.
55  * If the ptracer is exiting, the ptracee can be in any state.
56  *
57  * After detach, the ptracee should be in a state which conforms to the
58  * group stop.  If the group is stopped or in the process of stopping, the
59  * ptracee should be put into TASK_STOPPED; otherwise, it should be woken
60  * up from TASK_TRACED.
61  *
62  * If the ptracee is in TASK_TRACED and needs to be moved to TASK_STOPPED,
63  * it goes through TRACED -> RUNNING -> STOPPED transition which is similar
64  * to but in the opposite direction of what happens while attaching to a
65  * stopped task.  However, in this direction, the intermediate RUNNING
66  * state is not hidden even from the current ptracer and if it immediately
67  * re-attaches and performs a WNOHANG wait(2), it may fail.
68  *
69  * CONTEXT:
70  * write_lock_irq(tasklist_lock)
71  */
72 void __ptrace_unlink(struct task_struct *child)
73 {
74         BUG_ON(!child->ptrace);
75
76         clear_tsk_thread_flag(child, TIF_SYSCALL_TRACE);
77
78         child->parent = child->real_parent;
79         list_del_init(&child->ptrace_entry);
80
81         spin_lock(&child->sighand->siglock);
82         child->ptrace = 0;
83         /*
84          * Clear all pending traps and TRAPPING.  TRAPPING should be
85          * cleared regardless of JOBCTL_STOP_PENDING.  Do it explicitly.
86          */
87         task_clear_jobctl_pending(child, JOBCTL_TRAP_MASK);
88         task_clear_jobctl_trapping(child);
89
90         /*
91          * Reinstate JOBCTL_STOP_PENDING if group stop is in effect and
92          * @child isn't dead.
93          */
94         if (!(child->flags & PF_EXITING) &&
95             (child->signal->flags & SIGNAL_STOP_STOPPED ||
96              child->signal->group_stop_count)) {
97                 child->jobctl |= JOBCTL_STOP_PENDING;
98
99                 /*
100                  * This is only possible if this thread was cloned by the
101                  * traced task running in the stopped group, set the signal
102                  * for the future reports.
103                  * FIXME: we should change ptrace_init_task() to handle this
104                  * case.
105                  */
106                 if (!(child->jobctl & JOBCTL_STOP_SIGMASK))
107                         child->jobctl |= SIGSTOP;
108         }
109
110         /*
111          * If transition to TASK_STOPPED is pending or in TASK_TRACED, kick
112          * @child in the butt.  Note that @resume should be used iff @child
113          * is in TASK_TRACED; otherwise, we might unduly disrupt
114          * TASK_KILLABLE sleeps.
115          */
116         if (child->jobctl & JOBCTL_STOP_PENDING || task_is_traced(child))
117                 ptrace_signal_wake_up(child, true);
118
119         spin_unlock(&child->sighand->siglock);
120 }
121
122 /* Ensure that nothing can wake it up, even SIGKILL */
123 static bool ptrace_freeze_traced(struct task_struct *task)
124 {
125         bool ret = false;
126
127         /* Lockless, nobody but us can set this flag */
128         if (task->jobctl & JOBCTL_LISTENING)
129                 return ret;
130
131         spin_lock_irq(&task->sighand->siglock);
132         if (task_is_traced(task) && !__fatal_signal_pending(task)) {
133                 task->state = __TASK_TRACED;
134                 ret = true;
135         }
136         spin_unlock_irq(&task->sighand->siglock);
137
138         return ret;
139 }
140
141 static void ptrace_unfreeze_traced(struct task_struct *task)
142 {
143         if (task->state != __TASK_TRACED)
144                 return;
145
146         WARN_ON(!task->ptrace || task->parent != current);
147
148         spin_lock_irq(&task->sighand->siglock);
149         if (__fatal_signal_pending(task))
150                 wake_up_state(task, __TASK_TRACED);
151         else
152                 task->state = TASK_TRACED;
153         spin_unlock_irq(&task->sighand->siglock);
154 }
155
156 /**
157  * ptrace_check_attach - check whether ptracee is ready for ptrace operation
158  * @child: ptracee to check for
159  * @ignore_state: don't check whether @child is currently %TASK_TRACED
160  *
161  * Check whether @child is being ptraced by %current and ready for further
162  * ptrace operations.  If @ignore_state is %false, @child also should be in
163  * %TASK_TRACED state and on return the child is guaranteed to be traced
164  * and not executing.  If @ignore_state is %true, @child can be in any
165  * state.
166  *
167  * CONTEXT:
168  * Grabs and releases tasklist_lock and @child->sighand->siglock.
169  *
170  * RETURNS:
171  * 0 on success, -ESRCH if %child is not ready.
172  */
173 static int ptrace_check_attach(struct task_struct *child, bool ignore_state)
174 {
175         int ret = -ESRCH;
176
177         /*
178          * We take the read lock around doing both checks to close a
179          * possible race where someone else was tracing our child and
180          * detached between these two checks.  After this locked check,
181          * we are sure that this is our traced child and that can only
182          * be changed by us so it's not changing right after this.
183          */
184         read_lock(&tasklist_lock);
185         if (child->ptrace && child->parent == current) {
186                 WARN_ON(child->state == __TASK_TRACED);
187                 /*
188                  * child->sighand can't be NULL, release_task()
189                  * does ptrace_unlink() before __exit_signal().
190                  */
191                 if (ignore_state || ptrace_freeze_traced(child))
192                         ret = 0;
193         }
194         read_unlock(&tasklist_lock);
195
196         if (!ret && !ignore_state) {
197                 if (!wait_task_inactive(child, __TASK_TRACED)) {
198                         /*
199                          * This can only happen if may_ptrace_stop() fails and
200                          * ptrace_stop() changes ->state back to TASK_RUNNING,
201                          * so we should not worry about leaking __TASK_TRACED.
202                          */
203                         WARN_ON(child->state == __TASK_TRACED);
204                         ret = -ESRCH;
205                 }
206         }
207
208         return ret;
209 }
210
211 static int ptrace_has_cap(struct user_namespace *ns, unsigned int mode)
212 {
213         if (mode & PTRACE_MODE_NOAUDIT)
214                 return has_ns_capability_noaudit(current, ns, CAP_SYS_PTRACE);
215         else
216                 return has_ns_capability(current, ns, CAP_SYS_PTRACE);
217 }
218
219 /* Returns 0 on success, -errno on denial. */
220 static int __ptrace_may_access(struct task_struct *task, unsigned int mode)
221 {
222         const struct cred *cred = current_cred(), *tcred;
223         int dumpable = 0;
224         kuid_t caller_uid;
225         kgid_t caller_gid;
226
227         if (!(mode & PTRACE_MODE_FSCREDS) == !(mode & PTRACE_MODE_REALCREDS)) {
228                 WARN(1, "denying ptrace access check without PTRACE_MODE_*CREDS\n");
229                 return -EPERM;
230         }
231
232         /* May we inspect the given task?
233          * This check is used both for attaching with ptrace
234          * and for allowing access to sensitive information in /proc.
235          *
236          * ptrace_attach denies several cases that /proc allows
237          * because setting up the necessary parent/child relationship
238          * or halting the specified task is impossible.
239          */
240
241         /* Don't let security modules deny introspection */
242         if (same_thread_group(task, current))
243                 return 0;
244         rcu_read_lock();
245         if (mode & PTRACE_MODE_FSCREDS) {
246                 caller_uid = cred->fsuid;
247                 caller_gid = cred->fsgid;
248         } else {
249                 /*
250                  * Using the euid would make more sense here, but something
251                  * in userland might rely on the old behavior, and this
252                  * shouldn't be a security problem since
253                  * PTRACE_MODE_REALCREDS implies that the caller explicitly
254                  * used a syscall that requests access to another process
255                  * (and not a filesystem syscall to procfs).
256                  */
257                 caller_uid = cred->uid;
258                 caller_gid = cred->gid;
259         }
260         tcred = __task_cred(task);
261         if (uid_eq(caller_uid, tcred->euid) &&
262             uid_eq(caller_uid, tcred->suid) &&
263             uid_eq(caller_uid, tcred->uid)  &&
264             gid_eq(caller_gid, tcred->egid) &&
265             gid_eq(caller_gid, tcred->sgid) &&
266             gid_eq(caller_gid, tcred->gid))
267                 goto ok;
268         if (ptrace_has_cap(tcred->user_ns, mode))
269                 goto ok;
270         rcu_read_unlock();
271         return -EPERM;
272 ok:
273         rcu_read_unlock();
274         smp_rmb();
275         if (task->mm)
276                 dumpable = get_dumpable(task->mm);
277         rcu_read_lock();
278         if (dumpable != SUID_DUMP_USER &&
279             !ptrace_has_cap(__task_cred(task)->user_ns, mode)) {
280                 rcu_read_unlock();
281                 return -EPERM;
282         }
283         rcu_read_unlock();
284
285         return security_ptrace_access_check(task, mode);
286 }
287
288 bool ptrace_may_access(struct task_struct *task, unsigned int mode)
289 {
290         int err;
291         task_lock(task);
292         err = __ptrace_may_access(task, mode);
293         task_unlock(task);
294         return !err;
295 }
296
297 static int ptrace_attach(struct task_struct *task, long request,
298                          unsigned long addr,
299                          unsigned long flags)
300 {
301         bool seize = (request == PTRACE_SEIZE);
302         int retval;
303
304         retval = -EIO;
305         if (seize) {
306                 if (addr != 0)
307                         goto out;
308                 if (flags & ~(unsigned long)PTRACE_O_MASK)
309                         goto out;
310                 flags = PT_PTRACED | PT_SEIZED | (flags << PT_OPT_FLAG_SHIFT);
311         } else {
312                 flags = PT_PTRACED;
313         }
314
315         audit_ptrace(task);
316
317         retval = -EPERM;
318         if (unlikely(task->flags & PF_KTHREAD))
319                 goto out;
320         if (same_thread_group(task, current))
321                 goto out;
322
323         /*
324          * Protect exec's credential calculations against our interference;
325          * SUID, SGID and LSM creds get determined differently
326          * under ptrace.
327          */
328         retval = -ERESTARTNOINTR;
329         if (mutex_lock_interruptible(&task->signal->cred_guard_mutex))
330                 goto out;
331
332         task_lock(task);
333         retval = __ptrace_may_access(task, PTRACE_MODE_ATTACH_REALCREDS);
334         task_unlock(task);
335         if (retval)
336                 goto unlock_creds;
337
338         write_lock_irq(&tasklist_lock);
339         retval = -EPERM;
340         if (unlikely(task->exit_state))
341                 goto unlock_tasklist;
342         if (task->ptrace)
343                 goto unlock_tasklist;
344
345         if (seize)
346                 flags |= PT_SEIZED;
347         rcu_read_lock();
348         if (ns_capable(__task_cred(task)->user_ns, CAP_SYS_PTRACE))
349                 flags |= PT_PTRACE_CAP;
350         rcu_read_unlock();
351         task->ptrace = flags;
352
353         __ptrace_link(task, current);
354
355         /* SEIZE doesn't trap tracee on attach */
356         if (!seize)
357                 send_sig_info(SIGSTOP, SEND_SIG_FORCED, task);
358
359         spin_lock(&task->sighand->siglock);
360
361         /*
362          * If the task is already STOPPED, set JOBCTL_TRAP_STOP and
363          * TRAPPING, and kick it so that it transits to TRACED.  TRAPPING
364          * will be cleared if the child completes the transition or any
365          * event which clears the group stop states happens.  We'll wait
366          * for the transition to complete before returning from this
367          * function.
368          *
369          * This hides STOPPED -> RUNNING -> TRACED transition from the
370          * attaching thread but a different thread in the same group can
371          * still observe the transient RUNNING state.  IOW, if another
372          * thread's WNOHANG wait(2) on the stopped tracee races against
373          * ATTACH, the wait(2) may fail due to the transient RUNNING.
374          *
375          * The following task_is_stopped() test is safe as both transitions
376          * in and out of STOPPED are protected by siglock.
377          */
378         if (task_is_stopped(task) &&
379             task_set_jobctl_pending(task, JOBCTL_TRAP_STOP | JOBCTL_TRAPPING))
380                 signal_wake_up_state(task, __TASK_STOPPED);
381
382         spin_unlock(&task->sighand->siglock);
383
384         retval = 0;
385 unlock_tasklist:
386         write_unlock_irq(&tasklist_lock);
387 unlock_creds:
388         mutex_unlock(&task->signal->cred_guard_mutex);
389 out:
390         if (!retval) {
391                 /*
392                  * We do not bother to change retval or clear JOBCTL_TRAPPING
393                  * if wait_on_bit() was interrupted by SIGKILL. The tracer will
394                  * not return to user-mode, it will exit and clear this bit in
395                  * __ptrace_unlink() if it wasn't already cleared by the tracee;
396                  * and until then nobody can ptrace this task.
397                  */
398                 wait_on_bit(&task->jobctl, JOBCTL_TRAPPING_BIT, TASK_KILLABLE);
399                 proc_ptrace_connector(task, PTRACE_ATTACH);
400         }
401
402         return retval;
403 }
404
405 /**
406  * ptrace_traceme  --  helper for PTRACE_TRACEME
407  *
408  * Performs checks and sets PT_PTRACED.
409  * Should be used by all ptrace implementations for PTRACE_TRACEME.
410  */
411 static int ptrace_traceme(void)
412 {
413         int ret = -EPERM;
414
415         write_lock_irq(&tasklist_lock);
416         /* Are we already being traced? */
417         if (!current->ptrace) {
418                 ret = security_ptrace_traceme(current->parent);
419                 /*
420                  * Check PF_EXITING to ensure ->real_parent has not passed
421                  * exit_ptrace(). Otherwise we don't report the error but
422                  * pretend ->real_parent untraces us right after return.
423                  */
424                 if (!ret && !(current->real_parent->flags & PF_EXITING)) {
425                         current->ptrace = PT_PTRACED;
426                         __ptrace_link(current, current->real_parent);
427                 }
428         }
429         write_unlock_irq(&tasklist_lock);
430
431         return ret;
432 }
433
434 /*
435  * Called with irqs disabled, returns true if childs should reap themselves.
436  */
437 static int ignoring_children(struct sighand_struct *sigh)
438 {
439         int ret;
440         spin_lock(&sigh->siglock);
441         ret = (sigh->action[SIGCHLD-1].sa.sa_handler == SIG_IGN) ||
442               (sigh->action[SIGCHLD-1].sa.sa_flags & SA_NOCLDWAIT);
443         spin_unlock(&sigh->siglock);
444         return ret;
445 }
446
447 /*
448  * Called with tasklist_lock held for writing.
449  * Unlink a traced task, and clean it up if it was a traced zombie.
450  * Return true if it needs to be reaped with release_task().
451  * (We can't call release_task() here because we already hold tasklist_lock.)
452  *
453  * If it's a zombie, our attachedness prevented normal parent notification
454  * or self-reaping.  Do notification now if it would have happened earlier.
455  * If it should reap itself, return true.
456  *
457  * If it's our own child, there is no notification to do. But if our normal
458  * children self-reap, then this child was prevented by ptrace and we must
459  * reap it now, in that case we must also wake up sub-threads sleeping in
460  * do_wait().
461  */
462 static bool __ptrace_detach(struct task_struct *tracer, struct task_struct *p)
463 {
464         bool dead;
465
466         __ptrace_unlink(p);
467
468         if (p->exit_state != EXIT_ZOMBIE)
469                 return false;
470
471         dead = !thread_group_leader(p);
472
473         if (!dead && thread_group_empty(p)) {
474                 if (!same_thread_group(p->real_parent, tracer))
475                         dead = do_notify_parent(p, p->exit_signal);
476                 else if (ignoring_children(tracer->sighand)) {
477                         __wake_up_parent(p, tracer);
478                         dead = true;
479                 }
480         }
481         /* Mark it as in the process of being reaped. */
482         if (dead)
483                 p->exit_state = EXIT_DEAD;
484         return dead;
485 }
486
487 static int ptrace_detach(struct task_struct *child, unsigned int data)
488 {
489         if (!valid_signal(data))
490                 return -EIO;
491
492         /* Architecture-specific hardware disable .. */
493         ptrace_disable(child);
494
495         write_lock_irq(&tasklist_lock);
496         /*
497          * We rely on ptrace_freeze_traced(). It can't be killed and
498          * untraced by another thread, it can't be a zombie.
499          */
500         WARN_ON(!child->ptrace || child->exit_state);
501         /*
502          * tasklist_lock avoids the race with wait_task_stopped(), see
503          * the comment in ptrace_resume().
504          */
505         child->exit_code = data;
506         __ptrace_detach(current, child);
507         write_unlock_irq(&tasklist_lock);
508
509         proc_ptrace_connector(child, PTRACE_DETACH);
510
511         return 0;
512 }
513
514 /*
515  * Detach all tasks we were using ptrace on. Called with tasklist held
516  * for writing.
517  */
518 void exit_ptrace(struct task_struct *tracer, struct list_head *dead)
519 {
520         struct task_struct *p, *n;
521
522         list_for_each_entry_safe(p, n, &tracer->ptraced, ptrace_entry) {
523                 if (unlikely(p->ptrace & PT_EXITKILL))
524                         send_sig_info(SIGKILL, SEND_SIG_FORCED, p);
525
526                 if (__ptrace_detach(tracer, p))
527                         list_add(&p->ptrace_entry, dead);
528         }
529 }
530
531 int ptrace_readdata(struct task_struct *tsk, unsigned long src, char __user *dst, int len)
532 {
533         int copied = 0;
534
535         while (len > 0) {
536                 char buf[128];
537                 int this_len, retval;
538
539                 this_len = (len > sizeof(buf)) ? sizeof(buf) : len;
540                 retval = access_process_vm(tsk, src, buf, this_len, 0);
541                 if (!retval) {
542                         if (copied)
543                                 break;
544                         return -EIO;
545                 }
546                 if (copy_to_user(dst, buf, retval))
547                         return -EFAULT;
548                 copied += retval;
549                 src += retval;
550                 dst += retval;
551                 len -= retval;
552         }
553         return copied;
554 }
555
556 int ptrace_writedata(struct task_struct *tsk, char __user *src, unsigned long dst, int len)
557 {
558         int copied = 0;
559
560         while (len > 0) {
561                 char buf[128];
562                 int this_len, retval;
563
564                 this_len = (len > sizeof(buf)) ? sizeof(buf) : len;
565                 if (copy_from_user(buf, src, this_len))
566                         return -EFAULT;
567                 retval = access_process_vm(tsk, dst, buf, this_len, 1);
568                 if (!retval) {
569                         if (copied)
570                                 break;
571                         return -EIO;
572                 }
573                 copied += retval;
574                 src += retval;
575                 dst += retval;
576                 len -= retval;
577         }
578         return copied;
579 }
580
581 static int ptrace_setoptions(struct task_struct *child, unsigned long data)
582 {
583         unsigned flags;
584
585         if (data & ~(unsigned long)PTRACE_O_MASK)
586                 return -EINVAL;
587
588         if (unlikely(data & PTRACE_O_SUSPEND_SECCOMP)) {
589                 if (!IS_ENABLED(CONFIG_CHECKPOINT_RESTORE) ||
590                     !IS_ENABLED(CONFIG_SECCOMP))
591                         return -EINVAL;
592
593                 if (!capable(CAP_SYS_ADMIN))
594                         return -EPERM;
595
596                 if (seccomp_mode(&current->seccomp) != SECCOMP_MODE_DISABLED ||
597                     current->ptrace & PT_SUSPEND_SECCOMP)
598                         return -EPERM;
599         }
600
601         /* Avoid intermediate state when all opts are cleared */
602         flags = child->ptrace;
603         flags &= ~(PTRACE_O_MASK << PT_OPT_FLAG_SHIFT);
604         flags |= (data << PT_OPT_FLAG_SHIFT);
605         child->ptrace = flags;
606
607         return 0;
608 }
609
610 static int ptrace_getsiginfo(struct task_struct *child, siginfo_t *info)
611 {
612         unsigned long flags;
613         int error = -ESRCH;
614
615         if (lock_task_sighand(child, &flags)) {
616                 error = -EINVAL;
617                 if (likely(child->last_siginfo != NULL)) {
618                         *info = *child->last_siginfo;
619                         error = 0;
620                 }
621                 unlock_task_sighand(child, &flags);
622         }
623         return error;
624 }
625
626 static int ptrace_setsiginfo(struct task_struct *child, const siginfo_t *info)
627 {
628         unsigned long flags;
629         int error = -ESRCH;
630
631         if (lock_task_sighand(child, &flags)) {
632                 error = -EINVAL;
633                 if (likely(child->last_siginfo != NULL)) {
634                         *child->last_siginfo = *info;
635                         error = 0;
636                 }
637                 unlock_task_sighand(child, &flags);
638         }
639         return error;
640 }
641
642 static int ptrace_peek_siginfo(struct task_struct *child,
643                                 unsigned long addr,
644                                 unsigned long data)
645 {
646         struct ptrace_peeksiginfo_args arg;
647         struct sigpending *pending;
648         struct sigqueue *q;
649         int ret, i;
650
651         ret = copy_from_user(&arg, (void __user *) addr,
652                                 sizeof(struct ptrace_peeksiginfo_args));
653         if (ret)
654                 return -EFAULT;
655
656         if (arg.flags & ~PTRACE_PEEKSIGINFO_SHARED)
657                 return -EINVAL; /* unknown flags */
658
659         if (arg.nr < 0)
660                 return -EINVAL;
661
662         if (arg.flags & PTRACE_PEEKSIGINFO_SHARED)
663                 pending = &child->signal->shared_pending;
664         else
665                 pending = &child->pending;
666
667         for (i = 0; i < arg.nr; ) {
668                 siginfo_t info;
669                 s32 off = arg.off + i;
670
671                 spin_lock_irq(&child->sighand->siglock);
672                 list_for_each_entry(q, &pending->list, list) {
673                         if (!off--) {
674                                 copy_siginfo(&info, &q->info);
675                                 break;
676                         }
677                 }
678                 spin_unlock_irq(&child->sighand->siglock);
679
680                 if (off >= 0) /* beyond the end of the list */
681                         break;
682
683 #ifdef CONFIG_COMPAT
684                 if (unlikely(in_compat_syscall())) {
685                         compat_siginfo_t __user *uinfo = compat_ptr(data);
686
687                         if (copy_siginfo_to_user32(uinfo, &info) ||
688                             __put_user(info.si_code, &uinfo->si_code)) {
689                                 ret = -EFAULT;
690                                 break;
691                         }
692
693                 } else
694 #endif
695                 {
696                         siginfo_t __user *uinfo = (siginfo_t __user *) data;
697
698                         if (copy_siginfo_to_user(uinfo, &info) ||
699                             __put_user(info.si_code, &uinfo->si_code)) {
700                                 ret = -EFAULT;
701                                 break;
702                         }
703                 }
704
705                 data += sizeof(siginfo_t);
706                 i++;
707
708                 if (signal_pending(current))
709                         break;
710
711                 cond_resched();
712         }
713
714         if (i > 0)
715                 return i;
716
717         return ret;
718 }
719
720 #ifdef PTRACE_SINGLESTEP
721 #define is_singlestep(request)          ((request) == PTRACE_SINGLESTEP)
722 #else
723 #define is_singlestep(request)          0
724 #endif
725
726 #ifdef PTRACE_SINGLEBLOCK
727 #define is_singleblock(request)         ((request) == PTRACE_SINGLEBLOCK)
728 #else
729 #define is_singleblock(request)         0
730 #endif
731
732 #ifdef PTRACE_SYSEMU
733 #define is_sysemu_singlestep(request)   ((request) == PTRACE_SYSEMU_SINGLESTEP)
734 #else
735 #define is_sysemu_singlestep(request)   0
736 #endif
737
738 static int ptrace_resume(struct task_struct *child, long request,
739                          unsigned long data)
740 {
741         bool need_siglock;
742
743         if (!valid_signal(data))
744                 return -EIO;
745
746         if (request == PTRACE_SYSCALL)
747                 set_tsk_thread_flag(child, TIF_SYSCALL_TRACE);
748         else
749                 clear_tsk_thread_flag(child, TIF_SYSCALL_TRACE);
750
751 #ifdef TIF_SYSCALL_EMU
752         if (request == PTRACE_SYSEMU || request == PTRACE_SYSEMU_SINGLESTEP)
753                 set_tsk_thread_flag(child, TIF_SYSCALL_EMU);
754         else
755                 clear_tsk_thread_flag(child, TIF_SYSCALL_EMU);
756 #endif
757
758         if (is_singleblock(request)) {
759                 if (unlikely(!arch_has_block_step()))
760                         return -EIO;
761                 user_enable_block_step(child);
762         } else if (is_singlestep(request) || is_sysemu_singlestep(request)) {
763                 if (unlikely(!arch_has_single_step()))
764                         return -EIO;
765                 user_enable_single_step(child);
766         } else {
767                 user_disable_single_step(child);
768         }
769
770         /*
771          * Change ->exit_code and ->state under siglock to avoid the race
772          * with wait_task_stopped() in between; a non-zero ->exit_code will
773          * wrongly look like another report from tracee.
774          *
775          * Note that we need siglock even if ->exit_code == data and/or this
776          * status was not reported yet, the new status must not be cleared by
777          * wait_task_stopped() after resume.
778          *
779          * If data == 0 we do not care if wait_task_stopped() reports the old
780          * status and clears the code too; this can't race with the tracee, it
781          * takes siglock after resume.
782          */
783         need_siglock = data && !thread_group_empty(current);
784         if (need_siglock)
785                 spin_lock_irq(&child->sighand->siglock);
786         child->exit_code = data;
787         wake_up_state(child, __TASK_TRACED);
788         if (need_siglock)
789                 spin_unlock_irq(&child->sighand->siglock);
790
791         return 0;
792 }
793
794 #ifdef CONFIG_HAVE_ARCH_TRACEHOOK
795
796 static const struct user_regset *
797 find_regset(const struct user_regset_view *view, unsigned int type)
798 {
799         const struct user_regset *regset;
800         int n;
801
802         for (n = 0; n < view->n; ++n) {
803                 regset = view->regsets + n;
804                 if (regset->core_note_type == type)
805                         return regset;
806         }
807
808         return NULL;
809 }
810
811 static int ptrace_regset(struct task_struct *task, int req, unsigned int type,
812                          struct iovec *kiov)
813 {
814         const struct user_regset_view *view = task_user_regset_view(task);
815         const struct user_regset *regset = find_regset(view, type);
816         int regset_no;
817
818         if (!regset || (kiov->iov_len % regset->size) != 0)
819                 return -EINVAL;
820
821         regset_no = regset - view->regsets;
822         kiov->iov_len = min(kiov->iov_len,
823                             (__kernel_size_t) (regset->n * regset->size));
824
825         if (req == PTRACE_GETREGSET)
826                 return copy_regset_to_user(task, view, regset_no, 0,
827                                            kiov->iov_len, kiov->iov_base);
828         else
829                 return copy_regset_from_user(task, view, regset_no, 0,
830                                              kiov->iov_len, kiov->iov_base);
831 }
832
833 /*
834  * This is declared in linux/regset.h and defined in machine-dependent
835  * code.  We put the export here, near the primary machine-neutral use,
836  * to ensure no machine forgets it.
837  */
838 EXPORT_SYMBOL_GPL(task_user_regset_view);
839 #endif
840
841 int ptrace_request(struct task_struct *child, long request,
842                    unsigned long addr, unsigned long data)
843 {
844         bool seized = child->ptrace & PT_SEIZED;
845         int ret = -EIO;
846         siginfo_t siginfo, *si;
847         void __user *datavp = (void __user *) data;
848         unsigned long __user *datalp = datavp;
849         unsigned long flags;
850
851         switch (request) {
852         case PTRACE_PEEKTEXT:
853         case PTRACE_PEEKDATA:
854                 return generic_ptrace_peekdata(child, addr, data);
855         case PTRACE_POKETEXT:
856         case PTRACE_POKEDATA:
857                 return generic_ptrace_pokedata(child, addr, data);
858
859 #ifdef PTRACE_OLDSETOPTIONS
860         case PTRACE_OLDSETOPTIONS:
861 #endif
862         case PTRACE_SETOPTIONS:
863                 ret = ptrace_setoptions(child, data);
864                 break;
865         case PTRACE_GETEVENTMSG:
866                 ret = put_user(child->ptrace_message, datalp);
867                 break;
868
869         case PTRACE_PEEKSIGINFO:
870                 ret = ptrace_peek_siginfo(child, addr, data);
871                 break;
872
873         case PTRACE_GETSIGINFO:
874                 ret = ptrace_getsiginfo(child, &siginfo);
875                 if (!ret)
876                         ret = copy_siginfo_to_user(datavp, &siginfo);
877                 break;
878
879         case PTRACE_SETSIGINFO:
880                 if (copy_from_user(&siginfo, datavp, sizeof siginfo))
881                         ret = -EFAULT;
882                 else
883                         ret = ptrace_setsiginfo(child, &siginfo);
884                 break;
885
886         case PTRACE_GETSIGMASK:
887                 if (addr != sizeof(sigset_t)) {
888                         ret = -EINVAL;
889                         break;
890                 }
891
892                 if (copy_to_user(datavp, &child->blocked, sizeof(sigset_t)))
893                         ret = -EFAULT;
894                 else
895                         ret = 0;
896
897                 break;
898
899         case PTRACE_SETSIGMASK: {
900                 sigset_t new_set;
901
902                 if (addr != sizeof(sigset_t)) {
903                         ret = -EINVAL;
904                         break;
905                 }
906
907                 if (copy_from_user(&new_set, datavp, sizeof(sigset_t))) {
908                         ret = -EFAULT;
909                         break;
910                 }
911
912                 sigdelsetmask(&new_set, sigmask(SIGKILL)|sigmask(SIGSTOP));
913
914                 /*
915                  * Every thread does recalc_sigpending() after resume, so
916                  * retarget_shared_pending() and recalc_sigpending() are not
917                  * called here.
918                  */
919                 spin_lock_irq(&child->sighand->siglock);
920                 child->blocked = new_set;
921                 spin_unlock_irq(&child->sighand->siglock);
922
923                 ret = 0;
924                 break;
925         }
926
927         case PTRACE_INTERRUPT:
928                 /*
929                  * Stop tracee without any side-effect on signal or job
930                  * control.  At least one trap is guaranteed to happen
931                  * after this request.  If @child is already trapped, the
932                  * current trap is not disturbed and another trap will
933                  * happen after the current trap is ended with PTRACE_CONT.
934                  *
935                  * The actual trap might not be PTRACE_EVENT_STOP trap but
936                  * the pending condition is cleared regardless.
937                  */
938                 if (unlikely(!seized || !lock_task_sighand(child, &flags)))
939                         break;
940
941                 /*
942                  * INTERRUPT doesn't disturb existing trap sans one
943                  * exception.  If ptracer issued LISTEN for the current
944                  * STOP, this INTERRUPT should clear LISTEN and re-trap
945                  * tracee into STOP.
946                  */
947                 if (likely(task_set_jobctl_pending(child, JOBCTL_TRAP_STOP)))
948                         ptrace_signal_wake_up(child, child->jobctl & JOBCTL_LISTENING);
949
950                 unlock_task_sighand(child, &flags);
951                 ret = 0;
952                 break;
953
954         case PTRACE_LISTEN:
955                 /*
956                  * Listen for events.  Tracee must be in STOP.  It's not
957                  * resumed per-se but is not considered to be in TRACED by
958                  * wait(2) or ptrace(2).  If an async event (e.g. group
959                  * stop state change) happens, tracee will enter STOP trap
960                  * again.  Alternatively, ptracer can issue INTERRUPT to
961                  * finish listening and re-trap tracee into STOP.
962                  */
963                 if (unlikely(!seized || !lock_task_sighand(child, &flags)))
964                         break;
965
966                 si = child->last_siginfo;
967                 if (likely(si && (si->si_code >> 8) == PTRACE_EVENT_STOP)) {
968                         child->jobctl |= JOBCTL_LISTENING;
969                         /*
970                          * If NOTIFY is set, it means event happened between
971                          * start of this trap and now.  Trigger re-trap.
972                          */
973                         if (child->jobctl & JOBCTL_TRAP_NOTIFY)
974                                 ptrace_signal_wake_up(child, true);
975                         ret = 0;
976                 }
977                 unlock_task_sighand(child, &flags);
978                 break;
979
980         case PTRACE_DETACH:      /* detach a process that was attached. */
981                 ret = ptrace_detach(child, data);
982                 break;
983
984 #ifdef CONFIG_BINFMT_ELF_FDPIC
985         case PTRACE_GETFDPIC: {
986                 struct mm_struct *mm = get_task_mm(child);
987                 unsigned long tmp = 0;
988
989                 ret = -ESRCH;
990                 if (!mm)
991                         break;
992
993                 switch (addr) {
994                 case PTRACE_GETFDPIC_EXEC:
995                         tmp = mm->context.exec_fdpic_loadmap;
996                         break;
997                 case PTRACE_GETFDPIC_INTERP:
998                         tmp = mm->context.interp_fdpic_loadmap;
999                         break;
1000                 default:
1001                         break;
1002                 }
1003                 mmput(mm);
1004
1005                 ret = put_user(tmp, datalp);
1006                 break;
1007         }
1008 #endif
1009
1010 #ifdef PTRACE_SINGLESTEP
1011         case PTRACE_SINGLESTEP:
1012 #endif
1013 #ifdef PTRACE_SINGLEBLOCK
1014         case PTRACE_SINGLEBLOCK:
1015 #endif
1016 #ifdef PTRACE_SYSEMU
1017         case PTRACE_SYSEMU:
1018         case PTRACE_SYSEMU_SINGLESTEP:
1019 #endif
1020         case PTRACE_SYSCALL:
1021         case PTRACE_CONT:
1022                 return ptrace_resume(child, request, data);
1023
1024         case PTRACE_KILL:
1025                 if (child->exit_state)  /* already dead */
1026                         return 0;
1027                 return ptrace_resume(child, request, SIGKILL);
1028
1029 #ifdef CONFIG_HAVE_ARCH_TRACEHOOK
1030         case PTRACE_GETREGSET:
1031         case PTRACE_SETREGSET: {
1032                 struct iovec kiov;
1033                 struct iovec __user *uiov = datavp;
1034
1035                 if (!access_ok(VERIFY_WRITE, uiov, sizeof(*uiov)))
1036                         return -EFAULT;
1037
1038                 if (__get_user(kiov.iov_base, &uiov->iov_base) ||
1039                     __get_user(kiov.iov_len, &uiov->iov_len))
1040                         return -EFAULT;
1041
1042                 ret = ptrace_regset(child, request, addr, &kiov);
1043                 if (!ret)
1044                         ret = __put_user(kiov.iov_len, &uiov->iov_len);
1045                 break;
1046         }
1047 #endif
1048
1049         case PTRACE_SECCOMP_GET_FILTER:
1050                 ret = seccomp_get_filter(child, addr, datavp);
1051                 break;
1052
1053         default:
1054                 break;
1055         }
1056
1057         return ret;
1058 }
1059
1060 static struct task_struct *ptrace_get_task_struct(pid_t pid)
1061 {
1062         struct task_struct *child;
1063
1064         rcu_read_lock();
1065         child = find_task_by_vpid(pid);
1066         if (child)
1067                 get_task_struct(child);
1068         rcu_read_unlock();
1069
1070         if (!child)
1071                 return ERR_PTR(-ESRCH);
1072         return child;
1073 }
1074
1075 #ifndef arch_ptrace_attach
1076 #define arch_ptrace_attach(child)       do { } while (0)
1077 #endif
1078
1079 SYSCALL_DEFINE4(ptrace, long, request, long, pid, unsigned long, addr,
1080                 unsigned long, data)
1081 {
1082         struct task_struct *child;
1083         long ret;
1084
1085         if (request == PTRACE_TRACEME) {
1086                 ret = ptrace_traceme();
1087                 if (!ret)
1088                         arch_ptrace_attach(current);
1089                 goto out;
1090         }
1091
1092         child = ptrace_get_task_struct(pid);
1093         if (IS_ERR(child)) {
1094                 ret = PTR_ERR(child);
1095                 goto out;
1096         }
1097
1098         if (request == PTRACE_ATTACH || request == PTRACE_SEIZE) {
1099                 ret = ptrace_attach(child, request, addr, data);
1100                 /*
1101                  * Some architectures need to do book-keeping after
1102                  * a ptrace attach.
1103                  */
1104                 if (!ret)
1105                         arch_ptrace_attach(child);
1106                 goto out_put_task_struct;
1107         }
1108
1109         ret = ptrace_check_attach(child, request == PTRACE_KILL ||
1110                                   request == PTRACE_INTERRUPT);
1111         if (ret < 0)
1112                 goto out_put_task_struct;
1113
1114         ret = arch_ptrace(child, request, addr, data);
1115         if (ret || request != PTRACE_DETACH)
1116                 ptrace_unfreeze_traced(child);
1117
1118  out_put_task_struct:
1119         put_task_struct(child);
1120  out:
1121         return ret;
1122 }
1123
1124 int generic_ptrace_peekdata(struct task_struct *tsk, unsigned long addr,
1125                             unsigned long data)
1126 {
1127         unsigned long tmp;
1128         int copied;
1129
1130         copied = access_process_vm(tsk, addr, &tmp, sizeof(tmp), 0);
1131         if (copied != sizeof(tmp))
1132                 return -EIO;
1133         return put_user(tmp, (unsigned long __user *)data);
1134 }
1135
1136 int generic_ptrace_pokedata(struct task_struct *tsk, unsigned long addr,
1137                             unsigned long data)
1138 {
1139         int copied;
1140
1141         copied = access_process_vm(tsk, addr, &data, sizeof(data), 1);
1142         return (copied == sizeof(data)) ? 0 : -EIO;
1143 }
1144
1145 #if defined CONFIG_COMPAT
1146
1147 int compat_ptrace_request(struct task_struct *child, compat_long_t request,
1148                           compat_ulong_t addr, compat_ulong_t data)
1149 {
1150         compat_ulong_t __user *datap = compat_ptr(data);
1151         compat_ulong_t word;
1152         siginfo_t siginfo;
1153         int ret;
1154
1155         switch (request) {
1156         case PTRACE_PEEKTEXT:
1157         case PTRACE_PEEKDATA:
1158                 ret = access_process_vm(child, addr, &word, sizeof(word), 0);
1159                 if (ret != sizeof(word))
1160                         ret = -EIO;
1161                 else
1162                         ret = put_user(word, datap);
1163                 break;
1164
1165         case PTRACE_POKETEXT:
1166         case PTRACE_POKEDATA:
1167                 ret = access_process_vm(child, addr, &data, sizeof(data), 1);
1168                 ret = (ret != sizeof(data) ? -EIO : 0);
1169                 break;
1170
1171         case PTRACE_GETEVENTMSG:
1172                 ret = put_user((compat_ulong_t) child->ptrace_message, datap);
1173                 break;
1174
1175         case PTRACE_GETSIGINFO:
1176                 ret = ptrace_getsiginfo(child, &siginfo);
1177                 if (!ret)
1178                         ret = copy_siginfo_to_user32(
1179                                 (struct compat_siginfo __user *) datap,
1180                                 &siginfo);
1181                 break;
1182
1183         case PTRACE_SETSIGINFO:
1184                 memset(&siginfo, 0, sizeof siginfo);
1185                 if (copy_siginfo_from_user32(
1186                             &siginfo, (struct compat_siginfo __user *) datap))
1187                         ret = -EFAULT;
1188                 else
1189                         ret = ptrace_setsiginfo(child, &siginfo);
1190                 break;
1191 #ifdef CONFIG_HAVE_ARCH_TRACEHOOK
1192         case PTRACE_GETREGSET:
1193         case PTRACE_SETREGSET:
1194         {
1195                 struct iovec kiov;
1196                 struct compat_iovec __user *uiov =
1197                         (struct compat_iovec __user *) datap;
1198                 compat_uptr_t ptr;
1199                 compat_size_t len;
1200
1201                 if (!access_ok(VERIFY_WRITE, uiov, sizeof(*uiov)))
1202                         return -EFAULT;
1203
1204                 if (__get_user(ptr, &uiov->iov_base) ||
1205                     __get_user(len, &uiov->iov_len))
1206                         return -EFAULT;
1207
1208                 kiov.iov_base = compat_ptr(ptr);
1209                 kiov.iov_len = len;
1210
1211                 ret = ptrace_regset(child, request, addr, &kiov);
1212                 if (!ret)
1213                         ret = __put_user(kiov.iov_len, &uiov->iov_len);
1214                 break;
1215         }
1216 #endif
1217
1218         default:
1219                 ret = ptrace_request(child, request, addr, data);
1220         }
1221
1222         return ret;
1223 }
1224
1225 COMPAT_SYSCALL_DEFINE4(ptrace, compat_long_t, request, compat_long_t, pid,
1226                        compat_long_t, addr, compat_long_t, data)
1227 {
1228         struct task_struct *child;
1229         long ret;
1230
1231         if (request == PTRACE_TRACEME) {
1232                 ret = ptrace_traceme();
1233                 goto out;
1234         }
1235
1236         child = ptrace_get_task_struct(pid);
1237         if (IS_ERR(child)) {
1238                 ret = PTR_ERR(child);
1239                 goto out;
1240         }
1241
1242         if (request == PTRACE_ATTACH || request == PTRACE_SEIZE) {
1243                 ret = ptrace_attach(child, request, addr, data);
1244                 /*
1245                  * Some architectures need to do book-keeping after
1246                  * a ptrace attach.
1247                  */
1248                 if (!ret)
1249                         arch_ptrace_attach(child);
1250                 goto out_put_task_struct;
1251         }
1252
1253         ret = ptrace_check_attach(child, request == PTRACE_KILL ||
1254                                   request == PTRACE_INTERRUPT);
1255         if (!ret) {
1256                 ret = compat_arch_ptrace(child, request, addr, data);
1257                 if (ret || request != PTRACE_DETACH)
1258                         ptrace_unfreeze_traced(child);
1259         }
1260
1261  out_put_task_struct:
1262         put_task_struct(child);
1263  out:
1264         return ret;
1265 }
1266 #endif  /* CONFIG_COMPAT */