arch/ia64/ia32/sys_ia32.c

   1 /*
   2  * sys_ia32.c: Conversion between 32bit and 64bit native syscalls. Derived from sys_sparc32.c.
   3  *
   4  * Copyright (C) 2000           VA Linux Co
   5  * Copyright (C) 2000           Don Dugger <n0ano@valinux.com>
   6  * Copyright (C) 1999           Arun Sharma <arun.sharma@intel.com>
   7  * Copyright (C) 1997,1998      Jakub Jelinek (jj@sunsite.mff.cuni.cz)
   8  * Copyright (C) 1997           David S. Miller (davem@caip.rutgers.edu)
   9  * Copyright (C) 2000-2003 Hewlett-Packard Co
  10  *      David Mosberger-Tang <davidm@hpl.hp.com>
  11  * Copyright (C) 2004           Gordon Jin <gordon.jin@intel.com>
  12  *
  13  * These routines maintain argument size conversion between 32bit and 64bit
  14  * environment.
  15  */
  16
  17 #include <linux/config.h>
  18 #include <linux/kernel.h>
  19 #include <linux/syscalls.h>
  20 #include <linux/sysctl.h>
  21 #include <linux/sched.h>
  22 #include <linux/fs.h>
  23 #include <linux/file.h>
  24 #include <linux/signal.h>
  25 #include <linux/resource.h>
  26 #include <linux/times.h>
  27 #include <linux/utsname.h>
  28 #include <linux/timex.h>
  29 #include <linux/smp.h>
  30 #include <linux/smp_lock.h>
  31 #include <linux/sem.h>
  32 #include <linux/msg.h>
  33 #include <linux/mm.h>
  34 #include <linux/shm.h>
  35 #include <linux/slab.h>
  36 #include <linux/uio.h>
  37 #include <linux/nfs_fs.h>
  38 #include <linux/quota.h>
  39 #include <linux/sunrpc/svc.h>
  40 #include <linux/nfsd/nfsd.h>
  41 #include <linux/nfsd/cache.h>
  42 #include <linux/nfsd/xdr.h>
  43 #include <linux/nfsd/syscall.h>
  44 #include <linux/poll.h>
  45 #include <linux/eventpoll.h>
  46 #include <linux/personality.h>
  47 #include <linux/ptrace.h>
  48 #include <linux/stat.h>
  49 #include <linux/ipc.h>
  50 #include <linux/compat.h>
  51 #include <linux/vfs.h>
  52 #include <linux/mman.h>
  53
  54 #include <asm/intrinsics.h>
  55 #include <asm/semaphore.h>
  56 #include <asm/types.h>
  57 #include <asm/uaccess.h>
  58 #include <asm/unistd.h>
  59
  60 #include "ia32priv.h"
  61
  62 #include <net/scm.h>
  63 #include <net/sock.h>
  64
  65 #define DEBUG   0
  66
  67 #if DEBUG
  68 # define DBG(fmt...)    printk(KERN_DEBUG fmt)
  69 #else
  70 # define DBG(fmt...)
  71 #endif
  72
  73 #define A(__x)          ((unsigned long)(__x))
  74 #define AA(__x)         ((unsigned long)(__x))
  75 #define ROUND_UP(x,a)   ((__typeof__(x))(((unsigned long)(x) + ((a) - 1)) & ~((a) - 1)))
  76 #define NAME_OFFSET(de) ((int) ((de)->d_name - (char *) (de)))
  77
  78 #define OFFSET4K(a)             ((a) & 0xfff)
  79 #define PAGE_START(addr)        ((addr) & PAGE_MASK)
  80 #define MINSIGSTKSZ_IA32        2048
  81
  82 #define high2lowuid(uid) ((uid) > 65535 ? 65534 : (uid))
  83 #define high2lowgid(gid) ((gid) > 65535 ? 65534 : (gid))
  84
  85 extern unsigned long arch_get_unmapped_area (struct file *, unsigned long, unsigned long,
  86                                              unsigned long, unsigned long);
  87
  88 /*
  89  * Anything that modifies or inspects ia32 user virtual memory must hold this semaphore
  90  * while doing so.
  91  */
  92 /* XXX make per-mm: */
  93 static DECLARE_MUTEX(ia32_mmap_sem);
  94
  95 asmlinkage long
  96 sys32_execve (char *name, compat_uptr_t __user *argv, compat_uptr_t __user *envp, struct pt_regs *regs)
  97 {
  98         long error;
  99         char *filename;
 100         unsigned long old_map_base, old_task_size, tssd;
 101
 102         filename = getname(name);
 103         error = PTR_ERR(filename);
 104         if (IS_ERR(filename))
 105                 return error;
 106
 107         old_map_base  = current->thread.map_base;
 108         old_task_size = current->thread.task_size;
 109         tssd = ia64_get_kr(IA64_KR_TSSD);
 110
 111         /* we may be exec'ing a 64-bit process: reset map base, task-size, and io-base: */
 112         current->thread.map_base  = DEFAULT_MAP_BASE;
 113         current->thread.task_size = DEFAULT_TASK_SIZE;
 114         ia64_set_kr(IA64_KR_IO_BASE, current->thread.old_iob);
 115         ia64_set_kr(IA64_KR_TSSD, current->thread.old_k1);
 116
 117         error = compat_do_execve(filename, argv, envp, regs);
 118         putname(filename);
 119
 120         if (error < 0) {
 121                 /* oops, execve failed, switch back to old values... */
 122                 ia64_set_kr(IA64_KR_IO_BASE, IA32_IOBASE);
 123                 ia64_set_kr(IA64_KR_TSSD, tssd);
 124                 current->thread.map_base  = old_map_base;
 125                 current->thread.task_size = old_task_size;
 126         }
 127
 128         return error;
 129 }
 130
 131 int cp_compat_stat(struct kstat *stat, struct compat_stat *ubuf)
 132 {
 133         int err;
 134
 135         if ((u64) stat->size > MAX_NON_LFS ||
 136             !old_valid_dev(stat->dev) ||
 137             !old_valid_dev(stat->rdev))
 138                 return -EOVERFLOW;
 139
 140         if (clear_user(ubuf, sizeof(*ubuf)))
 141                 return -EFAULT;
 142
 143         err  = __put_user(old_encode_dev(stat->dev), &ubuf->st_dev);
 144         err |= __put_user(stat->ino, &ubuf->st_ino);
 145         err |= __put_user(stat->mode, &ubuf->st_mode);
 146         err |= __put_user(stat->nlink, &ubuf->st_nlink);
 147         err |= __put_user(high2lowuid(stat->uid), &ubuf->st_uid);
 148         err |= __put_user(high2lowgid(stat->gid), &ubuf->st_gid);
 149         err |= __put_user(old_encode_dev(stat->rdev), &ubuf->st_rdev);
 150         err |= __put_user(stat->size, &ubuf->st_size);
 151         err |= __put_user(stat->atime.tv_sec, &ubuf->st_atime);
 152         err |= __put_user(stat->atime.tv_nsec, &ubuf->st_atime_nsec);
 153         err |= __put_user(stat->mtime.tv_sec, &ubuf->st_mtime);
 154         err |= __put_user(stat->mtime.tv_nsec, &ubuf->st_mtime_nsec);
 155         err |= __put_user(stat->ctime.tv_sec, &ubuf->st_ctime);
 156         err |= __put_user(stat->ctime.tv_nsec, &ubuf->st_ctime_nsec);
 157         err |= __put_user(stat->blksize, &ubuf->st_blksize);
 158         err |= __put_user(stat->blocks, &ubuf->st_blocks);
 159         return err;
 160 }
 161
 162 #if PAGE_SHIFT > IA32_PAGE_SHIFT
 163
 164
 165 static int
 166 get_page_prot (struct vm_area_struct *vma, unsigned long addr)
 167 {
 168         int prot = 0;
 169
 170         if (!vma || vma->vm_start > addr)
 171                 return 0;
 172
 173         if (vma->vm_flags & VM_READ)
 174                 prot |= PROT_READ;
 175         if (vma->vm_flags & VM_WRITE)
 176                 prot |= PROT_WRITE;
 177         if (vma->vm_flags & VM_EXEC)
 178                 prot |= PROT_EXEC;
 179         return prot;
 180 }
 181
 182 /*
 183  * Map a subpage by creating an anonymous page that contains the union of the old page and
 184  * the subpage.
 185  */
 186 static unsigned long
 187 mmap_subpage (struct file *file, unsigned long start, unsigned long end, int prot, int flags,
 188               loff_t off)
 189 {
 190         void *page = NULL;
 191         struct inode *inode;
 192         unsigned long ret = 0;
 193         struct vm_area_struct *vma = find_vma(current->mm, start);
 194         int old_prot = get_page_prot(vma, start);
 195
 196         DBG("mmap_subpage(file=%p,start=0x%lx,end=0x%lx,prot=%x,flags=%x,off=0x%llx)\n",
 197             file, start, end, prot, flags, off);
 198
 199
 200         /* Optimize the case where the old mmap and the new mmap are both anonymous */
 201         if ((old_prot & PROT_WRITE) && (flags & MAP_ANONYMOUS) && !vma->vm_file) {
 202                 if (clear_user((void *) start, end - start)) {
 203                         ret = -EFAULT;
 204                         goto out;
 205                 }
 206                 goto skip_mmap;
 207         }
 208
 209         page = (void *) get_zeroed_page(GFP_KERNEL);
 210         if (!page)
 211                 return -ENOMEM;
 212
 213         if (old_prot)
 214                 copy_from_user(page, (void *) PAGE_START(start), PAGE_SIZE);
 215
 216         down_write(&current->mm->mmap_sem);
 217         {
 218                 ret = do_mmap(0, PAGE_START(start), PAGE_SIZE, prot | PROT_WRITE,
 219                               flags | MAP_FIXED | MAP_ANONYMOUS, 0);
 220         }
 221         up_write(&current->mm->mmap_sem);
 222
 223         if (IS_ERR((void *) ret))
 224                 goto out;
 225
 226         if (old_prot) {
 227                 /* copy back the old page contents.  */
 228                 if (offset_in_page(start))
 229                         copy_to_user((void *) PAGE_START(start), page, offset_in_page(start));
 230                 if (offset_in_page(end))
 231                         copy_to_user((void *) end, page + offset_in_page(end),
 232                                      PAGE_SIZE - offset_in_page(end));
 233         }
 234
 235         if (!(flags & MAP_ANONYMOUS)) {
 236                 /* read the file contents */
 237                 inode = file->f_dentry->d_inode;
 238                 if (!inode->i_fop || !file->f_op->read
 239                     || ((*file->f_op->read)(file, (char *) start, end - start, &off) < 0))
 240                 {
 241                         ret = -EINVAL;
 242                         goto out;
 243                 }
 244         }
 245
 246  skip_mmap:
 247         if (!(prot & PROT_WRITE))
 248                 ret = sys_mprotect(PAGE_START(start), PAGE_SIZE, prot | old_prot);
 249   out:
 250         if (page)
 251                 free_page((unsigned long) page);
 252         return ret;
 253 }
 254
 255 /* SLAB cache for partial_page structures */
 256 kmem_cache_t *partial_page_cachep;
 257
 258 /*
 259  * init partial_page_list.
 260  * return 0 means kmalloc fail.
 261  */
 262 struct partial_page_list*
 263 ia32_init_pp_list(void)
 264 {
 265         struct partial_page_list *p;
 266
 267         if ((p = kmalloc(sizeof(*p), GFP_KERNEL)) == NULL)
 268                 return p;
 269         p->pp_head = 0;
 270         p->ppl_rb = RB_ROOT;
 271         p->pp_hint = 0;
 272         atomic_set(&p->pp_count, 1);
 273         return p;
 274 }
 275
 276 /*
 277  * Search for the partial page with @start in partial page list @ppl.
 278  * If finds the partial page, return the found partial page.
 279  * Else, return 0 and provide @pprev, @rb_link, @rb_parent to
 280  * be used by later __ia32_insert_pp().
 281  */
 282 static struct partial_page *
 283 __ia32_find_pp(struct partial_page_list *ppl, unsigned int start,
 284         struct partial_page **pprev, struct rb_node ***rb_link,
 285         struct rb_node **rb_parent)
 286 {
 287         struct partial_page *pp;
 288         struct rb_node **__rb_link, *__rb_parent, *rb_prev;
 289
 290         pp = ppl->pp_hint;
 291         if (pp && pp->base == start)
 292                 return pp;
 293
 294         __rb_link = &ppl->ppl_rb.rb_node;
 295         rb_prev = __rb_parent = NULL;
 296
 297         while (*__rb_link) {
 298                 __rb_parent = *__rb_link;
 299                 pp = rb_entry(__rb_parent, struct partial_page, pp_rb);
 300
 301                 if (pp->base == start) {
 302                         ppl->pp_hint = pp;
 303                         return pp;
 304                 } else if (pp->base < start) {
 305                         rb_prev = __rb_parent;
 306                         __rb_link = &__rb_parent->rb_right;
 307                 } else {
 308                         __rb_link = &__rb_parent->rb_left;
 309                 }
 310         }
 311
 312         *rb_link = __rb_link;
 313         *rb_parent = __rb_parent;
 314         *pprev = NULL;
 315         if (rb_prev)
 316                 *pprev = rb_entry(rb_prev, struct partial_page, pp_rb);
 317         return NULL;
 318 }
 319
 320 /*
 321  * insert @pp into @ppl.
 322  */
 323 static void
 324 __ia32_insert_pp(struct partial_page_list *ppl, struct partial_page *pp,
 325          struct partial_page *prev, struct rb_node **rb_link,
 326         struct rb_node *rb_parent)
 327 {
 328         /* link list */
 329         if (prev) {
 330                 pp->next = prev->next;
 331                 prev->next = pp;
 332         } else {
 333                 ppl->pp_head = pp;
 334                 if (rb_parent)
 335                         pp->next = rb_entry(rb_parent,
 336                                 struct partial_page, pp_rb);
 337                 else
 338                         pp->next = NULL;
 339         }
 340
 341         /* link rb */
 342         rb_link_node(&pp->pp_rb, rb_parent, rb_link);
 343         rb_insert_color(&pp->pp_rb, &ppl->ppl_rb);
 344
 345         ppl->pp_hint = pp;
 346 }
 347
 348 /*
 349  * delete @pp from partial page list @ppl.
 350  */
 351 static void
 352 __ia32_delete_pp(struct partial_page_list *ppl, struct partial_page *pp,
 353         struct partial_page *prev)
 354 {
 355         if (prev) {
 356                 prev->next = pp->next;
 357                 if (ppl->pp_hint == pp)
 358                         ppl->pp_hint = prev;
 359         } else {
 360                 ppl->pp_head = pp->next;
 361                 if (ppl->pp_hint == pp)
 362                         ppl->pp_hint = pp->next;
 363         }
 364         rb_erase(&pp->pp_rb, &ppl->ppl_rb);
 365         kmem_cache_free(partial_page_cachep, pp);
 366 }
 367
 368 static struct partial_page *
 369 __pp_prev(struct partial_page *pp)
 370 {
 371         struct rb_node *prev = rb_prev(&pp->pp_rb);
 372         if (prev)
 373                 return rb_entry(prev, struct partial_page, pp_rb);
 374         else
 375                 return NULL;
 376 }
 377
 378 /*
 379  * Delete partial pages with address between @start and @end.
 380  * @start and @end are page aligned.
 381  */
 382 static void
 383 __ia32_delete_pp_range(unsigned int start, unsigned int end)
 384 {
 385         struct partial_page *pp, *prev;
 386         struct rb_node **rb_link, *rb_parent;
 387
 388         if (start >= end)
 389                 return;
 390
 391         pp = __ia32_find_pp(current->thread.ppl, start, &prev,
 392                                         &rb_link, &rb_parent);
 393         if (pp)
 394                 prev = __pp_prev(pp);
 395         else {
 396                 if (prev)
 397                         pp = prev->next;
 398                 else
 399                         pp = current->thread.ppl->pp_head;
 400         }
 401
 402         while (pp && pp->base < end) {
 403                 struct partial_page *tmp = pp->next;
 404                 __ia32_delete_pp(current->thread.ppl, pp, prev);
 405                 pp = tmp;
 406         }
 407 }
 408
 409 /*
 410  * Set the range between @start and @end in bitmap.
 411  * @start and @end should be IA32 page aligned and in the same IA64 page.
 412  */
 413 static int
 414 __ia32_set_pp(unsigned int start, unsigned int end, int flags)
 415 {
 416         struct partial_page *pp, *prev;
 417         struct rb_node ** rb_link, *rb_parent;
 418         unsigned int pstart, start_bit, end_bit, i;
 419
 420         pstart = PAGE_START(start);
 421         start_bit = (start % PAGE_SIZE) / IA32_PAGE_SIZE;
 422         end_bit = (end % PAGE_SIZE) / IA32_PAGE_SIZE;
 423         if (end_bit == 0)
 424                 end_bit = PAGE_SIZE / IA32_PAGE_SIZE;
 425         pp = __ia32_find_pp(current->thread.ppl, pstart, &prev,
 426                                         &rb_link, &rb_parent);
 427         if (pp) {
 428                 for (i = start_bit; i < end_bit; i++)
 429                         set_bit(i, &pp->bitmap);
 430                 /*
 431                  * Check: if this partial page has been set to a full page,
 432                  * then delete it.
 433                  */
 434                 if (find_first_zero_bit(&pp->bitmap, sizeof(pp->bitmap)*8) >=
 435                                 PAGE_SIZE/IA32_PAGE_SIZE) {
 436                         __ia32_delete_pp(current->thread.ppl, pp, __pp_prev(pp));
 437                 }
 438                 return 0;
 439         }
 440
 441         /*
 442          * MAP_FIXED may lead to overlapping mmap.
 443          * In this case, the requested mmap area may already mmaped as a full
 444          * page. So check vma before adding a new partial page.
 445          */
 446         if (flags & MAP_FIXED) {
 447                 struct vm_area_struct *vma = find_vma(current->mm, pstart);
 448                 if (vma && vma->vm_start <= pstart)
 449                         return 0;
 450         }
 451
 452         /* new a partial_page */
 453         pp = kmem_cache_alloc(partial_page_cachep, GFP_KERNEL);
 454         if (!pp)
 455                 return -ENOMEM;
 456         pp->base = pstart;
 457         pp->bitmap = 0;
 458         for (i=start_bit; i<end_bit; i++)
 459                 set_bit(i, &(pp->bitmap));
 460         pp->next = NULL;
 461         __ia32_insert_pp(current->thread.ppl, pp, prev, rb_link, rb_parent);
 462         return 0;
 463 }
 464
 465 /*
 466  * @start and @end should be IA32 page aligned, but don't need to be in the
 467  * same IA64 page. Split @start and @end to make sure they're in the same IA64
 468  * page, then call __ia32_set_pp().
 469  */
 470 static void
 471 ia32_set_pp(unsigned int start, unsigned int end, int flags)
 472 {
 473         down_write(&current->mm->mmap_sem);
 474         if (flags & MAP_FIXED) {
 475                 /*
 476                  * MAP_FIXED may lead to overlapping mmap. When this happens,
 477                  * a series of complete IA64 pages results in deletion of
 478                  * old partial pages in that range.
 479                  */
 480                 __ia32_delete_pp_range(PAGE_ALIGN(start), PAGE_START(end));
 481         }
 482
 483         if (end < PAGE_ALIGN(start)) {
 484                 __ia32_set_pp(start, end, flags);
 485         } else {
 486                 if (offset_in_page(start))
 487                         __ia32_set_pp(start, PAGE_ALIGN(start), flags);
 488                 if (offset_in_page(end))
 489                         __ia32_set_pp(PAGE_START(end), end, flags);
 490         }
 491         up_write(&current->mm->mmap_sem);
 492 }
 493
 494 /*
 495  * Unset the range between @start and @end in bitmap.
 496  * @start and @end should be IA32 page aligned and in the same IA64 page.
 497  * After doing that, if the bitmap is 0, then free the page and return 1,
 498  *      else return 0;
 499  * If not find the partial page in the list, then
 500  *      If the vma exists, then the full page is set to a partial page;
 501  *      Else return -ENOMEM.
 502  */
 503 static int
 504 __ia32_unset_pp(unsigned int start, unsigned int end)
 505 {
 506         struct partial_page *pp, *prev;
 507         struct rb_node ** rb_link, *rb_parent;
 508         unsigned int pstart, start_bit, end_bit, i;
 509         struct vm_area_struct *vma;
 510
 511         pstart = PAGE_START(start);
 512         start_bit = (start % PAGE_SIZE) / IA32_PAGE_SIZE;
 513         end_bit = (end % PAGE_SIZE) / IA32_PAGE_SIZE;
 514         if (end_bit == 0)
 515                 end_bit = PAGE_SIZE / IA32_PAGE_SIZE;
 516
 517         pp = __ia32_find_pp(current->thread.ppl, pstart, &prev,
 518                                         &rb_link, &rb_parent);
 519         if (pp) {
 520                 for (i = start_bit; i < end_bit; i++)
 521                         clear_bit(i, &pp->bitmap);
 522                 if (pp->bitmap == 0) {
 523                         __ia32_delete_pp(current->thread.ppl, pp, __pp_prev(pp));
 524                         return 1;
 525                 }
 526                 return 0;
 527         }
 528
 529         vma = find_vma(current->mm, pstart);
 530         if (!vma || vma->vm_start > pstart) {
 531                 return -ENOMEM;
 532         }
 533
 534         /* new a partial_page */
 535         pp = kmem_cache_alloc(partial_page_cachep, GFP_KERNEL);
 536         if (!pp)
 537                 return -ENOMEM;
 538         pp->base = pstart;
 539         pp->bitmap = 0;
 540         for (i = 0; i < start_bit; i++)
 541                 set_bit(i, &(pp->bitmap));
 542         for (i = end_bit; i < PAGE_SIZE / IA32_PAGE_SIZE; i++)
 543                 set_bit(i, &(pp->bitmap));
 544         pp->next = NULL;
 545         __ia32_insert_pp(current->thread.ppl, pp, prev, rb_link, rb_parent);
 546         return 0;
 547 }
 548
 549 /*
 550  * Delete pp between PAGE_ALIGN(start) and PAGE_START(end) by calling
 551  * __ia32_delete_pp_range(). Unset possible partial pages by calling
 552  * __ia32_unset_pp().
 553  * The returned value see __ia32_unset_pp().
 554  */
 555 static int
 556 ia32_unset_pp(unsigned int *startp, unsigned int *endp)
 557 {
 558         unsigned int start = *startp, end = *endp;
 559         int ret = 0;
 560
 561         down_write(&current->mm->mmap_sem);
 562
 563         __ia32_delete_pp_range(PAGE_ALIGN(start), PAGE_START(end));
 564
 565         if (end < PAGE_ALIGN(start)) {
 566                 ret = __ia32_unset_pp(start, end);
 567                 if (ret == 1) {
 568                         *startp = PAGE_START(start);
 569                         *endp = PAGE_ALIGN(end);
 570                 }
 571                 if (ret == 0) {
 572                         /* to shortcut sys_munmap() in sys32_munmap() */
 573                         *startp = PAGE_START(start);
 574                         *endp = PAGE_START(end);
 575                 }
 576         } else {
 577                 if (offset_in_page(start)) {
 578                         ret = __ia32_unset_pp(start, PAGE_ALIGN(start));
 579                         if (ret == 1)
 580                                 *startp = PAGE_START(start);
 581                         if (ret == 0)
 582                                 *startp = PAGE_ALIGN(start);
 583                         if (ret < 0)
 584                                 goto out;
 585                 }
 586                 if (offset_in_page(end)) {
 587                         ret = __ia32_unset_pp(PAGE_START(end), end);
 588                         if (ret == 1)
 589                                 *endp = PAGE_ALIGN(end);
 590                         if (ret == 0)
 591                                 *endp = PAGE_START(end);
 592                 }
 593         }
 594
 595  out:
 596         up_write(&current->mm->mmap_sem);
 597         return ret;
 598 }
 599
 600 /*
 601  * Compare the range between @start and @end with bitmap in partial page.
 602  * @start and @end should be IA32 page aligned and in the same IA64 page.
 603  */
 604 static int
 605 __ia32_compare_pp(unsigned int start, unsigned int end)
 606 {
 607         struct partial_page *pp, *prev;
 608         struct rb_node ** rb_link, *rb_parent;
 609         unsigned int pstart, start_bit, end_bit, size;
 610         unsigned int first_bit, next_zero_bit;  /* the first range in bitmap */
 611
 612         pstart = PAGE_START(start);
 613
 614         pp = __ia32_find_pp(current->thread.ppl, pstart, &prev,
 615                                         &rb_link, &rb_parent);
 616         if (!pp)
 617                 return 1;
 618
 619         start_bit = (start % PAGE_SIZE) / IA32_PAGE_SIZE;
 620         end_bit = (end % PAGE_SIZE) / IA32_PAGE_SIZE;
 621         size = sizeof(pp->bitmap) * 8;
 622         first_bit = find_first_bit(&pp->bitmap, size);
 623         next_zero_bit = find_next_zero_bit(&pp->bitmap, size, first_bit);
 624         if ((start_bit < first_bit) || (end_bit > next_zero_bit)) {
 625                 /* exceeds the first range in bitmap */
 626                 return -ENOMEM;
 627         } else if ((start_bit == first_bit) && (end_bit == next_zero_bit)) {
 628                 first_bit = find_next_bit(&pp->bitmap, size, next_zero_bit);
 629                 if ((next_zero_bit < first_bit) && (first_bit < size))
 630                         return 1;       /* has next range */
 631                 else
 632                         return 0;       /* no next range */
 633         } else
 634                 return 1;
 635 }
 636
 637 /*
 638  * @start and @end should be IA32 page aligned, but don't need to be in the
 639  * same IA64 page. Split @start and @end to make sure they're in the same IA64
 640  * page, then call __ia32_compare_pp().
 641  *
 642  * Take this as example: the range is the 1st and 2nd 4K page.
 643  * Return 0 if they fit bitmap exactly, i.e. bitmap = 00000011;
 644  * Return 1 if the range doesn't cover whole bitmap, e.g. bitmap = 00001111;
 645  * Return -ENOMEM if the range exceeds the bitmap, e.g. bitmap = 00000001 or
 646  *      bitmap = 00000101.
 647  */
 648 static int
 649 ia32_compare_pp(unsigned int *startp, unsigned int *endp)
 650 {
 651         unsigned int start = *startp, end = *endp;
 652         int retval = 0;
 653
 654         down_write(&current->mm->mmap_sem);
 655
 656         if (end < PAGE_ALIGN(start)) {
 657                 retval = __ia32_compare_pp(start, end);
 658                 if (retval == 0) {
 659                         *startp = PAGE_START(start);
 660                         *endp = PAGE_ALIGN(end);
 661                 }
 662         } else {
 663                 if (offset_in_page(start)) {
 664                         retval = __ia32_compare_pp(start,
 665                                                    PAGE_ALIGN(start));
 666                         if (retval == 0)
 667                                 *startp = PAGE_START(start);
 668                         if (retval < 0)
 669                                 goto out;
 670                 }
 671                 if (offset_in_page(end)) {
 672                         retval = __ia32_compare_pp(PAGE_START(end), end);
 673                         if (retval == 0)
 674                                 *endp = PAGE_ALIGN(end);
 675                 }
 676         }
 677
 678  out:
 679         up_write(&current->mm->mmap_sem);
 680         return retval;
 681 }
 682
 683 static void
 684 __ia32_drop_pp_list(struct partial_page_list *ppl)
 685 {
 686         struct partial_page *pp = ppl->pp_head;
 687
 688         while (pp) {
 689                 struct partial_page *next = pp->next;
 690                 kmem_cache_free(partial_page_cachep, pp);
 691                 pp = next;
 692         }
 693
 694         kfree(ppl);
 695 }
 696
 697 void
 698 ia32_drop_partial_page_list(struct task_struct *task)
 699 {
 700         struct partial_page_list* ppl = task->thread.ppl;
 701
 702         if (ppl && atomic_dec_and_test(&ppl->pp_count))
 703                 __ia32_drop_pp_list(ppl);
 704 }
 705
 706 /*
 707  * Copy current->thread.ppl to ppl (already initialized).
 708  */
 709 static int
 710 __ia32_copy_pp_list(struct partial_page_list *ppl)
 711 {
 712         struct partial_page *pp, *tmp, *prev;
 713         struct rb_node **rb_link, *rb_parent;
 714
 715         ppl->pp_head = NULL;
 716         ppl->pp_hint = NULL;
 717         ppl->ppl_rb = RB_ROOT;
 718         rb_link = &ppl->ppl_rb.rb_node;
 719         rb_parent = NULL;
 720         prev = NULL;
 721
 722         for (pp = current->thread.ppl->pp_head; pp; pp = pp->next) {
 723                 tmp = kmem_cache_alloc(partial_page_cachep, GFP_KERNEL);
 724                 if (!tmp)
 725                         return -ENOMEM;
 726                 *tmp = *pp;
 727                 __ia32_insert_pp(ppl, tmp, prev, rb_link, rb_parent);
 728                 prev = tmp;
 729                 rb_link = &tmp->pp_rb.rb_right;
 730                 rb_parent = &tmp->pp_rb;
 731         }
 732         return 0;
 733 }
 734
 735 int
 736 ia32_copy_partial_page_list(struct task_struct *p, unsigned long clone_flags)
 737 {
 738         int retval = 0;
 739
 740         if (clone_flags & CLONE_VM) {
 741                 atomic_inc(&current->thread.ppl->pp_count);
 742                 p->thread.ppl = current->thread.ppl;
 743         } else {
 744                 p->thread.ppl = ia32_init_pp_list();
 745                 if (!p->thread.ppl)
 746                         return -ENOMEM;
 747                 down_write(&current->mm->mmap_sem);
 748                 {
 749                         retval = __ia32_copy_pp_list(p->thread.ppl);
 750                 }
 751                 up_write(&current->mm->mmap_sem);
 752         }
 753
 754         return retval;
 755 }
 756
 757 static unsigned long
 758 emulate_mmap (struct file *file, unsigned long start, unsigned long len, int prot, int flags,
 759               loff_t off)
 760 {
 761         unsigned long tmp, end, pend, pstart, ret, is_congruent, fudge = 0;
 762         struct inode *inode;
 763         loff_t poff;
 764
 765         end = start + len;
 766         pstart = PAGE_START(start);
 767         pend = PAGE_ALIGN(end);
 768
 769         if (flags & MAP_FIXED) {
 770                 ia32_set_pp((unsigned int)start, (unsigned int)end, flags);
 771                 if (start > pstart) {
 772                         if (flags & MAP_SHARED)
 773                                 printk(KERN_INFO
 774                                        "%s(%d): emulate_mmap() can't share head (addr=0x%lx)\n",
 775                                        current->comm, current->pid, start);
 776                         ret = mmap_subpage(file, start, min(PAGE_ALIGN(start), end), prot, flags,
 777                                            off);
 778                         if (IS_ERR((void *) ret))
 779                                 return ret;
 780                         pstart += PAGE_SIZE;
 781                         if (pstart >= pend)
 782                                 goto out;       /* done */
 783                 }
 784                 if (end < pend) {
 785                         if (flags & MAP_SHARED)
 786                                 printk(KERN_INFO
 787                                        "%s(%d): emulate_mmap() can't share tail (end=0x%lx)\n",
 788                                        current->comm, current->pid, end);
 789                         ret = mmap_subpage(file, max(start, PAGE_START(end)), end, prot, flags,
 790                                            (off + len) - offset_in_page(end));
 791                         if (IS_ERR((void *) ret))
 792                                 return ret;
 793                         pend -= PAGE_SIZE;
 794                         if (pstart >= pend)
 795                                 goto out;       /* done */
 796                 }
 797         } else {
 798                 /*
 799                  * If a start address was specified, use it if the entire rounded out area
 800                  * is available.
 801                  */
 802                 if (start && !pstart)
 803                         fudge = 1;      /* handle case of mapping to range (0,PAGE_SIZE) */
 804                 tmp = arch_get_unmapped_area(file, pstart - fudge, pend - pstart, 0, flags);
 805                 if (tmp != pstart) {
 806                         pstart = tmp;
 807                         start = pstart + offset_in_page(off);   /* make start congruent with off */
 808                         end = start + len;
 809                         pend = PAGE_ALIGN(end);
 810                 }
 811         }
 812
 813         poff = off + (pstart - start);  /* note: (pstart - start) may be negative */
 814         is_congruent = (flags & MAP_ANONYMOUS) || (offset_in_page(poff) == 0);
 815
 816         if ((flags & MAP_SHARED) && !is_congruent)
 817                 printk(KERN_INFO "%s(%d): emulate_mmap() can't share contents of incongruent mmap "
 818                        "(addr=0x%lx,off=0x%llx)\n", current->comm, current->pid, start, off);
 819
 820         DBG("mmap_body: mapping [0x%lx-0x%lx) %s with poff 0x%llx\n", pstart, pend,
 821             is_congruent ? "congruent" : "not congruent", poff);
 822
 823         down_write(&current->mm->mmap_sem);
 824         {
 825                 if (!(flags & MAP_ANONYMOUS) && is_congruent)
 826                         ret = do_mmap(file, pstart, pend - pstart, prot, flags | MAP_FIXED, poff);
 827                 else
 828                         ret = do_mmap(0, pstart, pend - pstart,
 829                                       prot | ((flags & MAP_ANONYMOUS) ? 0 : PROT_WRITE),
 830                                       flags | MAP_FIXED | MAP_ANONYMOUS, 0);
 831         }
 832         up_write(&current->mm->mmap_sem);
 833
 834         if (IS_ERR((void *) ret))
 835                 return ret;
 836
 837         if (!is_congruent) {
 838                 /* read the file contents */
 839                 inode = file->f_dentry->d_inode;
 840                 if (!inode->i_fop || !file->f_op->read
 841                     || ((*file->f_op->read)(file, (char *) pstart, pend - pstart, &poff) < 0))
 842                 {
 843                         sys_munmap(pstart, pend - pstart);
 844                         return -EINVAL;
 845                 }
 846                 if (!(prot & PROT_WRITE) && sys_mprotect(pstart, pend - pstart, prot) < 0)
 847                         return -EINVAL;
 848         }
 849
 850         if (!(flags & MAP_FIXED))
 851                 ia32_set_pp((unsigned int)start, (unsigned int)end, flags);
 852 out:
 853         return start;
 854 }
 855
 856 #endif /* PAGE_SHIFT > IA32_PAGE_SHIFT */
 857
 858 static inline unsigned int
 859 get_prot32 (unsigned int prot)
 860 {
 861         if (prot & PROT_WRITE)
 862                 /* on x86, PROT_WRITE implies PROT_READ which implies PROT_EEC */
 863                 prot |= PROT_READ | PROT_WRITE | PROT_EXEC;
 864         else if (prot & (PROT_READ | PROT_EXEC))
 865                 /* on x86, there is no distinction between PROT_READ and PROT_EXEC */
 866                 prot |= (PROT_READ | PROT_EXEC);
 867
 868         return prot;
 869 }
 870
 871 unsigned long
 872 ia32_do_mmap (struct file *file, unsigned long addr, unsigned long len, int prot, int flags,
 873               loff_t offset)
 874 {
 875         DBG("ia32_do_mmap(file=%p,addr=0x%lx,len=0x%lx,prot=%x,flags=%x,offset=0x%llx)\n",
 876             file, addr, len, prot, flags, offset);
 877
 878         if (file && (!file->f_op || !file->f_op->mmap))
 879                 return -ENODEV;
 880
 881         len = IA32_PAGE_ALIGN(len);
 882         if (len == 0)
 883                 return addr;
 884
 885         if (len > IA32_PAGE_OFFSET || addr > IA32_PAGE_OFFSET - len)
 886         {
 887                 if (flags & MAP_FIXED)
 888                         return -ENOMEM;
 889                 else
 890                 return -EINVAL;
 891         }
 892
 893         if (OFFSET4K(offset))
 894                 return -EINVAL;
 895
 896         prot = get_prot32(prot);
 897
 898 #if PAGE_SHIFT > IA32_PAGE_SHIFT
 899         down(&ia32_mmap_sem);
 900         {
 901                 addr = emulate_mmap(file, addr, len, prot, flags, offset);
 902         }
 903         up(&ia32_mmap_sem);
 904 #else
 905         down_write(&current->mm->mmap_sem);
 906         {
 907                 addr = do_mmap(file, addr, len, prot, flags, offset);
 908         }
 909         up_write(&current->mm->mmap_sem);
 910 #endif
 911         DBG("ia32_do_mmap: returning 0x%lx\n", addr);
 912         return addr;
 913 }
 914
 915 /*
 916  * Linux/i386 didn't use to be able to handle more than 4 system call parameters, so these
 917  * system calls used a memory block for parameter passing..
 918  */
 919
 920 struct mmap_arg_struct {
 921         unsigned int addr;
 922         unsigned int len;
 923         unsigned int prot;
 924         unsigned int flags;
 925         unsigned int fd;
 926         unsigned int offset;
 927 };
 928
 929 asmlinkage long
 930 sys32_mmap (struct mmap_arg_struct *arg)
 931 {
 932         struct mmap_arg_struct a;
 933         struct file *file = NULL;
 934         unsigned long addr;
 935         int flags;
 936
 937         if (copy_from_user(&a, arg, sizeof(a)))
 938                 return -EFAULT;
 939
 940         if (OFFSET4K(a.offset))
 941                 return -EINVAL;
 942
 943         flags = a.flags;
 944
 945         flags &= ~(MAP_EXECUTABLE | MAP_DENYWRITE);
 946         if (!(flags & MAP_ANONYMOUS)) {
 947                 file = fget(a.fd);
 948                 if (!file)
 949                         return -EBADF;
 950         }
 951
 952         addr = ia32_do_mmap(file, a.addr, a.len, a.prot, flags, a.offset);
 953
 954         if (file)
 955                 fput(file);
 956         return addr;
 957 }
 958
 959 asmlinkage long
 960 sys32_mmap2 (unsigned int addr, unsigned int len, unsigned int prot, unsigned int flags,
 961              unsigned int fd, unsigned int pgoff)
 962 {
 963         struct file *file = NULL;
 964         unsigned long retval;
 965
 966         flags &= ~(MAP_EXECUTABLE | MAP_DENYWRITE);
 967         if (!(flags & MAP_ANONYMOUS)) {
 968                 file = fget(fd);
 969                 if (!file)
 970                         return -EBADF;
 971         }
 972
 973         retval = ia32_do_mmap(file, addr, len, prot, flags,
 974                               (unsigned long) pgoff << IA32_PAGE_SHIFT);
 975
 976         if (file)
 977                 fput(file);
 978         return retval;
 979 }
 980
 981 asmlinkage long
 982 sys32_munmap (unsigned int start, unsigned int len)
 983 {
 984         unsigned int end = start + len;
 985         long ret;
 986
 987 #if PAGE_SHIFT <= IA32_PAGE_SHIFT
 988         ret = sys_munmap(start, end - start);
 989 #else
 990         if (OFFSET4K(start))
 991                 return -EINVAL;
 992
 993         end = IA32_PAGE_ALIGN(end);
 994         if (start >= end)
 995                 return -EINVAL;
 996
 997         ret = ia32_unset_pp(&start, &end);
 998         if (ret < 0)
 999                 return ret;
1000
1001         if (start >= end)
1002                 return 0;
1003
1004         down(&ia32_mmap_sem);
1005         {
1006                 ret = sys_munmap(start, end - start);
1007         }
1008         up(&ia32_mmap_sem);
1009 #endif
1010         return ret;
1011 }
1012
1013 #if PAGE_SHIFT > IA32_PAGE_SHIFT
1014
1015 /*
1016  * When mprotect()ing a partial page, we set the permission to the union of the old
1017  * settings and the new settings.  In other words, it's only possible to make access to a
1018  * partial page less restrictive.
1019  */
1020 static long
1021 mprotect_subpage (unsigned long address, int new_prot)
1022 {
1023         int old_prot;
1024         struct vm_area_struct *vma;
1025
1026         if (new_prot == PROT_NONE)
1027                 return 0;               /* optimize case where nothing changes... */
1028         vma = find_vma(current->mm, address);
1029         old_prot = get_page_prot(vma, address);
1030         return sys_mprotect(address, PAGE_SIZE, new_prot | old_prot);
1031 }
1032
1033 #endif /* PAGE_SHIFT > IA32_PAGE_SHIFT */
1034
1035 asmlinkage long
1036 sys32_mprotect (unsigned int start, unsigned int len, int prot)
1037 {
1038         unsigned int end = start + len;
1039 #if PAGE_SHIFT > IA32_PAGE_SHIFT
1040         long retval = 0;
1041 #endif
1042
1043         prot = get_prot32(prot);
1044
1045 #if PAGE_SHIFT <= IA32_PAGE_SHIFT
1046         return sys_mprotect(start, end - start, prot);
1047 #else
1048         if (OFFSET4K(start))
1049                 return -EINVAL;
1050
1051         end = IA32_PAGE_ALIGN(end);
1052         if (end < start)
1053                 return -EINVAL;
1054
1055         retval = ia32_compare_pp(&start, &end);
1056
1057         if (retval < 0)
1058                 return retval;
1059
1060         down(&ia32_mmap_sem);
1061         {
1062                 if (offset_in_page(start)) {
1063                         /* start address is 4KB aligned but not page aligned. */
1064                         retval = mprotect_subpage(PAGE_START(start), prot);
1065                         if (retval < 0)
1066                                 goto out;
1067
1068                         start = PAGE_ALIGN(start);
1069                         if (start >= end)
1070                                 goto out;       /* retval is already zero... */
1071                 }
1072
1073                 if (offset_in_page(end)) {
1074                         /* end address is 4KB aligned but not page aligned. */
1075                         retval = mprotect_subpage(PAGE_START(end), prot);
1076                         if (retval < 0)
1077                                 goto out;
1078
1079                         end = PAGE_START(end);
1080                 }
1081                 retval = sys_mprotect(start, end - start, prot);
1082         }
1083   out:
1084         up(&ia32_mmap_sem);
1085         return retval;
1086 #endif
1087 }
1088
1089 asmlinkage long
1090 sys32_mremap (unsigned int addr, unsigned int old_len, unsigned int new_len,
1091                 unsigned int flags, unsigned int new_addr)
1092 {
1093         long ret;
1094
1095 #if PAGE_SHIFT <= IA32_PAGE_SHIFT
1096         ret = sys_mremap(addr, old_len, new_len, flags, new_addr);
1097 #else
1098         unsigned int old_end, new_end;
1099
1100         if (OFFSET4K(addr))
1101                 return -EINVAL;
1102
1103         old_len = IA32_PAGE_ALIGN(old_len);
1104         new_len = IA32_PAGE_ALIGN(new_len);
1105         old_end = addr + old_len;
1106         new_end = addr + new_len;
1107
1108         if (!new_len)
1109                 return -EINVAL;
1110
1111         if ((flags & MREMAP_FIXED) && (OFFSET4K(new_addr)))
1112                 return -EINVAL;
1113
1114         if (old_len >= new_len) {
1115                 ret = sys32_munmap(addr + new_len, old_len - new_len);
1116                 if (ret && old_len != new_len)
1117                         return ret;
1118                 ret = addr;
1119                 if (!(flags & MREMAP_FIXED) || (new_addr == addr))
1120                         return ret;
1121                 old_len = new_len;
1122         }
1123
1124         addr = PAGE_START(addr);
1125         old_len = PAGE_ALIGN(old_end) - addr;
1126         new_len = PAGE_ALIGN(new_end) - addr;
1127
1128         down(&ia32_mmap_sem);
1129         {
1130                 ret = sys_mremap(addr, old_len, new_len, flags, new_addr);
1131         }
1132         up(&ia32_mmap_sem);
1133
1134         if ((ret >= 0) && (old_len < new_len)) {
1135                 /* mremap expanded successfully */
1136                 ia32_set_pp(old_end, new_end, flags);
1137         }
1138 #endif
1139         return ret;
1140 }
1141
1142 asmlinkage long
1143 sys32_pipe (int *fd)
1144 {
1145         int retval;
1146         int fds[2];
1147
1148         retval = do_pipe(fds);
1149         if (retval)
1150                 goto out;
1151         if (copy_to_user(fd, fds, sizeof(fds)))
1152                 retval = -EFAULT;
1153   out:
1154         return retval;
1155 }
1156
1157 static inline long
1158 get_tv32 (struct timeval *o, struct compat_timeval *i)
1159 {
1160         return (!access_ok(VERIFY_READ, i, sizeof(*i)) ||
1161                 (__get_user(o->tv_sec, &i->tv_sec) | __get_user(o->tv_usec, &i->tv_usec)));
1162 }
1163
1164 static inline long
1165 put_tv32 (struct compat_timeval *o, struct timeval *i)
1166 {
1167         return (!access_ok(VERIFY_WRITE, o, sizeof(*o)) ||
1168                 (__put_user(i->tv_sec, &o->tv_sec) | __put_user(i->tv_usec, &o->tv_usec)));
1169 }
1170
1171 asmlinkage unsigned long
1172 sys32_alarm (unsigned int seconds)
1173 {
1174         struct itimerval it_new, it_old;
1175         unsigned int oldalarm;
1176
1177         it_new.it_interval.tv_sec = it_new.it_interval.tv_usec = 0;
1178         it_new.it_value.tv_sec = seconds;
1179         it_new.it_value.tv_usec = 0;
1180         do_setitimer(ITIMER_REAL, &it_new, &it_old);
1181         oldalarm = it_old.it_value.tv_sec;
1182         /* ehhh.. We can't return 0 if we have an alarm pending.. */
1183         /* And we'd better return too much than too little anyway */
1184         if (it_old.it_value.tv_usec)
1185                 oldalarm++;
1186         return oldalarm;
1187 }
1188
1189 /* Translations due to time_t size differences.  Which affects all
1190    sorts of things, like timeval and itimerval.  */
1191
1192 extern struct timezone sys_tz;
1193
1194 asmlinkage long
1195 sys32_gettimeofday (struct compat_timeval *tv, struct timezone *tz)
1196 {
1197         if (tv) {
1198                 struct timeval ktv;
1199                 do_gettimeofday(&ktv);
1200                 if (put_tv32(tv, &ktv))
1201                         return -EFAULT;
1202         }
1203         if (tz) {
1204                 if (copy_to_user(tz, &sys_tz, sizeof(sys_tz)))
1205                         return -EFAULT;
1206         }
1207         return 0;
1208 }
1209
1210 asmlinkage long
1211 sys32_settimeofday (struct compat_timeval *tv, struct timezone *tz)
1212 {
1213         struct timeval ktv;
1214         struct timespec kts;
1215         struct timezone ktz;
1216
1217         if (tv) {
1218                 if (get_tv32(&ktv, tv))
1219                         return -EFAULT;
1220                 kts.tv_sec = ktv.tv_sec;
1221                 kts.tv_nsec = ktv.tv_usec * 1000;
1222         }
1223         if (tz) {
1224                 if (copy_from_user(&ktz, tz, sizeof(ktz)))
1225                         return -EFAULT;
1226         }
1227
1228         return do_sys_settimeofday(tv ? &kts : NULL, tz ? &ktz : NULL);
1229 }
1230
1231 struct getdents32_callback {
1232         struct compat_dirent * current_dir;
1233         struct compat_dirent * previous;
1234         int count;
1235         int error;
1236 };
1237
1238 struct readdir32_callback {
1239         struct old_linux32_dirent * dirent;
1240         int count;
1241 };
1242
1243 static int
1244 filldir32 (void *__buf, const char *name, int namlen, loff_t offset, ino_t ino,
1245            unsigned int d_type)
1246 {
1247         struct compat_dirent * dirent;
1248         struct getdents32_callback * buf = (struct getdents32_callback *) __buf;
1249         int reclen = ROUND_UP(NAME_OFFSET(dirent) + namlen + 1, 4);
1250
1251         buf->error = -EINVAL;   /* only used if we fail.. */
1252         if (reclen > buf->count)
1253                 return -EINVAL;
1254         buf->error = -EFAULT;   /* only used if we fail.. */
1255         dirent = buf->previous;
1256         if (dirent)
1257                 if (put_user(offset, &dirent->d_off))
1258                         return -EFAULT;
1259         dirent = buf->current_dir;
1260         buf->previous = dirent;
1261         if (put_user(ino, &dirent->d_ino)
1262             || put_user(reclen, &dirent->d_reclen)
1263             || copy_to_user(dirent->d_name, name, namlen)
1264             || put_user(0, dirent->d_name + namlen))
1265                 return -EFAULT;
1266         dirent = (struct compat_dirent *) ((char *) dirent + reclen);
1267         buf->current_dir = dirent;
1268         buf->count -= reclen;
1269         return 0;
1270 }
1271
1272 asmlinkage long
1273 sys32_getdents (unsigned int fd, struct compat_dirent *dirent, unsigned int count)
1274 {
1275         struct file * file;
1276         struct compat_dirent * lastdirent;
1277         struct getdents32_callback buf;
1278         int error;
1279
1280         error = -EBADF;
1281         file = fget(fd);
1282         if (!file)
1283                 goto out;
1284
1285         buf.current_dir = dirent;
1286         buf.previous = NULL;
1287         buf.count = count;
1288         buf.error = 0;
1289
1290         error = vfs_readdir(file, filldir32, &buf);
1291         if (error < 0)
1292                 goto out_putf;
1293         error = buf.error;
1294         lastdirent = buf.previous;
1295         if (lastdirent) {
1296                 error = -EINVAL;
1297                 if (put_user(file->f_pos, &lastdirent->d_off))
1298                         goto out_putf;
1299                 error = count - buf.count;
1300         }
1301
1302 out_putf:
1303         fput(file);
1304 out:
1305         return error;
1306 }
1307
1308 static int
1309 fillonedir32 (void * __buf, const char * name, int namlen, loff_t offset, ino_t ino,
1310               unsigned int d_type)
1311 {
1312         struct readdir32_callback * buf = (struct readdir32_callback *) __buf;
1313         struct old_linux32_dirent * dirent;
1314
1315         if (buf->count)
1316                 return -EINVAL;
1317         buf->count++;
1318         dirent = buf->dirent;
1319         if (put_user(ino, &dirent->d_ino)
1320             || put_user(offset, &dirent->d_offset)
1321             || put_user(namlen, &dirent->d_namlen)
1322             || copy_to_user(dirent->d_name, name, namlen)
1323             || put_user(0, dirent->d_name + namlen))
1324                 return -EFAULT;
1325         return 0;
1326 }
1327
1328 asmlinkage long
1329 sys32_readdir (unsigned int fd, void *dirent, unsigned int count)
1330 {
1331         int error;
1332         struct file * file;
1333         struct readdir32_callback buf;
1334
1335         error = -EBADF;
1336         file = fget(fd);
1337         if (!file)
1338                 goto out;
1339
1340         buf.count = 0;
1341         buf.dirent = dirent;
1342
1343         error = vfs_readdir(file, fillonedir32, &buf);
1344         if (error >= 0)
1345                 error = buf.count;
1346         fput(file);
1347 out:
1348         return error;
1349 }
1350
1351 struct sel_arg_struct {
1352         unsigned int n;
1353         unsigned int inp;
1354         unsigned int outp;
1355         unsigned int exp;
1356         unsigned int tvp;
1357 };
1358
1359 asmlinkage long
1360 sys32_old_select (struct sel_arg_struct *arg)
1361 {
1362         struct sel_arg_struct a;
1363
1364         if (copy_from_user(&a, arg, sizeof(a)))
1365                 return -EFAULT;
1366         return compat_sys_select(a.n, compat_ptr(a.inp), compat_ptr(a.outp),
1367                                  compat_ptr(a.exp), compat_ptr(a.tvp));
1368 }
1369
1370 #define SEMOP            1
1371 #define SEMGET           2
1372 #define SEMCTL           3
1373 #define SEMTIMEDOP       4
1374 #define MSGSND          11
1375 #define MSGRCV          12
1376 #define MSGGET          13
1377 #define MSGCTL          14
1378 #define SHMAT           21
1379 #define SHMDT           22
1380 #define SHMGET          23
1381 #define SHMCTL          24
1382
1383 asmlinkage long
1384 sys32_ipc(u32 call, int first, int second, int third, u32 ptr, u32 fifth)
1385 {
1386         int version;
1387
1388         version = call >> 16; /* hack for backward compatibility */
1389         call &= 0xffff;
1390
1391         switch (call) {
1392               case SEMTIMEDOP:
1393                 if (fifth)
1394                         return compat_sys_semtimedop(first, compat_ptr(ptr),
1395                                 second, compat_ptr(fifth));
1396                 /* else fall through for normal semop() */
1397               case SEMOP:
1398                 /* struct sembuf is the same on 32 and 64bit :)) */
1399                 return sys_semtimedop(first, compat_ptr(ptr), second,
1400                                       NULL);
1401               case SEMGET:
1402                 return sys_semget(first, second, third);
1403               case SEMCTL:
1404                 return compat_sys_semctl(first, second, third, compat_ptr(ptr));
1405
1406               case MSGSND:
1407                 return compat_sys_msgsnd(first, second, third, compat_ptr(ptr));
1408               case MSGRCV:
1409                 return compat_sys_msgrcv(first, second, fifth, third, version, compat_ptr(ptr));
1410               case MSGGET:
1411                 return sys_msgget((key_t) first, second);
1412               case MSGCTL:
1413                 return compat_sys_msgctl(first, second, compat_ptr(ptr));
1414
1415               case SHMAT:
1416                 return compat_sys_shmat(first, second, third, version, compat_ptr(ptr));
1417                 break;
1418               case SHMDT:
1419                 return sys_shmdt(compat_ptr(ptr));
1420               case SHMGET:
1421                 return sys_shmget(first, second, third);
1422               case SHMCTL:
1423                 return compat_sys_shmctl(first, second, compat_ptr(ptr));
1424
1425               default:
1426                 return -ENOSYS;
1427         }
1428         return -EINVAL;
1429 }
1430
1431 /*
1432  * sys_time() can be implemented in user-level using
1433  * sys_gettimeofday().  IA64 did this but i386 Linux did not
1434  * so we have to implement this system call here.
1435  */
1436 asmlinkage long
1437 sys32_time (int *tloc)
1438 {
1439         int i;
1440         struct timeval tv;
1441
1442         do_gettimeofday(&tv);
1443         i = tv.tv_sec;
1444
1445         if (tloc) {
1446                 if (put_user(i, tloc))
1447                         i = -EFAULT;
1448         }
1449         return i;
1450 }
1451
1452 asmlinkage long
1453 compat_sys_wait4 (compat_pid_t pid, compat_uint_t * stat_addr, int options,
1454                  struct compat_rusage *ru);
1455
1456 asmlinkage long
1457 sys32_waitpid (int pid, unsigned int *stat_addr, int options)
1458 {
1459         return compat_sys_wait4(pid, stat_addr, options, NULL);
1460 }
1461
1462 static unsigned int
1463 ia32_peek (struct pt_regs *regs, struct task_struct *child, unsigned long addr, unsigned int *val)
1464 {
1465         size_t copied;
1466         unsigned int ret;
1467
1468         copied = access_process_vm(child, addr, val, sizeof(*val), 0);
1469         return (copied != sizeof(ret)) ? -EIO : 0;
1470 }
1471
1472 static unsigned int
1473 ia32_poke (struct pt_regs *regs, struct task_struct *child, unsigned long addr, unsigned int val)
1474 {
1475
1476         if (access_process_vm(child, addr, &val, sizeof(val), 1) != sizeof(val))
1477                 return -EIO;
1478         return 0;
1479 }
1480
1481 /*
1482  *  The order in which registers are stored in the ptrace regs structure
1483  */
1484 #define PT_EBX  0
1485 #define PT_ECX  1
1486 #define PT_EDX  2
1487 #define PT_ESI  3
1488 #define PT_EDI  4
1489 #define PT_EBP  5
1490 #define PT_EAX  6
1491 #define PT_DS   7
1492 #define PT_ES   8
1493 #define PT_FS   9
1494 #define PT_GS   10
1495 #define PT_ORIG_EAX 11
1496 #define PT_EIP  12
1497 #define PT_CS   13
1498 #define PT_EFL  14
1499 #define PT_UESP 15
1500 #define PT_SS   16
1501
1502 static unsigned int
1503 getreg (struct task_struct *child, int regno)
1504 {
1505         struct pt_regs *child_regs;
1506
1507         child_regs = ia64_task_regs(child);
1508         switch (regno / sizeof(int)) {
1509               case PT_EBX: return child_regs->r11;
1510               case PT_ECX: return child_regs->r9;
1511               case PT_EDX: return child_regs->r10;
1512               case PT_ESI: return child_regs->r14;
1513               case PT_EDI: return child_regs->r15;
1514               case PT_EBP: return child_regs->r13;
1515               case PT_EAX: return child_regs->r8;
1516               case PT_ORIG_EAX: return child_regs->r1; /* see dispatch_to_ia32_handler() */
1517               case PT_EIP: return child_regs->cr_iip;
1518               case PT_UESP: return child_regs->r12;
1519               case PT_EFL: return child->thread.eflag;
1520               case PT_DS: case PT_ES: case PT_FS: case PT_GS: case PT_SS:
1521                 return __USER_DS;
1522               case PT_CS: return __USER_CS;
1523               default:
1524                 printk(KERN_ERR "ia32.getreg(): unknown register %d\n", regno);
1525                 break;
1526         }
1527         return 0;
1528 }
1529
1530 static void
1531 putreg (struct task_struct *child, int regno, unsigned int value)
1532 {
1533         struct pt_regs *child_regs;
1534
1535         child_regs = ia64_task_regs(child);
1536         switch (regno / sizeof(int)) {
1537               case PT_EBX: child_regs->r11 = value; break;
1538               case PT_ECX: child_regs->r9 = value; break;
1539               case PT_EDX: child_regs->r10 = value; break;
1540               case PT_ESI: child_regs->r14 = value; break;
1541               case PT_EDI: child_regs->r15 = value; break;
1542               case PT_EBP: child_regs->r13 = value; break;
1543               case PT_EAX: child_regs->r8 = value; break;
1544               case PT_ORIG_EAX: child_regs->r1 = value; break;
1545               case PT_EIP: child_regs->cr_iip = value; break;
1546               case PT_UESP: child_regs->r12 = value; break;
1547               case PT_EFL: child->thread.eflag = value; break;
1548               case PT_DS: case PT_ES: case PT_FS: case PT_GS: case PT_SS:
1549                 if (value != __USER_DS)
1550                         printk(KERN_ERR
1551                                "ia32.putreg: attempt to set invalid segment register %d = %x\n",
1552                                regno, value);
1553                 break;
1554               case PT_CS:
1555                 if (value != __USER_CS)
1556                         printk(KERN_ERR
1557                                "ia32.putreg: attempt to to set invalid segment register %d = %x\n",
1558                                regno, value);
1559                 break;
1560               default:
1561                 printk(KERN_ERR "ia32.putreg: unknown register %d\n", regno);
1562                 break;
1563         }
1564 }
1565
1566 static void
1567 put_fpreg (int regno, struct _fpreg_ia32 *reg, struct pt_regs *ptp, struct switch_stack *swp,
1568            int tos)
1569 {
1570         struct _fpreg_ia32 *f;
1571         char buf[32];
1572
1573         f = (struct _fpreg_ia32 *)(((unsigned long)buf + 15) & ~15);
1574         if ((regno += tos) >= 8)
1575                 regno -= 8;
1576         switch (regno) {
1577               case 0:
1578                 ia64f2ia32f(f, &ptp->f8);
1579                 break;
1580               case 1:
1581                 ia64f2ia32f(f, &ptp->f9);
1582                 break;
1583               case 2:
1584                 ia64f2ia32f(f, &ptp->f10);
1585                 break;
1586               case 3:
1587                 ia64f2ia32f(f, &ptp->f11);
1588                 break;
1589               case 4:
1590               case 5:
1591               case 6:
1592               case 7:
1593                 ia64f2ia32f(f, &swp->f12 + (regno - 4));
1594                 break;
1595         }
1596         copy_to_user(reg, f, sizeof(*reg));
1597 }
1598
1599 static void
1600 get_fpreg (int regno, struct _fpreg_ia32 *reg, struct pt_regs *ptp, struct switch_stack *swp,
1601            int tos)
1602 {
1603
1604         if ((regno += tos) >= 8)
1605                 regno -= 8;
1606         switch (regno) {
1607               case 0:
1608                 copy_from_user(&ptp->f8, reg, sizeof(*reg));
1609                 break;
1610               case 1:
1611                 copy_from_user(&ptp->f9, reg, sizeof(*reg));
1612                 break;
1613               case 2:
1614                 copy_from_user(&ptp->f10, reg, sizeof(*reg));
1615                 break;
1616               case 3:
1617                 copy_from_user(&ptp->f11, reg, sizeof(*reg));
1618                 break;
1619               case 4:
1620               case 5:
1621               case 6:
1622               case 7:
1623                 copy_from_user(&swp->f12 + (regno - 4), reg, sizeof(*reg));
1624                 break;
1625         }
1626         return;
1627 }
1628
1629 int
1630 save_ia32_fpstate (struct task_struct *tsk, struct ia32_user_i387_struct *save)
1631 {
1632         struct switch_stack *swp;
1633         struct pt_regs *ptp;
1634         int i, tos;
1635
1636         if (!access_ok(VERIFY_WRITE, save, sizeof(*save)))
1637                 return -EFAULT;
1638
1639         __put_user(tsk->thread.fcr & 0xffff, &save->cwd);
1640         __put_user(tsk->thread.fsr & 0xffff, &save->swd);
1641         __put_user((tsk->thread.fsr>>16) & 0xffff, &save->twd);
1642         __put_user(tsk->thread.fir, &save->fip);
1643         __put_user((tsk->thread.fir>>32) & 0xffff, &save->fcs);
1644         __put_user(tsk->thread.fdr, &save->foo);
1645         __put_user((tsk->thread.fdr>>32) & 0xffff, &save->fos);
1646
1647         /*
1648          *  Stack frames start with 16-bytes of temp space
1649          */
1650         swp = (struct switch_stack *)(tsk->thread.ksp + 16);
1651         ptp = ia64_task_regs(tsk);
1652         tos = (tsk->thread.fsr >> 11) & 7;
1653         for (i = 0; i < 8; i++)
1654                 put_fpreg(i, &save->st_space[i], ptp, swp, tos);
1655         return 0;
1656 }
1657
1658 static int
1659 restore_ia32_fpstate (struct task_struct *tsk, struct ia32_user_i387_struct *save)
1660 {
1661         struct switch_stack *swp;
1662         struct pt_regs *ptp;
1663         int i, tos;
1664         unsigned int fsrlo, fsrhi, num32;
1665
1666         if (!access_ok(VERIFY_READ, save, sizeof(*save)))
1667                 return(-EFAULT);
1668
1669         __get_user(num32, (unsigned int *)&save->cwd);
1670         tsk->thread.fcr = (tsk->thread.fcr & (~0x1f3f)) | (num32 & 0x1f3f);
1671         __get_user(fsrlo, (unsigned int *)&save->swd);
1672         __get_user(fsrhi, (unsigned int *)&save->twd);
1673         num32 = (fsrhi << 16) | fsrlo;
1674         tsk->thread.fsr = (tsk->thread.fsr & (~0xffffffff)) | num32;
1675         __get_user(num32, (unsigned int *)&save->fip);
1676         tsk->thread.fir = (tsk->thread.fir & (~0xffffffff)) | num32;
1677         __get_user(num32, (unsigned int *)&save->foo);
1678         tsk->thread.fdr = (tsk->thread.fdr & (~0xffffffff)) | num32;
1679
1680         /*
1681          *  Stack frames start with 16-bytes of temp space
1682          */
1683         swp = (struct switch_stack *)(tsk->thread.ksp + 16);
1684         ptp = ia64_task_regs(tsk);
1685         tos = (tsk->thread.fsr >> 11) & 7;
1686         for (i = 0; i < 8; i++)
1687                 get_fpreg(i, &save->st_space[i], ptp, swp, tos);
1688         return 0;
1689 }
1690
1691 int
1692 save_ia32_fpxstate (struct task_struct *tsk, struct ia32_user_fxsr_struct *save)
1693 {
1694         struct switch_stack *swp;
1695         struct pt_regs *ptp;
1696         int i, tos;
1697         unsigned long mxcsr=0;
1698         unsigned long num128[2];
1699
1700         if (!access_ok(VERIFY_WRITE, save, sizeof(*save)))
1701                 return -EFAULT;
1702
1703         __put_user(tsk->thread.fcr & 0xffff, &save->cwd);
1704         __put_user(tsk->thread.fsr & 0xffff, &save->swd);
1705         __put_user((tsk->thread.fsr>>16) & 0xffff, &save->twd);
1706         __put_user(tsk->thread.fir, &save->fip);
1707         __put_user((tsk->thread.fir>>32) & 0xffff, &save->fcs);
1708         __put_user(tsk->thread.fdr, &save->foo);
1709         __put_user((tsk->thread.fdr>>32) & 0xffff, &save->fos);
1710
1711         /*
1712          *  Stack frames start with 16-bytes of temp space
1713          */
1714         swp = (struct switch_stack *)(tsk->thread.ksp + 16);
1715         ptp = ia64_task_regs(tsk);
1716         tos = (tsk->thread.fsr >> 11) & 7;
1717         for (i = 0; i < 8; i++)
1718                 put_fpreg(i, (struct _fpreg_ia32 *)&save->st_space[4*i], ptp, swp, tos);
1719
1720         mxcsr = ((tsk->thread.fcr>>32) & 0xff80) | ((tsk->thread.fsr>>32) & 0x3f);
1721         __put_user(mxcsr & 0xffff, &save->mxcsr);
1722         for (i = 0; i < 8; i++) {
1723                 memcpy(&(num128[0]), &(swp->f16) + i*2, sizeof(unsigned long));
1724                 memcpy(&(num128[1]), &(swp->f17) + i*2, sizeof(unsigned long));
1725                 copy_to_user(&save->xmm_space[0] + 4*i, num128, sizeof(struct _xmmreg_ia32));
1726         }
1727         return 0;
1728 }
1729
1730 static int
1731 restore_ia32_fpxstate (struct task_struct *tsk, struct ia32_user_fxsr_struct *save)
1732 {
1733         struct switch_stack *swp;
1734         struct pt_regs *ptp;
1735         int i, tos;
1736         unsigned int fsrlo, fsrhi, num32;
1737         int mxcsr;
1738         unsigned long num64;
1739         unsigned long num128[2];
1740
1741         if (!access_ok(VERIFY_READ, save, sizeof(*save)))
1742                 return(-EFAULT);
1743
1744         __get_user(num32, (unsigned int *)&save->cwd);
1745         tsk->thread.fcr = (tsk->thread.fcr & (~0x1f3f)) | (num32 & 0x1f3f);
1746         __get_user(fsrlo, (unsigned int *)&save->swd);
1747         __get_user(fsrhi, (unsigned int *)&save->twd);
1748         num32 = (fsrhi << 16) | fsrlo;
1749         tsk->thread.fsr = (tsk->thread.fsr & (~0xffffffff)) | num32;
1750         __get_user(num32, (unsigned int *)&save->fip);
1751         tsk->thread.fir = (tsk->thread.fir & (~0xffffffff)) | num32;
1752         __get_user(num32, (unsigned int *)&save->foo);
1753         tsk->thread.fdr = (tsk->thread.fdr & (~0xffffffff)) | num32;
1754
1755         /*
1756          *  Stack frames start with 16-bytes of temp space
1757          */
1758         swp = (struct switch_stack *)(tsk->thread.ksp + 16);
1759         ptp = ia64_task_regs(tsk);
1760         tos = (tsk->thread.fsr >> 11) & 7;
1761         for (i = 0; i < 8; i++)
1762         get_fpreg(i, (struct _fpreg_ia32 *)&save->st_space[4*i], ptp, swp, tos);
1763
1764         __get_user(mxcsr, (unsigned int *)&save->mxcsr);
1765         num64 = mxcsr & 0xff10;
1766         tsk->thread.fcr = (tsk->thread.fcr & (~0xff1000000000)) | (num64<<32);
1767         num64 = mxcsr & 0x3f;
1768         tsk->thread.fsr = (tsk->thread.fsr & (~0x3f00000000)) | (num64<<32);
1769
1770         for (i = 0; i < 8; i++) {
1771                 copy_from_user(num128, &save->xmm_space[0] + 4*i, sizeof(struct _xmmreg_ia32));
1772                 memcpy(&(swp->f16) + i*2, &(num128[0]), sizeof(unsigned long));
1773                 memcpy(&(swp->f17) + i*2, &(num128[1]), sizeof(unsigned long));
1774         }
1775         return 0;
1776 }
1777
1778 /*
1779  *  Note that the IA32 version of `ptrace' calls the IA64 routine for
1780  *    many of the requests.  This will only work for requests that do
1781  *    not need access to the calling processes `pt_regs' which is located
1782  *    at the address of `stack'.  Once we call the IA64 `sys_ptrace' then
1783  *    the address of `stack' will not be the address of the `pt_regs'.
1784  */
1785 asmlinkage long
1786 sys32_ptrace (int request, pid_t pid, unsigned int addr, unsigned int data,
1787               long arg4, long arg5, long arg6, long arg7, long stack)
1788 {
1789         struct pt_regs *regs = (struct pt_regs *) &stack;
1790         struct task_struct *child;
1791         unsigned int value, tmp;
1792         long i, ret;
1793
1794         lock_kernel();
1795         if (request == PTRACE_TRACEME) {
1796                 ret = sys_ptrace(request, pid, addr, data, arg4, arg5, arg6, arg7, stack);
1797                 goto out;
1798         }
1799
1800         ret = -ESRCH;
1801         read_lock(&tasklist_lock);
1802         child = find_task_by_pid(pid);
1803         if (child)
1804                 get_task_struct(child);
1805         read_unlock(&tasklist_lock);
1806         if (!child)
1807                 goto out;
1808         ret = -EPERM;
1809         if (pid == 1)           /* no messing around with init! */
1810                 goto out_tsk;
1811
1812         if (request == PTRACE_ATTACH) {
1813                 ret = sys_ptrace(request, pid, addr, data, arg4, arg5, arg6, arg7, stack);
1814                 goto out_tsk;
1815         }
1816
1817         ret = ptrace_check_attach(child, request == PTRACE_KILL);
1818         if (ret < 0)
1819                 goto out_tsk;
1820
1821         switch (request) {
1822               case PTRACE_PEEKTEXT:
1823               case PTRACE_PEEKDATA:     /* read word at location addr */
1824                 ret = ia32_peek(regs, child, addr, &value);
1825                 if (ret == 0)
1826                         ret = put_user(value, (unsigned int *) A(data));
1827                 else
1828                         ret = -EIO;
1829                 goto out_tsk;
1830
1831               case PTRACE_POKETEXT:
1832               case PTRACE_POKEDATA:     /* write the word at location addr */
1833                 ret = ia32_poke(regs, child, addr, data);
1834                 goto out_tsk;
1835
1836               case PTRACE_PEEKUSR:      /* read word at addr in USER area */
1837                 ret = -EIO;
1838                 if ((addr & 3) || addr > 17*sizeof(int))
1839                         break;
1840
1841                 tmp = getreg(child, addr);
1842                 if (!put_user(tmp, (unsigned int *) A(data)))
1843                         ret = 0;
1844                 break;
1845
1846               case PTRACE_POKEUSR:      /* write word at addr in USER area */
1847                 ret = -EIO;
1848                 if ((addr & 3) || addr > 17*sizeof(int))
1849                         break;
1850
1851                 putreg(child, addr, data);
1852                 ret = 0;
1853                 break;
1854
1855               case IA32_PTRACE_GETREGS:
1856                 if (!access_ok(VERIFY_WRITE, (int *) A(data), 17*sizeof(int))) {
1857                         ret = -EIO;
1858                         break;
1859                 }
1860                 for (i = 0; i < (int) (17*sizeof(int)); i += sizeof(int) ) {
1861                         put_user(getreg(child, i), (unsigned int *) A(data));
1862                         data += sizeof(int);
1863                 }
1864                 ret = 0;
1865                 break;
1866
1867               case IA32_PTRACE_SETREGS:
1868                 if (!access_ok(VERIFY_READ, (int *) A(data), 17*sizeof(int))) {
1869                         ret = -EIO;
1870                         break;
1871                 }
1872                 for (i = 0; i < (int) (17*sizeof(int)); i += sizeof(int) ) {
1873                         get_user(tmp, (unsigned int *) A(data));
1874                         putreg(child, i, tmp);
1875                         data += sizeof(int);
1876                 }
1877                 ret = 0;
1878                 break;
1879
1880               case IA32_PTRACE_GETFPREGS:
1881                 ret = save_ia32_fpstate(child, (struct ia32_user_i387_struct *) A(data));
1882                 break;
1883
1884               case IA32_PTRACE_GETFPXREGS:
1885                 ret = save_ia32_fpxstate(child, (struct ia32_user_fxsr_struct *) A(data));
1886                 break;
1887
1888               case IA32_PTRACE_SETFPREGS:
1889                 ret = restore_ia32_fpstate(child, (struct ia32_user_i387_struct *) A(data));
1890                 break;
1891
1892               case IA32_PTRACE_SETFPXREGS:
1893                 ret = restore_ia32_fpxstate(child, (struct ia32_user_fxsr_struct *) A(data));
1894                 break;
1895
1896               case PTRACE_SYSCALL:      /* continue, stop after next syscall */
1897               case PTRACE_CONT:         /* restart after signal. */
1898               case PTRACE_KILL:
1899               case PTRACE_SINGLESTEP:   /* execute chile for one instruction */
1900               case PTRACE_DETACH:       /* detach a process */
1901                 ret = sys_ptrace(request, pid, addr, data, arg4, arg5, arg6, arg7, stack);
1902                 break;
1903
1904               default:
1905                 ret = ptrace_request(child, request, addr, data);
1906                 break;
1907
1908         }
1909   out_tsk:
1910         put_task_struct(child);
1911   out:
1912         unlock_kernel();
1913         return ret;
1914 }
1915
1916 /*
1917  *  The IA64 maps 4 I/O ports for each 4K page
1918  */
1919 #define IOLEN   ((65536 / 4) * 4096)
1920
1921 asmlinkage long
1922 sys32_iopl (int level)
1923 {
1924         extern unsigned long ia64_iobase;
1925         int fd;
1926         struct file * file;
1927         unsigned int old;
1928         unsigned long addr;
1929         mm_segment_t old_fs = get_fs ();
1930
1931         if (level != 3)
1932                 return(-EINVAL);
1933         /* Trying to gain more privileges? */
1934         old = ia64_getreg(_IA64_REG_AR_EFLAG);
1935         if ((unsigned int) level > ((old >> 12) & 3)) {
1936                 if (!capable(CAP_SYS_RAWIO))
1937                         return -EPERM;
1938         }
1939         set_fs(KERNEL_DS);
1940         fd = sys_open("/dev/mem", O_SYNC | O_RDWR, 0);
1941         set_fs(old_fs);
1942         if (fd < 0)
1943                 return fd;
1944         file = fget(fd);
1945         if (file == NULL) {
1946                 sys_close(fd);
1947                 return(-EFAULT);
1948         }
1949
1950         down_write(&current->mm->mmap_sem);
1951         addr = do_mmap_pgoff(file, IA32_IOBASE,
1952                              IOLEN, PROT_READ|PROT_WRITE, MAP_SHARED,
1953                              (ia64_iobase & ~PAGE_OFFSET) >> PAGE_SHIFT);
1954         up_write(&current->mm->mmap_sem);
1955
1956         if (addr >= 0) {
1957                 old = (old & ~0x3000) | (level << 12);
1958                 ia64_setreg(_IA64_REG_AR_EFLAG, old);
1959         }
1960
1961         fput(file);
1962         sys_close(fd);
1963         return 0;
1964 }
1965
1966 asmlinkage long
1967 sys32_ioperm (unsigned int from, unsigned int num, int on)
1968 {
1969
1970         /*
1971          *  Since IA64 doesn't have permission bits we'd have to go to
1972          *    a lot of trouble to simulate them in software.  There's
1973          *    no point, only trusted programs can make this call so we'll
1974          *    just turn it into an iopl call and let the process have
1975          *    access to all I/O ports.
1976          *
1977          * XXX proper ioperm() support should be emulated by
1978          *      manipulating the page protections...
1979          */
1980         return sys32_iopl(3);
1981 }
1982
1983 typedef struct {
1984         unsigned int    ss_sp;
1985         unsigned int    ss_flags;
1986         unsigned int    ss_size;
1987 } ia32_stack_t;
1988
1989 asmlinkage long
1990 sys32_sigaltstack (ia32_stack_t *uss32, ia32_stack_t *uoss32,
1991                    long arg2, long arg3, long arg4, long arg5, long arg6, long arg7, long stack)
1992 {
1993         struct pt_regs *pt = (struct pt_regs *) &stack;
1994         stack_t uss, uoss;
1995         ia32_stack_t buf32;
1996         int ret;
1997         mm_segment_t old_fs = get_fs();
1998
1999         if (uss32) {
2000                 if (copy_from_user(&buf32, uss32, sizeof(ia32_stack_t)))
2001                         return -EFAULT;
2002                 uss.ss_sp = (void *) (long) buf32.ss_sp;
2003                 uss.ss_flags = buf32.ss_flags;
2004                 /* MINSIGSTKSZ is different for ia32 vs ia64. We lie here to pass the
2005                    check and set it to the user requested value later */
2006                 if ((buf32.ss_flags != SS_DISABLE) && (buf32.ss_size < MINSIGSTKSZ_IA32)) {
2007                         ret = -ENOMEM;
2008                         goto out;
2009                 }
2010                 uss.ss_size = MINSIGSTKSZ;
2011         }
2012         set_fs(KERNEL_DS);
2013         ret = do_sigaltstack(uss32 ? &uss : NULL, &uoss, pt->r12);
2014         current->sas_ss_size = buf32.ss_size;
2015         set_fs(old_fs);
2016 out:
2017         if (ret < 0)
2018                 return(ret);
2019         if (uoss32) {
2020                 buf32.ss_sp = (long) uoss.ss_sp;
2021                 buf32.ss_flags = uoss.ss_flags;
2022                 buf32.ss_size = uoss.ss_size;
2023                 if (copy_to_user(uoss32, &buf32, sizeof(ia32_stack_t)))
2024                         return -EFAULT;
2025         }
2026         return ret;
2027 }
2028
2029 asmlinkage int
2030 sys32_pause (void)
2031 {
2032         current->state = TASK_INTERRUPTIBLE;
2033         schedule();
2034         return -ERESTARTNOHAND;
2035 }
2036
2037 asmlinkage int
2038 sys32_msync (unsigned int start, unsigned int len, int flags)
2039 {
2040         unsigned int addr;
2041
2042         if (OFFSET4K(start))
2043                 return -EINVAL;
2044         addr = PAGE_START(start);
2045         return sys_msync(addr, len + (start - addr), flags);
2046 }
2047
2048 struct sysctl32 {
2049         unsigned int    name;
2050         int             nlen;
2051         unsigned int    oldval;
2052         unsigned int    oldlenp;
2053         unsigned int    newval;
2054         unsigned int    newlen;
2055         unsigned int    __unused[4];
2056 };
2057
2058 asmlinkage long
2059 sys32_sysctl (struct sysctl32 *args)
2060 {
2061 #ifdef CONFIG_SYSCTL
2062         struct sysctl32 a32;
2063         mm_segment_t old_fs = get_fs ();
2064         void *oldvalp, *newvalp;
2065         size_t oldlen;
2066         int *namep;
2067         long ret;
2068
2069         if (copy_from_user(&a32, args, sizeof(a32)))
2070                 return -EFAULT;
2071
2072         /*
2073          * We need to pre-validate these because we have to disable address checking
2074          * before calling do_sysctl() because of OLDLEN but we can't run the risk of the
2075          * user specifying bad addresses here.  Well, since we're dealing with 32 bit
2076          * addresses, we KNOW that access_ok() will always succeed, so this is an
2077          * expensive NOP, but so what...
2078          */
2079         namep = (int *) A(a32.name);
2080         oldvalp = (void *) A(a32.oldval);
2081         newvalp = (void *) A(a32.newval);
2082
2083         if ((oldvalp && get_user(oldlen, (int *) A(a32.oldlenp)))
2084             || !access_ok(VERIFY_WRITE, namep, 0)
2085             || !access_ok(VERIFY_WRITE, oldvalp, 0)
2086             || !access_ok(VERIFY_WRITE, newvalp, 0))
2087                 return -EFAULT;
2088
2089         set_fs(KERNEL_DS);
2090         lock_kernel();
2091         ret = do_sysctl(namep, a32.nlen, oldvalp, &oldlen, newvalp, (size_t) a32.newlen);
2092         unlock_kernel();
2093         set_fs(old_fs);
2094
2095         if (oldvalp && put_user (oldlen, (int *) A(a32.oldlenp)))
2096                 return -EFAULT;
2097
2098         return ret;
2099 #else
2100         return -ENOSYS;
2101 #endif
2102 }
2103
2104 asmlinkage long
2105 sys32_newuname (struct new_utsname *name)
2106 {
2107         int ret = sys_newuname(name);
2108
2109         if (!ret)
2110                 if (copy_to_user(name->machine, "i686\0\0\0", 8))
2111                         ret = -EFAULT;
2112         return ret;
2113 }
2114
2115 asmlinkage long
2116 sys32_getresuid16 (u16 *ruid, u16 *euid, u16 *suid)
2117 {
2118         uid_t a, b, c;
2119         int ret;
2120         mm_segment_t old_fs = get_fs();
2121
2122         set_fs(KERNEL_DS);
2123         ret = sys_getresuid(&a, &b, &c);
2124         set_fs(old_fs);
2125
2126         if (put_user(a, ruid) || put_user(b, euid) || put_user(c, suid))
2127                 return -EFAULT;
2128         return ret;
2129 }
2130
2131 asmlinkage long
2132 sys32_getresgid16 (u16 *rgid, u16 *egid, u16 *sgid)
2133 {
2134         gid_t a, b, c;
2135         int ret;
2136         mm_segment_t old_fs = get_fs();
2137
2138         set_fs(KERNEL_DS);
2139         ret = sys_getresgid(&a, &b, &c);
2140         set_fs(old_fs);
2141
2142         if (ret)
2143                 return ret;
2144
2145         return put_user(a, rgid) | put_user(b, egid) | put_user(c, sgid);
2146 }
2147
2148 asmlinkage long
2149 sys32_lseek (unsigned int fd, int offset, unsigned int whence)
2150 {
2151         /* Sign-extension of "offset" is important here... */
2152         return sys_lseek(fd, offset, whence);
2153 }
2154
2155 static int
2156 groups16_to_user(short *grouplist, struct group_info *group_info)
2157 {
2158         int i;
2159         short group;
2160
2161         for (i = 0; i < group_info->ngroups; i++) {
2162                 group = (short)GROUP_AT(group_info, i);
2163                 if (put_user(group, grouplist+i))
2164                         return -EFAULT;
2165         }
2166
2167         return 0;
2168 }
2169
2170 static int
2171 groups16_from_user(struct group_info *group_info, short *grouplist)
2172 {
2173         int i;
2174         short group;
2175
2176         for (i = 0; i < group_info->ngroups; i++) {
2177                 if (get_user(group, grouplist+i))
2178                         return  -EFAULT;
2179                 GROUP_AT(group_info, i) = (gid_t)group;
2180         }
2181
2182         return 0;
2183 }
2184
2185 asmlinkage long
2186 sys32_getgroups16 (int gidsetsize, short *grouplist)
2187 {
2188         int i;
2189
2190         if (gidsetsize < 0)
2191                 return -EINVAL;
2192
2193         get_group_info(current->group_info);
2194         i = current->group_info->ngroups;
2195         if (gidsetsize) {
2196                 if (i > gidsetsize) {
2197                         i = -EINVAL;
2198                         goto out;
2199                 }
2200                 if (groups16_to_user(grouplist, current->group_info)) {
2201                         i = -EFAULT;
2202                         goto out;
2203                 }
2204         }
2205 out:
2206         put_group_info(current->group_info);
2207         return i;
2208 }
2209
2210 asmlinkage long
2211 sys32_setgroups16 (int gidsetsize, short *grouplist)
2212 {
2213         struct group_info *group_info;
2214         int retval;
2215
2216         if (!capable(CAP_SETGID))
2217                 return -EPERM;
2218         if ((unsigned)gidsetsize > NGROUPS_MAX)
2219                 return -EINVAL;
2220
2221         group_info = groups_alloc(gidsetsize);
2222         if (!group_info)
2223                 return -ENOMEM;
2224         retval = groups16_from_user(group_info, grouplist);
2225         if (retval) {
2226                 put_group_info(group_info);
2227                 return retval;
2228         }
2229
2230         retval = set_current_groups(group_info);
2231         put_group_info(group_info);
2232
2233         return retval;
2234 }
2235
2236 asmlinkage long
2237 sys32_truncate64 (unsigned int path, unsigned int len_lo, unsigned int len_hi)
2238 {
2239         return sys_truncate((const char *) A(path), ((unsigned long) len_hi << 32) | len_lo);
2240 }
2241
2242 asmlinkage long
2243 sys32_ftruncate64 (int fd, unsigned int len_lo, unsigned int len_hi)
2244 {
2245         return sys_ftruncate(fd, ((unsigned long) len_hi << 32) | len_lo);
2246 }
2247
2248 static int
2249 putstat64 (struct stat64 *ubuf, struct kstat *kbuf)
2250 {
2251         int err;
2252         u64 hdev;
2253
2254         if (clear_user(ubuf, sizeof(*ubuf)))
2255                 return -EFAULT;
2256
2257         hdev = huge_encode_dev(kbuf->dev);
2258         err  = __put_user(hdev, (u32*)&ubuf->st_dev);
2259         err |= __put_user(hdev >> 32, ((u32*)&ubuf->st_dev) + 1);
2260         err |= __put_user(kbuf->ino, &ubuf->__st_ino);
2261         err |= __put_user(kbuf->ino, &ubuf->st_ino_lo);
2262         err |= __put_user(kbuf->ino >> 32, &ubuf->st_ino_hi);
2263         err |= __put_user(kbuf->mode, &ubuf->st_mode);
2264         err |= __put_user(kbuf->nlink, &ubuf->st_nlink);
2265         err |= __put_user(kbuf->uid, &ubuf->st_uid);
2266         err |= __put_user(kbuf->gid, &ubuf->st_gid);
2267         hdev = huge_encode_dev(kbuf->rdev);
2268         err  = __put_user(hdev, (u32*)&ubuf->st_rdev);
2269         err |= __put_user(hdev >> 32, ((u32*)&ubuf->st_rdev) + 1);
2270         err |= __put_user(kbuf->size, &ubuf->st_size_lo);
2271         err |= __put_user((kbuf->size >> 32), &ubuf->st_size_hi);
2272         err |= __put_user(kbuf->atime.tv_sec, &ubuf->st_atime);
2273         err |= __put_user(kbuf->atime.tv_nsec, &ubuf->st_atime_nsec);
2274         err |= __put_user(kbuf->mtime.tv_sec, &ubuf->st_mtime);
2275         err |= __put_user(kbuf->mtime.tv_nsec, &ubuf->st_mtime_nsec);
2276         err |= __put_user(kbuf->ctime.tv_sec, &ubuf->st_ctime);
2277         err |= __put_user(kbuf->ctime.tv_nsec, &ubuf->st_ctime_nsec);
2278         err |= __put_user(kbuf->blksize, &ubuf->st_blksize);
2279         err |= __put_user(kbuf->blocks, &ubuf->st_blocks);
2280         return err;
2281 }
2282
2283 asmlinkage long
2284 sys32_stat64 (char *filename, struct stat64 *statbuf)
2285 {
2286         struct kstat s;
2287         long ret = vfs_stat(filename, &s);
2288         if (!ret)
2289                 ret = putstat64(statbuf, &s);
2290         return ret;
2291 }
2292
2293 asmlinkage long
2294 sys32_lstat64 (char *filename, struct stat64 *statbuf)
2295 {
2296         struct kstat s;
2297         long ret = vfs_lstat(filename, &s);
2298         if (!ret)
2299                 ret = putstat64(statbuf, &s);
2300         return ret;
2301 }
2302
2303 asmlinkage long
2304 sys32_fstat64 (unsigned int fd, struct stat64 *statbuf)
2305 {
2306         struct kstat s;
2307         long ret = vfs_fstat(fd, &s);
2308         if (!ret)
2309                 ret = putstat64(statbuf, &s);
2310         return ret;
2311 }
2312
2313 struct sysinfo32 {
2314         s32 uptime;
2315         u32 loads[3];
2316         u32 totalram;
2317         u32 freeram;
2318         u32 sharedram;
2319         u32 bufferram;
2320         u32 totalswap;
2321         u32 freeswap;
2322         u16 procs;
2323         u16 pad;
2324         u32 totalhigh;
2325         u32 freehigh;
2326         u32 mem_unit;
2327         char _f[8];
2328 };
2329
2330 asmlinkage long
2331 sys32_sysinfo (struct sysinfo32 *info)
2332 {
2333         struct sysinfo s;
2334         long ret, err;
2335         int bitcount = 0;
2336         mm_segment_t old_fs = get_fs();
2337
2338         set_fs(KERNEL_DS);
2339         ret = sys_sysinfo(&s);
2340         set_fs(old_fs);
2341         /* Check to see if any memory value is too large for 32-bit and
2342          * scale down if needed.
2343          */
2344         if ((s.totalram >> 32) || (s.totalswap >> 32)) {
2345                 while (s.mem_unit < PAGE_SIZE) {
2346                         s.mem_unit <<= 1;
2347                         bitcount++;
2348                 }
2349                 s.totalram >>= bitcount;
2350                 s.freeram >>= bitcount;
2351                 s.sharedram >>= bitcount;
2352                 s.bufferram >>= bitcount;
2353                 s.totalswap >>= bitcount;
2354                 s.freeswap >>= bitcount;
2355                 s.totalhigh >>= bitcount;
2356                 s.freehigh >>= bitcount;
2357         }
2358
2359         if (!access_ok(VERIFY_WRITE, info, sizeof(*info)))
2360                 return -EFAULT;
2361
2362         err  = __put_user(s.uptime, &info->uptime);
2363         err |= __put_user(s.loads[0], &info->loads[0]);
2364         err |= __put_user(s.loads[1], &info->loads[1]);
2365         err |= __put_user(s.loads[2], &info->loads[2]);
2366         err |= __put_user(s.totalram, &info->totalram);
2367         err |= __put_user(s.freeram, &info->freeram);
2368         err |= __put_user(s.sharedram, &info->sharedram);
2369         err |= __put_user(s.bufferram, &info->bufferram);
2370         err |= __put_user(s.totalswap, &info->totalswap);
2371         err |= __put_user(s.freeswap, &info->freeswap);
2372         err |= __put_user(s.procs, &info->procs);
2373         err |= __put_user (s.totalhigh, &info->totalhigh);
2374         err |= __put_user (s.freehigh, &info->freehigh);
2375         err |= __put_user (s.mem_unit, &info->mem_unit);
2376         if (err)
2377                 return -EFAULT;
2378         return ret;
2379 }
2380
2381 asmlinkage long
2382 sys32_sched_rr_get_interval (pid_t pid, struct compat_timespec *interval)
2383 {
2384         mm_segment_t old_fs = get_fs();
2385         struct timespec t;
2386         long ret;
2387
2388         set_fs(KERNEL_DS);
2389         ret = sys_sched_rr_get_interval(pid, &t);
2390         set_fs(old_fs);
2391         if (put_compat_timespec(&t, interval))
2392                 return -EFAULT;
2393         return ret;
2394 }
2395
2396 asmlinkage long
2397 sys32_pread (unsigned int fd, void *buf, unsigned int count, u32 pos_lo, u32 pos_hi)
2398 {
2399         return sys_pread64(fd, buf, count, ((unsigned long) pos_hi << 32) | pos_lo);
2400 }
2401
2402 asmlinkage long
2403 sys32_pwrite (unsigned int fd, void *buf, unsigned int count, u32 pos_lo, u32 pos_hi)
2404 {
2405         return sys_pwrite64(fd, buf, count, ((unsigned long) pos_hi << 32) | pos_lo);
2406 }
2407
2408 asmlinkage long
2409 sys32_sendfile (int out_fd, int in_fd, int *offset, unsigned int count)
2410 {
2411         mm_segment_t old_fs = get_fs();
2412         long ret;
2413         off_t of;
2414
2415         if (offset && get_user(of, offset))
2416                 return -EFAULT;
2417
2418         set_fs(KERNEL_DS);
2419         ret = sys_sendfile(out_fd, in_fd, offset ? &of : NULL, count);
2420         set_fs(old_fs);
2421
2422         if (!ret && offset && put_user(of, offset))
2423                 return -EFAULT;
2424
2425         return ret;
2426 }
2427
2428 asmlinkage long
2429 sys32_personality (unsigned int personality)
2430 {
2431         long ret;
2432
2433         if (current->personality == PER_LINUX32 && personality == PER_LINUX)
2434                 personality = PER_LINUX32;
2435         ret = sys_personality(personality);
2436         if (ret == PER_LINUX32)
2437                 ret = PER_LINUX;
2438         return ret;
2439 }
2440
2441 asmlinkage unsigned long
2442 sys32_brk (unsigned int brk)
2443 {
2444         unsigned long ret, obrk;
2445         struct mm_struct *mm = current->mm;
2446
2447         obrk = mm->brk;
2448         ret = sys_brk(brk);
2449         if (ret < obrk)
2450                 clear_user((void *) ret, PAGE_ALIGN(ret) - ret);
2451         return ret;
2452 }
2453
2454 /*
2455  * Exactly like fs/open.c:sys_open(), except that it doesn't set the O_LARGEFILE flag.
2456  */
2457 asmlinkage long
2458 sys32_open (const char * filename, int flags, int mode)
2459 {
2460         char * tmp;
2461         int fd, error;
2462
2463         tmp = getname(filename);
2464         fd = PTR_ERR(tmp);
2465         if (!IS_ERR(tmp)) {
2466                 fd = get_unused_fd();
2467                 if (fd >= 0) {
2468                         struct file *f = filp_open(tmp, flags, mode);
2469                         error = PTR_ERR(f);
2470                         if (IS_ERR(f))
2471                                 goto out_error;
2472                         fd_install(fd, f);
2473                 }
2474 out:
2475                 putname(tmp);
2476         }
2477         return fd;
2478
2479 out_error:
2480         put_unused_fd(fd);
2481         fd = error;
2482         goto out;
2483 }
2484
2485 /* Structure for ia32 emulation on ia64 */
2486 struct epoll_event32
2487 {
2488         u32 events;
2489         u32 data[2];
2490 };
2491
2492 asmlinkage long
2493 sys32_epoll_ctl(int epfd, int op, int fd, struct epoll_event32 *event)
2494 {
2495         mm_segment_t old_fs = get_fs();
2496         struct epoll_event event64;
2497         int error = -EFAULT;
2498         u32 data_halfword;
2499
2500         if ((error = verify_area(VERIFY_READ, event,
2501                                  sizeof(struct epoll_event32))))
2502                 return error;
2503
2504         __get_user(event64.events, &event->events);
2505         __get_user(data_halfword, &event->data[0]);
2506         event64.data = data_halfword;
2507         __get_user(data_halfword, &event->data[1]);
2508         event64.data |= (u64)data_halfword << 32;
2509
2510         set_fs(KERNEL_DS);
2511         error = sys_epoll_ctl(epfd, op, fd, &event64);
2512         set_fs(old_fs);
2513
2514         return error;
2515 }
2516
2517 asmlinkage long
2518 sys32_epoll_wait(int epfd, struct epoll_event32 *events, int maxevents,
2519                  int timeout)
2520 {
2521         struct epoll_event *events64 = NULL;
2522         mm_segment_t old_fs = get_fs();
2523         int error, numevents, size;
2524         int evt_idx;
2525         int do_free_pages = 0;
2526
2527         if (maxevents <= 0) {
2528                 return -EINVAL;
2529         }
2530
2531         /* Verify that the area passed by the user is writeable */
2532         if ((error = verify_area(VERIFY_WRITE, events,
2533                                  maxevents * sizeof(struct epoll_event32))))
2534                 return error;
2535
2536         /*
2537          * Allocate space for the intermediate copy.  If the space needed
2538          * is large enough to cause kmalloc to fail, then try again with
2539          * __get_free_pages.
2540          */
2541         size = maxevents * sizeof(struct epoll_event);
2542         events64 = kmalloc(size, GFP_KERNEL);
2543         if (events64 == NULL) {
2544                 events64 = (struct epoll_event *)
2545                                 __get_free_pages(GFP_KERNEL, get_order(size));
2546                 if (events64 == NULL)
2547                         return -ENOMEM;
2548                 do_free_pages = 1;
2549         }
2550
2551         /* Do the system call */
2552         set_fs(KERNEL_DS); /* copy_to/from_user should work on kernel mem*/
2553         numevents = sys_epoll_wait(epfd, events64, maxevents, timeout);
2554         set_fs(old_fs);
2555
2556         /* Don't modify userspace memory if we're returning an error */
2557         if (numevents > 0) {
2558                 /* Translate the 64-bit structures back into the 32-bit
2559                    structures */
2560                 for (evt_idx = 0; evt_idx < numevents; evt_idx++) {
2561                         __put_user(events64[evt_idx].events,
2562                                    &events[evt_idx].events);
2563                         __put_user((u32)events64[evt_idx].data,
2564                                    &events[evt_idx].data[0]);
2565                         __put_user((u32)(events64[evt_idx].data >> 32),
2566                                    &events[evt_idx].data[1]);
2567                 }
2568         }
2569
2570         if (do_free_pages)
2571                 free_pages((unsigned long) events64, get_order(size));
2572         else
2573                 kfree(events64);
2574         return numevents;
2575 }
2576
2577 /*
2578  * Get a yet unused TLS descriptor index.
2579  */
2580 static int
2581 get_free_idx (void)
2582 {
2583         struct thread_struct *t = &current->thread;
2584         int idx;
2585
2586         for (idx = 0; idx < GDT_ENTRY_TLS_ENTRIES; idx++)
2587                 if (desc_empty(t->tls_array + idx))
2588                         return idx + GDT_ENTRY_TLS_MIN;
2589         return -ESRCH;
2590 }
2591
2592 /*
2593  * Set a given TLS descriptor:
2594  */
2595 asmlinkage int
2596 sys32_set_thread_area (struct ia32_user_desc *u_info)
2597 {
2598         struct thread_struct *t = &current->thread;
2599         struct ia32_user_desc info;
2600         struct desc_struct *desc;
2601         int cpu, idx;
2602
2603         if (copy_from_user(&info, u_info, sizeof(info)))
2604                 return -EFAULT;
2605         idx = info.entry_number;
2606
2607         /*
2608          * index -1 means the kernel should try to find and allocate an empty descriptor:
2609          */
2610         if (idx == -1) {
2611                 idx = get_free_idx();
2612                 if (idx < 0)
2613                         return idx;
2614                 if (put_user(idx, &u_info->entry_number))
2615                         return -EFAULT;
2616         }
2617
2618         if (idx < GDT_ENTRY_TLS_MIN || idx > GDT_ENTRY_TLS_MAX)
2619                 return -EINVAL;
2620
2621         desc = t->tls_array + idx - GDT_ENTRY_TLS_MIN;
2622
2623         cpu = smp_processor_id();
2624
2625         if (LDT_empty(&info)) {
2626                 desc->a = 0;
2627                 desc->b = 0;
2628         } else {
2629                 desc->a = LDT_entry_a(&info);
2630                 desc->b = LDT_entry_b(&info);
2631         }
2632         load_TLS(t, cpu);
2633         return 0;
2634 }
2635
2636 /*
2637  * Get the current Thread-Local Storage area:
2638  */
2639
2640 #define GET_BASE(desc) (                        \
2641         (((desc)->a >> 16) & 0x0000ffff) |      \
2642         (((desc)->b << 16) & 0x00ff0000) |      \
2643         ( (desc)->b        & 0xff000000)   )
2644
2645 #define GET_LIMIT(desc) (                       \
2646         ((desc)->a & 0x0ffff) |                 \
2647          ((desc)->b & 0xf0000) )
2648
2649 #define GET_32BIT(desc)         (((desc)->b >> 22) & 1)
2650 #define GET_CONTENTS(desc)      (((desc)->b >> 10) & 3)
2651 #define GET_WRITABLE(desc)      (((desc)->b >>  9) & 1)
2652 #define GET_LIMIT_PAGES(desc)   (((desc)->b >> 23) & 1)
2653 #define GET_PRESENT(desc)       (((desc)->b >> 15) & 1)
2654 #define GET_USEABLE(desc)       (((desc)->b >> 20) & 1)
2655
2656 asmlinkage int
2657 sys32_get_thread_area (struct ia32_user_desc *u_info)
2658 {
2659         struct ia32_user_desc info;
2660         struct desc_struct *desc;
2661         int idx;
2662
2663         if (get_user(idx, &u_info->entry_number))
2664                 return -EFAULT;
2665         if (idx < GDT_ENTRY_TLS_MIN || idx > GDT_ENTRY_TLS_MAX)
2666                 return -EINVAL;
2667
2668         desc = current->thread.tls_array + idx - GDT_ENTRY_TLS_MIN;
2669
2670         info.entry_number = idx;
2671         info.base_addr = GET_BASE(desc);
2672         info.limit = GET_LIMIT(desc);
2673         info.seg_32bit = GET_32BIT(desc);
2674         info.contents = GET_CONTENTS(desc);
2675         info.read_exec_only = !GET_WRITABLE(desc);
2676         info.limit_in_pages = GET_LIMIT_PAGES(desc);
2677         info.seg_not_present = !GET_PRESENT(desc);
2678         info.useable = GET_USEABLE(desc);
2679
2680         if (copy_to_user(u_info, &info, sizeof(info)))
2681                 return -EFAULT;
2682         return 0;
2683 }
2684
2685 extern asmlinkage long
2686 sys_timer_create(clockid_t which_clock, struct sigevent *timer_event_spec,
2687                  timer_t * created_timer_id);
2688
2689 asmlinkage long
2690 sys32_timer_create(u32 clock, struct sigevent32 *se32, timer_t *timer_id)
2691 {
2692         struct sigevent se;
2693         mm_segment_t oldfs;
2694         timer_t t;
2695         long err;
2696
2697         if (se32 == NULL)
2698                 return sys_timer_create(clock, NULL, timer_id);
2699
2700         memset(&se, 0, sizeof(struct sigevent));
2701         if (get_user(se.sigev_value.sival_int,  &se32->sigev_value.sival_int) ||
2702             __get_user(se.sigev_signo, &se32->sigev_signo) ||
2703             __get_user(se.sigev_notify, &se32->sigev_notify) ||
2704             __copy_from_user(&se._sigev_un._pad, &se32->_sigev_un._pad,
2705             sizeof(se._sigev_un._pad)))
2706                 return -EFAULT;
2707
2708         if (!access_ok(VERIFY_WRITE,timer_id,sizeof(timer_t)))
2709                 return -EFAULT;
2710
2711         oldfs = get_fs();
2712         set_fs(KERNEL_DS);
2713         err = sys_timer_create(clock, &se, &t);
2714         set_fs(oldfs);
2715
2716         if (!err)
2717                 err = __put_user (t, timer_id);
2718
2719         return err;
2720 }
2721
2722 long sys32_fadvise64_64(int fd, __u32 offset_low, __u32 offset_high,
2723                         __u32 len_low, __u32 len_high, int advice)
2724 {
2725         return sys_fadvise64_64(fd,
2726                                (((u64)offset_high)<<32) | offset_low,
2727                                (((u64)len_high)<<32) | len_low,
2728                                advice);
2729 }
2730
2731 #ifdef  NOTYET  /* UNTESTED FOR IA64 FROM HERE DOWN */
2732
2733 asmlinkage long sys32_setreuid(compat_uid_t ruid, compat_uid_t euid)
2734 {
2735         uid_t sruid, seuid;
2736
2737         sruid = (ruid == (compat_uid_t)-1) ? ((uid_t)-1) : ((uid_t)ruid);
2738         seuid = (euid == (compat_uid_t)-1) ? ((uid_t)-1) : ((uid_t)euid);
2739         return sys_setreuid(sruid, seuid);
2740 }
2741
2742 asmlinkage long
2743 sys32_setresuid(compat_uid_t ruid, compat_uid_t euid,
2744                 compat_uid_t suid)
2745 {
2746         uid_t sruid, seuid, ssuid;
2747
2748         sruid = (ruid == (compat_uid_t)-1) ? ((uid_t)-1) : ((uid_t)ruid);
2749         seuid = (euid == (compat_uid_t)-1) ? ((uid_t)-1) : ((uid_t)euid);
2750         ssuid = (suid == (compat_uid_t)-1) ? ((uid_t)-1) : ((uid_t)suid);
2751         return sys_setresuid(sruid, seuid, ssuid);
2752 }
2753
2754 asmlinkage long
2755 sys32_setregid(compat_gid_t rgid, compat_gid_t egid)
2756 {
2757         gid_t srgid, segid;
2758
2759         srgid = (rgid == (compat_gid_t)-1) ? ((gid_t)-1) : ((gid_t)rgid);
2760         segid = (egid == (compat_gid_t)-1) ? ((gid_t)-1) : ((gid_t)egid);
2761         return sys_setregid(srgid, segid);
2762 }
2763
2764 asmlinkage long
2765 sys32_setresgid(compat_gid_t rgid, compat_gid_t egid,
2766                 compat_gid_t sgid)
2767 {
2768         gid_t srgid, segid, ssgid;
2769
2770         srgid = (rgid == (compat_gid_t)-1) ? ((gid_t)-1) : ((gid_t)rgid);
2771         segid = (egid == (compat_gid_t)-1) ? ((gid_t)-1) : ((gid_t)egid);
2772         ssgid = (sgid == (compat_gid_t)-1) ? ((gid_t)-1) : ((gid_t)sgid);
2773         return sys_setresgid(srgid, segid, ssgid);
2774 }
2775
2776 /* Handle adjtimex compatibility. */
2777
2778 struct timex32 {
2779         u32 modes;
2780         s32 offset, freq, maxerror, esterror;
2781         s32 status, constant, precision, tolerance;
2782         struct compat_timeval time;
2783         s32 tick;
2784         s32 ppsfreq, jitter, shift, stabil;
2785         s32 jitcnt, calcnt, errcnt, stbcnt;
2786         s32  :32; s32  :32; s32  :32; s32  :32;
2787         s32  :32; s32  :32; s32  :32; s32  :32;
2788         s32  :32; s32  :32; s32  :32; s32  :32;
2789 };
2790
2791 extern int do_adjtimex(struct timex *);
2792
2793 asmlinkage long
2794 sys32_adjtimex(struct timex32 *utp)
2795 {
2796         struct timex txc;
2797         int ret;
2798
2799         memset(&txc, 0, sizeof(struct timex));
2800
2801         if(get_user(txc.modes, &utp->modes) ||
2802            __get_user(txc.offset, &utp->offset) ||
2803            __get_user(txc.freq, &utp->freq) ||
2804            __get_user(txc.maxerror, &utp->maxerror) ||
2805            __get_user(txc.esterror, &utp->esterror) ||
2806            __get_user(txc.status, &utp->status) ||
2807            __get_user(txc.constant, &utp->constant) ||
2808            __get_user(txc.precision, &utp->precision) ||
2809            __get_user(txc.tolerance, &utp->tolerance) ||
2810            __get_user(txc.time.tv_sec, &utp->time.tv_sec) ||
2811            __get_user(txc.time.tv_usec, &utp->time.tv_usec) ||
2812            __get_user(txc.tick, &utp->tick) ||
2813            __get_user(txc.ppsfreq, &utp->ppsfreq) ||
2814            __get_user(txc.jitter, &utp->jitter) ||
2815            __get_user(txc.shift, &utp->shift) ||
2816            __get_user(txc.stabil, &utp->stabil) ||
2817            __get_user(txc.jitcnt, &utp->jitcnt) ||
2818            __get_user(txc.calcnt, &utp->calcnt) ||
2819            __get_user(txc.errcnt, &utp->errcnt) ||
2820            __get_user(txc.stbcnt, &utp->stbcnt))
2821                 return -EFAULT;
2822
2823         ret = do_adjtimex(&txc);
2824
2825         if(put_user(txc.modes, &utp->modes) ||
2826            __put_user(txc.offset, &utp->offset) ||
2827            __put_user(txc.freq, &utp->freq) ||
2828            __put_user(txc.maxerror, &utp->maxerror) ||
2829            __put_user(txc.esterror, &utp->esterror) ||
2830            __put_user(txc.status, &utp->status) ||
2831            __put_user(txc.constant, &utp->constant) ||
2832            __put_user(txc.precision, &utp->precision) ||
2833            __put_user(txc.tolerance, &utp->tolerance) ||
2834            __put_user(txc.time.tv_sec, &utp->time.tv_sec) ||
2835            __put_user(txc.time.tv_usec, &utp->time.tv_usec) ||
2836            __put_user(txc.tick, &utp->tick) ||
2837            __put_user(txc.ppsfreq, &utp->ppsfreq) ||
2838            __put_user(txc.jitter, &utp->jitter) ||
2839            __put_user(txc.shift, &utp->shift) ||
2840            __put_user(txc.stabil, &utp->stabil) ||
2841            __put_user(txc.jitcnt, &utp->jitcnt) ||
2842            __put_user(txc.calcnt, &utp->calcnt) ||
2843            __put_user(txc.errcnt, &utp->errcnt) ||
2844            __put_user(txc.stbcnt, &utp->stbcnt))
2845                 ret = -EFAULT;
2846
2847         return ret;
2848 }
2849 #endif /* NOTYET */