arch/x86/kernel/acpi/boot.c

   1 /*
   2  *  boot.c - Architecture-Specific Low-Level ACPI Boot Support
   3  *
   4  *  Copyright (C) 2001, 2002 Paul Diefenbaugh <paul.s.diefenbaugh@intel.com>
   5  *  Copyright (C) 2001 Jun Nakajima <jun.nakajima@intel.com>
   6  *
   7  * ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
   8  *
   9  *  This program is free software; you can redistribute it and/or modify
  10  *  it under the terms of the GNU General Public License as published by
  11  *  the Free Software Foundation; either version 2 of the License, or
  12  *  (at your option) any later version.
  13  *
  14  *  This program is distributed in the hope that it will be useful,
  15  *  but WITHOUT ANY WARRANTY; without even the implied warranty of
  16  *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  17  *  GNU General Public License for more details.
  18  *
  19  *  You should have received a copy of the GNU General Public License
  20  *  along with this program; if not, write to the Free Software
  21  *  Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
  22  *
  23  * ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
  24  */
  25
  26 #include <linux/init.h>
  27 #include <linux/acpi.h>
  28 #include <linux/acpi_pmtmr.h>
  29 #include <linux/efi.h>
  30 #include <linux/cpumask.h>
  31 #include <linux/module.h>
  32 #include <linux/dmi.h>
  33 #include <linux/irq.h>
  34 #include <linux/bootmem.h>
  35 #include <linux/ioport.h>
  36
  37 #include <asm/pgtable.h>
  38 #include <asm/io_apic.h>
  39 #include <asm/apic.h>
  40 #include <asm/io.h>
  41 #include <asm/mpspec.h>
  42 #include <asm/smp.h>
  43
  44 static int __initdata acpi_force = 0;
  45 u32 acpi_rsdt_forced;
  46 #ifdef  CONFIG_ACPI
  47 int acpi_disabled = 0;
  48 #else
  49 int acpi_disabled = 1;
  50 #endif
  51 EXPORT_SYMBOL(acpi_disabled);
  52
  53 #ifdef  CONFIG_X86_64
  54 # include <asm/proto.h>
  55 #endif                          /* X86 */
  56
  57 #define BAD_MADT_ENTRY(entry, end) (                                        \
  58                 (!entry) || (unsigned long)entry + sizeof(*entry) > end ||  \
  59                 ((struct acpi_subtable_header *)entry)->length < sizeof(*entry))
  60
  61 #define PREFIX                  "ACPI: "
  62
  63 int acpi_noirq;                         /* skip ACPI IRQ initialization */
  64 int acpi_pci_disabled;          /* skip ACPI PCI scan and IRQ initialization */
  65 EXPORT_SYMBOL(acpi_pci_disabled);
  66 int acpi_ht __initdata = 1;     /* enable HT */
  67
  68 int acpi_lapic;
  69 int acpi_ioapic;
  70 int acpi_strict;
  71
  72 u8 acpi_sci_flags __initdata;
  73 int acpi_sci_override_gsi __initdata;
  74 int acpi_skip_timer_override __initdata;
  75 int acpi_use_timer_override __initdata;
  76
  77 #ifdef CONFIG_X86_LOCAL_APIC
  78 static u64 acpi_lapic_addr __initdata = APIC_DEFAULT_PHYS_BASE;
  79 #endif
  80
  81 #ifndef __HAVE_ARCH_CMPXCHG
  82 #warning ACPI uses CMPXCHG, i486 and later hardware
  83 #endif
  84
  85 /* --------------------------------------------------------------------------
  86                               Boot-time Configuration
  87    -------------------------------------------------------------------------- */
  88
  89 /*
  90  * The default interrupt routing model is PIC (8259).  This gets
  91  * overridden if IOAPICs are enumerated (below).
  92  */
  93 enum acpi_irq_model_id acpi_irq_model = ACPI_IRQ_MODEL_PIC;
  94
  95
  96 /*
  97  * Temporarily use the virtual area starting from FIX_IO_APIC_BASE_END,
  98  * to map the target physical address. The problem is that set_fixmap()
  99  * provides a single page, and it is possible that the page is not
 100  * sufficient.
 101  * By using this area, we can map up to MAX_IO_APICS pages temporarily,
 102  * i.e. until the next __va_range() call.
 103  *
 104  * Important Safety Note:  The fixed I/O APIC page numbers are *subtracted*
 105  * from the fixed base.  That's why we start at FIX_IO_APIC_BASE_END and
 106  * count idx down while incrementing the phys address.
 107  */
 108 char *__init __acpi_map_table(unsigned long phys, unsigned long size)
 109 {
 110
 111         if (!phys || !size)
 112                 return NULL;
 113
 114         return early_ioremap(phys, size);
 115 }
 116 void __init __acpi_unmap_table(char *map, unsigned long size)
 117 {
 118         if (!map || !size)
 119                 return;
 120
 121         early_iounmap(map, size);
 122 }
 123
 124 #ifdef CONFIG_PCI_MMCONFIG
 125
 126 static int acpi_mcfg_64bit_base_addr __initdata = FALSE;
 127
 128 /* The physical address of the MMCONFIG aperture.  Set from ACPI tables. */
 129 struct acpi_mcfg_allocation *pci_mmcfg_config;
 130 int pci_mmcfg_config_num;
 131
 132 static int __init acpi_mcfg_oem_check(struct acpi_table_mcfg *mcfg)
 133 {
 134         if (!strcmp(mcfg->header.oem_id, "SGI"))
 135                 acpi_mcfg_64bit_base_addr = TRUE;
 136
 137         return 0;
 138 }
 139
 140 int __init acpi_parse_mcfg(struct acpi_table_header *header)
 141 {
 142         struct acpi_table_mcfg *mcfg;
 143         unsigned long i;
 144         int config_size;
 145
 146         if (!header)
 147                 return -EINVAL;
 148
 149         mcfg = (struct acpi_table_mcfg *)header;
 150
 151         /* how many config structures do we have */
 152         pci_mmcfg_config_num = 0;
 153         i = header->length - sizeof(struct acpi_table_mcfg);
 154         while (i >= sizeof(struct acpi_mcfg_allocation)) {
 155                 ++pci_mmcfg_config_num;
 156                 i -= sizeof(struct acpi_mcfg_allocation);
 157         };
 158         if (pci_mmcfg_config_num == 0) {
 159                 printk(KERN_ERR PREFIX "MMCONFIG has no entries\n");
 160                 return -ENODEV;
 161         }
 162
 163         config_size = pci_mmcfg_config_num * sizeof(*pci_mmcfg_config);
 164         pci_mmcfg_config = kmalloc(config_size, GFP_KERNEL);
 165         if (!pci_mmcfg_config) {
 166                 printk(KERN_WARNING PREFIX
 167                        "No memory for MCFG config tables\n");
 168                 return -ENOMEM;
 169         }
 170
 171         memcpy(pci_mmcfg_config, &mcfg[1], config_size);
 172
 173         acpi_mcfg_oem_check(mcfg);
 174
 175         for (i = 0; i < pci_mmcfg_config_num; ++i) {
 176                 if ((pci_mmcfg_config[i].address > 0xFFFFFFFF) &&
 177                     !acpi_mcfg_64bit_base_addr) {
 178                         printk(KERN_ERR PREFIX
 179                                "MMCONFIG not in low 4GB of memory\n");
 180                         kfree(pci_mmcfg_config);
 181                         pci_mmcfg_config_num = 0;
 182                         return -ENODEV;
 183                 }
 184         }
 185
 186         return 0;
 187 }
 188 #endif                          /* CONFIG_PCI_MMCONFIG */
 189
 190 #ifdef CONFIG_X86_LOCAL_APIC
 191 static int __init acpi_parse_madt(struct acpi_table_header *table)
 192 {
 193         struct acpi_table_madt *madt = NULL;
 194
 195         if (!cpu_has_apic)
 196                 return -EINVAL;
 197
 198         madt = (struct acpi_table_madt *)table;
 199         if (!madt) {
 200                 printk(KERN_WARNING PREFIX "Unable to map MADT\n");
 201                 return -ENODEV;
 202         }
 203
 204         if (madt->address) {
 205                 acpi_lapic_addr = (u64) madt->address;
 206
 207                 printk(KERN_DEBUG PREFIX "Local APIC address 0x%08x\n",
 208                        madt->address);
 209         }
 210
 211         default_acpi_madt_oem_check(madt->header.oem_id,
 212                                     madt->header.oem_table_id);
 213
 214         return 0;
 215 }
 216
 217 static void __cpuinit acpi_register_lapic(int id, u8 enabled)
 218 {
 219         unsigned int ver = 0;
 220
 221         if (!enabled) {
 222                 ++disabled_cpus;
 223                 return;
 224         }
 225
 226         if (boot_cpu_physical_apicid != -1U)
 227                 ver = apic_version[boot_cpu_physical_apicid];
 228
 229         generic_processor_info(id, ver);
 230 }
 231
 232 static int __init
 233 acpi_parse_x2apic(struct acpi_subtable_header *header, const unsigned long end)
 234 {
 235         struct acpi_madt_local_x2apic *processor = NULL;
 236
 237         processor = (struct acpi_madt_local_x2apic *)header;
 238
 239         if (BAD_MADT_ENTRY(processor, end))
 240                 return -EINVAL;
 241
 242         acpi_table_print_madt_entry(header);
 243
 244 #ifdef CONFIG_X86_X2APIC
 245         /*
 246          * We need to register disabled CPU as well to permit
 247          * counting disabled CPUs. This allows us to size
 248          * cpus_possible_map more accurately, to permit
 249          * to not preallocating memory for all NR_CPUS
 250          * when we use CPU hotplug.
 251          */
 252         acpi_register_lapic(processor->local_apic_id,   /* APIC ID */
 253                             processor->lapic_flags & ACPI_MADT_ENABLED);
 254 #else
 255         printk(KERN_WARNING PREFIX "x2apic entry ignored\n");
 256 #endif
 257
 258         return 0;
 259 }
 260
 261 static int __init
 262 acpi_parse_lapic(struct acpi_subtable_header * header, const unsigned long end)
 263 {
 264         struct acpi_madt_local_apic *processor = NULL;
 265
 266         processor = (struct acpi_madt_local_apic *)header;
 267
 268         if (BAD_MADT_ENTRY(processor, end))
 269                 return -EINVAL;
 270
 271         acpi_table_print_madt_entry(header);
 272
 273         /*
 274          * We need to register disabled CPU as well to permit
 275          * counting disabled CPUs. This allows us to size
 276          * cpus_possible_map more accurately, to permit
 277          * to not preallocating memory for all NR_CPUS
 278          * when we use CPU hotplug.
 279          */
 280         acpi_register_lapic(processor->id,      /* APIC ID */
 281                             processor->lapic_flags & ACPI_MADT_ENABLED);
 282
 283         return 0;
 284 }
 285
 286 static int __init
 287 acpi_parse_sapic(struct acpi_subtable_header *header, const unsigned long end)
 288 {
 289         struct acpi_madt_local_sapic *processor = NULL;
 290
 291         processor = (struct acpi_madt_local_sapic *)header;
 292
 293         if (BAD_MADT_ENTRY(processor, end))
 294                 return -EINVAL;
 295
 296         acpi_table_print_madt_entry(header);
 297
 298         acpi_register_lapic((processor->id << 8) | processor->eid,/* APIC ID */
 299                             processor->lapic_flags & ACPI_MADT_ENABLED);
 300
 301         return 0;
 302 }
 303
 304 static int __init
 305 acpi_parse_lapic_addr_ovr(struct acpi_subtable_header * header,
 306                           const unsigned long end)
 307 {
 308         struct acpi_madt_local_apic_override *lapic_addr_ovr = NULL;
 309
 310         lapic_addr_ovr = (struct acpi_madt_local_apic_override *)header;
 311
 312         if (BAD_MADT_ENTRY(lapic_addr_ovr, end))
 313                 return -EINVAL;
 314
 315         acpi_lapic_addr = lapic_addr_ovr->address;
 316
 317         return 0;
 318 }
 319
 320 static int __init
 321 acpi_parse_x2apic_nmi(struct acpi_subtable_header *header,
 322                       const unsigned long end)
 323 {
 324         struct acpi_madt_local_x2apic_nmi *x2apic_nmi = NULL;
 325
 326         x2apic_nmi = (struct acpi_madt_local_x2apic_nmi *)header;
 327
 328         if (BAD_MADT_ENTRY(x2apic_nmi, end))
 329                 return -EINVAL;
 330
 331         acpi_table_print_madt_entry(header);
 332
 333         if (x2apic_nmi->lint != 1)
 334                 printk(KERN_WARNING PREFIX "NMI not connected to LINT 1!\n");
 335
 336         return 0;
 337 }
 338
 339 static int __init
 340 acpi_parse_lapic_nmi(struct acpi_subtable_header * header, const unsigned long end)
 341 {
 342         struct acpi_madt_local_apic_nmi *lapic_nmi = NULL;
 343
 344         lapic_nmi = (struct acpi_madt_local_apic_nmi *)header;
 345
 346         if (BAD_MADT_ENTRY(lapic_nmi, end))
 347                 return -EINVAL;
 348
 349         acpi_table_print_madt_entry(header);
 350
 351         if (lapic_nmi->lint != 1)
 352                 printk(KERN_WARNING PREFIX "NMI not connected to LINT 1!\n");
 353
 354         return 0;
 355 }
 356
 357 #endif                          /*CONFIG_X86_LOCAL_APIC */
 358
 359 #ifdef CONFIG_X86_IO_APIC
 360
 361 static int __init
 362 acpi_parse_ioapic(struct acpi_subtable_header * header, const unsigned long end)
 363 {
 364         struct acpi_madt_io_apic *ioapic = NULL;
 365
 366         ioapic = (struct acpi_madt_io_apic *)header;
 367
 368         if (BAD_MADT_ENTRY(ioapic, end))
 369                 return -EINVAL;
 370
 371         acpi_table_print_madt_entry(header);
 372
 373         mp_register_ioapic(ioapic->id,
 374                            ioapic->address, ioapic->global_irq_base);
 375
 376         return 0;
 377 }
 378
 379 /*
 380  * Parse Interrupt Source Override for the ACPI SCI
 381  */
 382 static void __init acpi_sci_ioapic_setup(u32 gsi, u16 polarity, u16 trigger)
 383 {
 384         if (trigger == 0)       /* compatible SCI trigger is level */
 385                 trigger = 3;
 386
 387         if (polarity == 0)      /* compatible SCI polarity is low */
 388                 polarity = 3;
 389
 390         /* Command-line over-ride via acpi_sci= */
 391         if (acpi_sci_flags & ACPI_MADT_TRIGGER_MASK)
 392                 trigger = (acpi_sci_flags & ACPI_MADT_TRIGGER_MASK) >> 2;
 393
 394         if (acpi_sci_flags & ACPI_MADT_POLARITY_MASK)
 395                 polarity = acpi_sci_flags & ACPI_MADT_POLARITY_MASK;
 396
 397         /*
 398          * mp_config_acpi_legacy_irqs() already setup IRQs < 16
 399          * If GSI is < 16, this will update its flags,
 400          * else it will create a new mp_irqs[] entry.
 401          */
 402         mp_override_legacy_irq(gsi, polarity, trigger, gsi);
 403
 404         /*
 405          * stash over-ride to indicate we've been here
 406          * and for later update of acpi_gbl_FADT
 407          */
 408         acpi_sci_override_gsi = gsi;
 409         return;
 410 }
 411
 412 static int __init
 413 acpi_parse_int_src_ovr(struct acpi_subtable_header * header,
 414                        const unsigned long end)
 415 {
 416         struct acpi_madt_interrupt_override *intsrc = NULL;
 417
 418         intsrc = (struct acpi_madt_interrupt_override *)header;
 419
 420         if (BAD_MADT_ENTRY(intsrc, end))
 421                 return -EINVAL;
 422
 423         acpi_table_print_madt_entry(header);
 424
 425         if (intsrc->source_irq == acpi_gbl_FADT.sci_interrupt) {
 426                 acpi_sci_ioapic_setup(intsrc->global_irq,
 427                                       intsrc->inti_flags & ACPI_MADT_POLARITY_MASK,
 428                                       (intsrc->inti_flags & ACPI_MADT_TRIGGER_MASK) >> 2);
 429                 return 0;
 430         }
 431
 432         if (acpi_skip_timer_override &&
 433             intsrc->source_irq == 0 && intsrc->global_irq == 2) {
 434                 printk(PREFIX "BIOS IRQ0 pin2 override ignored.\n");
 435                 return 0;
 436         }
 437
 438         mp_override_legacy_irq(intsrc->source_irq,
 439                                 intsrc->inti_flags & ACPI_MADT_POLARITY_MASK,
 440                                 (intsrc->inti_flags & ACPI_MADT_TRIGGER_MASK) >> 2,
 441                                 intsrc->global_irq);
 442
 443         return 0;
 444 }
 445
 446 static int __init
 447 acpi_parse_nmi_src(struct acpi_subtable_header * header, const unsigned long end)
 448 {
 449         struct acpi_madt_nmi_source *nmi_src = NULL;
 450
 451         nmi_src = (struct acpi_madt_nmi_source *)header;
 452
 453         if (BAD_MADT_ENTRY(nmi_src, end))
 454                 return -EINVAL;
 455
 456         acpi_table_print_madt_entry(header);
 457
 458         /* TBD: Support nimsrc entries? */
 459
 460         return 0;
 461 }
 462
 463 #endif                          /* CONFIG_X86_IO_APIC */
 464
 465 /*
 466  * acpi_pic_sci_set_trigger()
 467  *
 468  * use ELCR to set PIC-mode trigger type for SCI
 469  *
 470  * If a PIC-mode SCI is not recognized or gives spurious IRQ7's
 471  * it may require Edge Trigger -- use "acpi_sci=edge"
 472  *
 473  * Port 0x4d0-4d1 are ECLR1 and ECLR2, the Edge/Level Control Registers
 474  * for the 8259 PIC.  bit[n] = 1 means irq[n] is Level, otherwise Edge.
 475  * ECLR1 is IRQs 0-7 (IRQ 0, 1, 2 must be 0)
 476  * ECLR2 is IRQs 8-15 (IRQ 8, 13 must be 0)
 477  */
 478
 479 void __init acpi_pic_sci_set_trigger(unsigned int irq, u16 trigger)
 480 {
 481         unsigned int mask = 1 << irq;
 482         unsigned int old, new;
 483
 484         /* Real old ELCR mask */
 485         old = inb(0x4d0) | (inb(0x4d1) << 8);
 486
 487         /*
 488          * If we use ACPI to set PCI IRQs, then we should clear ELCR
 489          * since we will set it correctly as we enable the PCI irq
 490          * routing.
 491          */
 492         new = acpi_noirq ? old : 0;
 493
 494         /*
 495          * Update SCI information in the ELCR, it isn't in the PCI
 496          * routing tables..
 497          */
 498         switch (trigger) {
 499         case 1:         /* Edge - clear */
 500                 new &= ~mask;
 501                 break;
 502         case 3:         /* Level - set */
 503                 new |= mask;
 504                 break;
 505         }
 506
 507         if (old == new)
 508                 return;
 509
 510         printk(PREFIX "setting ELCR to %04x (from %04x)\n", new, old);
 511         outb(new, 0x4d0);
 512         outb(new >> 8, 0x4d1);
 513 }
 514
 515 int acpi_gsi_to_irq(u32 gsi, unsigned int *irq)
 516 {
 517         *irq = gsi;
 518         return 0;
 519 }
 520
 521 /*
 522  * success: return IRQ number (>=0)
 523  * failure: return < 0
 524  */
 525 int acpi_register_gsi(struct device *dev, u32 gsi, int triggering, int polarity)
 526 {
 527         unsigned int irq;
 528         unsigned int plat_gsi = gsi;
 529
 530 #ifdef CONFIG_PCI
 531         /*
 532          * Make sure all (legacy) PCI IRQs are set as level-triggered.
 533          */
 534         if (acpi_irq_model == ACPI_IRQ_MODEL_PIC) {
 535                 if (triggering == ACPI_LEVEL_SENSITIVE)
 536                         eisa_set_level_irq(gsi);
 537         }
 538 #endif
 539
 540 #ifdef CONFIG_X86_IO_APIC
 541         if (acpi_irq_model == ACPI_IRQ_MODEL_IOAPIC) {
 542                 plat_gsi = mp_register_gsi(dev, gsi, triggering, polarity);
 543         }
 544 #endif
 545         acpi_gsi_to_irq(plat_gsi, &irq);
 546         return irq;
 547 }
 548
 549 /*
 550  *  ACPI based hotplug support for CPU
 551  */
 552 #ifdef CONFIG_ACPI_HOTPLUG_CPU
 553
 554 static int __cpuinit _acpi_map_lsapic(acpi_handle handle, int *pcpu)
 555 {
 556         struct acpi_buffer buffer = { ACPI_ALLOCATE_BUFFER, NULL };
 557         union acpi_object *obj;
 558         struct acpi_madt_local_apic *lapic;
 559         cpumask_var_t tmp_map, new_map;
 560         u8 physid;
 561         int cpu;
 562         int retval = -ENOMEM;
 563
 564         if (ACPI_FAILURE(acpi_evaluate_object(handle, "_MAT", NULL, &buffer)))
 565                 return -EINVAL;
 566
 567         if (!buffer.length || !buffer.pointer)
 568                 return -EINVAL;
 569
 570         obj = buffer.pointer;
 571         if (obj->type != ACPI_TYPE_BUFFER ||
 572             obj->buffer.length < sizeof(*lapic)) {
 573                 kfree(buffer.pointer);
 574                 return -EINVAL;
 575         }
 576
 577         lapic = (struct acpi_madt_local_apic *)obj->buffer.pointer;
 578
 579         if (lapic->header.type != ACPI_MADT_TYPE_LOCAL_APIC ||
 580             !(lapic->lapic_flags & ACPI_MADT_ENABLED)) {
 581                 kfree(buffer.pointer);
 582                 return -EINVAL;
 583         }
 584
 585         physid = lapic->id;
 586
 587         kfree(buffer.pointer);
 588         buffer.length = ACPI_ALLOCATE_BUFFER;
 589         buffer.pointer = NULL;
 590
 591         if (!alloc_cpumask_var(&tmp_map, GFP_KERNEL))
 592                 goto out;
 593
 594         if (!alloc_cpumask_var(&new_map, GFP_KERNEL))
 595                 goto free_tmp_map;
 596
 597         cpumask_copy(tmp_map, cpu_present_mask);
 598         acpi_register_lapic(physid, lapic->lapic_flags & ACPI_MADT_ENABLED);
 599
 600         /*
 601          * If mp_register_lapic successfully generates a new logical cpu
 602          * number, then the following will get us exactly what was mapped
 603          */
 604         cpumask_andnot(new_map, cpu_present_mask, tmp_map);
 605         if (cpumask_empty(new_map)) {
 606                 printk ("Unable to map lapic to logical cpu number\n");
 607                 retval = -EINVAL;
 608                 goto free_new_map;
 609         }
 610
 611         cpu = cpumask_first(new_map);
 612
 613         *pcpu = cpu;
 614         retval = 0;
 615
 616 free_new_map:
 617         free_cpumask_var(new_map);
 618 free_tmp_map:
 619         free_cpumask_var(tmp_map);
 620 out:
 621         return retval;
 622 }
 623
 624 /* wrapper to silence section mismatch warning */
 625 int __ref acpi_map_lsapic(acpi_handle handle, int *pcpu)
 626 {
 627         return _acpi_map_lsapic(handle, pcpu);
 628 }
 629 EXPORT_SYMBOL(acpi_map_lsapic);
 630
 631 int acpi_unmap_lsapic(int cpu)
 632 {
 633         per_cpu(x86_cpu_to_apicid, cpu) = -1;
 634         set_cpu_present(cpu, false);
 635         num_processors--;
 636
 637         return (0);
 638 }
 639
 640 EXPORT_SYMBOL(acpi_unmap_lsapic);
 641 #endif                          /* CONFIG_ACPI_HOTPLUG_CPU */
 642
 643 int acpi_register_ioapic(acpi_handle handle, u64 phys_addr, u32 gsi_base)
 644 {
 645         /* TBD */
 646         return -EINVAL;
 647 }
 648
 649 EXPORT_SYMBOL(acpi_register_ioapic);
 650
 651 int acpi_unregister_ioapic(acpi_handle handle, u32 gsi_base)
 652 {
 653         /* TBD */
 654         return -EINVAL;
 655 }
 656
 657 EXPORT_SYMBOL(acpi_unregister_ioapic);
 658
 659 static int __init acpi_parse_sbf(struct acpi_table_header *table)
 660 {
 661         struct acpi_table_boot *sb;
 662
 663         sb = (struct acpi_table_boot *)table;
 664         if (!sb) {
 665                 printk(KERN_WARNING PREFIX "Unable to map SBF\n");
 666                 return -ENODEV;
 667         }
 668
 669         sbf_port = sb->cmos_index;      /* Save CMOS port */
 670
 671         return 0;
 672 }
 673
 674 #ifdef CONFIG_HPET_TIMER
 675 #include <asm/hpet.h>
 676
 677 static struct __initdata resource *hpet_res;
 678
 679 static int __init acpi_parse_hpet(struct acpi_table_header *table)
 680 {
 681         struct acpi_table_hpet *hpet_tbl;
 682
 683         hpet_tbl = (struct acpi_table_hpet *)table;
 684         if (!hpet_tbl) {
 685                 printk(KERN_WARNING PREFIX "Unable to map HPET\n");
 686                 return -ENODEV;
 687         }
 688
 689         if (hpet_tbl->address.space_id != ACPI_SPACE_MEM) {
 690                 printk(KERN_WARNING PREFIX "HPET timers must be located in "
 691                        "memory.\n");
 692                 return -1;
 693         }
 694
 695         hpet_address = hpet_tbl->address.address;
 696
 697         /*
 698          * Some broken BIOSes advertise HPET at 0x0. We really do not
 699          * want to allocate a resource there.
 700          */
 701         if (!hpet_address) {
 702                 printk(KERN_WARNING PREFIX
 703                        "HPET id: %#x base: %#lx is invalid\n",
 704                        hpet_tbl->id, hpet_address);
 705                 return 0;
 706         }
 707 #ifdef CONFIG_X86_64
 708         /*
 709          * Some even more broken BIOSes advertise HPET at
 710          * 0xfed0000000000000 instead of 0xfed00000. Fix it up and add
 711          * some noise:
 712          */
 713         if (hpet_address == 0xfed0000000000000UL) {
 714                 if (!hpet_force_user) {
 715                         printk(KERN_WARNING PREFIX "HPET id: %#x "
 716                                "base: 0xfed0000000000000 is bogus\n "
 717                                "try hpet=force on the kernel command line to "
 718                                "fix it up to 0xfed00000.\n", hpet_tbl->id);
 719                         hpet_address = 0;
 720                         return 0;
 721                 }
 722                 printk(KERN_WARNING PREFIX
 723                        "HPET id: %#x base: 0xfed0000000000000 fixed up "
 724                        "to 0xfed00000.\n", hpet_tbl->id);
 725                 hpet_address >>= 32;
 726         }
 727 #endif
 728         printk(KERN_INFO PREFIX "HPET id: %#x base: %#lx\n",
 729                hpet_tbl->id, hpet_address);
 730
 731         /*
 732          * Allocate and initialize the HPET firmware resource for adding into
 733          * the resource tree during the lateinit timeframe.
 734          */
 735 #define HPET_RESOURCE_NAME_SIZE 9
 736         hpet_res = alloc_bootmem(sizeof(*hpet_res) + HPET_RESOURCE_NAME_SIZE);
 737
 738         hpet_res->name = (void *)&hpet_res[1];
 739         hpet_res->flags = IORESOURCE_MEM;
 740         snprintf((char *)hpet_res->name, HPET_RESOURCE_NAME_SIZE, "HPET %u",
 741                  hpet_tbl->sequence);
 742
 743         hpet_res->start = hpet_address;
 744         hpet_res->end = hpet_address + (1 * 1024) - 1;
 745
 746         return 0;
 747 }
 748
 749 /*
 750  * hpet_insert_resource inserts the HPET resources used into the resource
 751  * tree.
 752  */
 753 static __init int hpet_insert_resource(void)
 754 {
 755         if (!hpet_res)
 756                 return 1;
 757
 758         return insert_resource(&iomem_resource, hpet_res);
 759 }
 760
 761 late_initcall(hpet_insert_resource);
 762
 763 #else
 764 #define acpi_parse_hpet NULL
 765 #endif
 766
 767 static int __init acpi_parse_fadt(struct acpi_table_header *table)
 768 {
 769
 770 #ifdef CONFIG_X86_PM_TIMER
 771         /* detect the location of the ACPI PM Timer */
 772         if (acpi_gbl_FADT.header.revision >= FADT2_REVISION_ID) {
 773                 /* FADT rev. 2 */
 774                 if (acpi_gbl_FADT.xpm_timer_block.space_id !=
 775                     ACPI_ADR_SPACE_SYSTEM_IO)
 776                         return 0;
 777
 778                 pmtmr_ioport = acpi_gbl_FADT.xpm_timer_block.address;
 779                 /*
 780                  * "X" fields are optional extensions to the original V1.0
 781                  * fields, so we must selectively expand V1.0 fields if the
 782                  * corresponding X field is zero.
 783                  */
 784                 if (!pmtmr_ioport)
 785                         pmtmr_ioport = acpi_gbl_FADT.pm_timer_block;
 786         } else {
 787                 /* FADT rev. 1 */
 788                 pmtmr_ioport = acpi_gbl_FADT.pm_timer_block;
 789         }
 790         if (pmtmr_ioport)
 791                 printk(KERN_INFO PREFIX "PM-Timer IO Port: %#x\n",
 792                        pmtmr_ioport);
 793 #endif
 794         return 0;
 795 }
 796
 797 #ifdef  CONFIG_X86_LOCAL_APIC
 798 /*
 799  * Parse LAPIC entries in MADT
 800  * returns 0 on success, < 0 on error
 801  */
 802
 803 static void __init acpi_register_lapic_address(unsigned long address)
 804 {
 805         mp_lapic_addr = address;
 806
 807         set_fixmap_nocache(FIX_APIC_BASE, address);
 808         if (boot_cpu_physical_apicid == -1U) {
 809                 boot_cpu_physical_apicid  = read_apic_id();
 810                 apic_version[boot_cpu_physical_apicid] =
 811                          GET_APIC_VERSION(apic_read(APIC_LVR));
 812         }
 813 }
 814
 815 static int __init early_acpi_parse_madt_lapic_addr_ovr(void)
 816 {
 817         int count;
 818
 819         if (!cpu_has_apic)
 820                 return -ENODEV;
 821
 822         /*
 823          * Note that the LAPIC address is obtained from the MADT (32-bit value)
 824          * and (optionally) overriden by a LAPIC_ADDR_OVR entry (64-bit value).
 825          */
 826
 827         count =
 828             acpi_table_parse_madt(ACPI_MADT_TYPE_LOCAL_APIC_OVERRIDE,
 829                                   acpi_parse_lapic_addr_ovr, 0);
 830         if (count < 0) {
 831                 printk(KERN_ERR PREFIX
 832                        "Error parsing LAPIC address override entry\n");
 833                 return count;
 834         }
 835
 836         acpi_register_lapic_address(acpi_lapic_addr);
 837
 838         return count;
 839 }
 840
 841 static int __init acpi_parse_madt_lapic_entries(void)
 842 {
 843         int count;
 844         int x2count = 0;
 845
 846         if (!cpu_has_apic)
 847                 return -ENODEV;
 848
 849         /*
 850          * Note that the LAPIC address is obtained from the MADT (32-bit value)
 851          * and (optionally) overriden by a LAPIC_ADDR_OVR entry (64-bit value).
 852          */
 853
 854         count =
 855             acpi_table_parse_madt(ACPI_MADT_TYPE_LOCAL_APIC_OVERRIDE,
 856                                   acpi_parse_lapic_addr_ovr, 0);
 857         if (count < 0) {
 858                 printk(KERN_ERR PREFIX
 859                        "Error parsing LAPIC address override entry\n");
 860                 return count;
 861         }
 862
 863         acpi_register_lapic_address(acpi_lapic_addr);
 864
 865         count = acpi_table_parse_madt(ACPI_MADT_TYPE_LOCAL_SAPIC,
 866                                       acpi_parse_sapic, MAX_APICS);
 867
 868         if (!count) {
 869                 x2count = acpi_table_parse_madt(ACPI_MADT_TYPE_LOCAL_X2APIC,
 870                                                 acpi_parse_x2apic, MAX_APICS);
 871                 count = acpi_table_parse_madt(ACPI_MADT_TYPE_LOCAL_APIC,
 872                                               acpi_parse_lapic, MAX_APICS);
 873         }
 874         if (!count && !x2count) {
 875                 printk(KERN_ERR PREFIX "No LAPIC entries present\n");
 876                 /* TBD: Cleanup to allow fallback to MPS */
 877                 return -ENODEV;
 878         } else if (count < 0 || x2count < 0) {
 879                 printk(KERN_ERR PREFIX "Error parsing LAPIC entry\n");
 880                 /* TBD: Cleanup to allow fallback to MPS */
 881                 return count;
 882         }
 883
 884         x2count =
 885             acpi_table_parse_madt(ACPI_MADT_TYPE_LOCAL_X2APIC_NMI,
 886                                   acpi_parse_x2apic_nmi, 0);
 887         count =
 888             acpi_table_parse_madt(ACPI_MADT_TYPE_LOCAL_APIC_NMI, acpi_parse_lapic_nmi, 0);
 889         if (count < 0 || x2count < 0) {
 890                 printk(KERN_ERR PREFIX "Error parsing LAPIC NMI entry\n");
 891                 /* TBD: Cleanup to allow fallback to MPS */
 892                 return count;
 893         }
 894         return 0;
 895 }
 896 #endif                          /* CONFIG_X86_LOCAL_APIC */
 897
 898 #ifdef  CONFIG_X86_IO_APIC
 899 #define MP_ISA_BUS              0
 900
 901 #ifdef CONFIG_X86_ES7000
 902 extern int es7000_plat;
 903 #endif
 904
 905 static struct {
 906         int apic_id;
 907         int gsi_base;
 908         int gsi_end;
 909         DECLARE_BITMAP(pin_programmed, MP_MAX_IOAPIC_PIN + 1);
 910 } mp_ioapic_routing[MAX_IO_APICS];
 911
 912 int mp_find_ioapic(int gsi)
 913 {
 914         int i = 0;
 915
 916         /* Find the IOAPIC that manages this GSI. */
 917         for (i = 0; i < nr_ioapics; i++) {
 918                 if ((gsi >= mp_ioapic_routing[i].gsi_base)
 919                     && (gsi <= mp_ioapic_routing[i].gsi_end))
 920                         return i;
 921         }
 922
 923         printk(KERN_ERR "ERROR: Unable to locate IOAPIC for GSI %d\n", gsi);
 924         return -1;
 925 }
 926
 927 int mp_find_ioapic_pin(int ioapic, int gsi)
 928 {
 929         if (WARN_ON(ioapic == -1))
 930                 return -1;
 931         if (WARN_ON(gsi > mp_ioapic_routing[ioapic].gsi_end))
 932                 return -1;
 933
 934         return gsi - mp_ioapic_routing[ioapic].gsi_base;
 935 }
 936
 937 static u8 __init uniq_ioapic_id(u8 id)
 938 {
 939 #ifdef CONFIG_X86_32
 940         if ((boot_cpu_data.x86_vendor == X86_VENDOR_INTEL) &&
 941             !APIC_XAPIC(apic_version[boot_cpu_physical_apicid]))
 942                 return io_apic_get_unique_id(nr_ioapics, id);
 943         else
 944                 return id;
 945 #else
 946         int i;
 947         DECLARE_BITMAP(used, 256);
 948         bitmap_zero(used, 256);
 949         for (i = 0; i < nr_ioapics; i++) {
 950                 struct mpc_ioapic *ia = &mp_ioapics[i];
 951                 __set_bit(ia->apicid, used);
 952         }
 953         if (!test_bit(id, used))
 954                 return id;
 955         return find_first_zero_bit(used, 256);
 956 #endif
 957 }
 958
 959 static int bad_ioapic(unsigned long address)
 960 {
 961         if (nr_ioapics >= MAX_IO_APICS) {
 962                 printk(KERN_ERR "ERROR: Max # of I/O APICs (%d) exceeded "
 963                        "(found %d)\n", MAX_IO_APICS, nr_ioapics);
 964                 panic("Recompile kernel with bigger MAX_IO_APICS!\n");
 965         }
 966         if (!address) {
 967                 printk(KERN_ERR "WARNING: Bogus (zero) I/O APIC address"
 968                        " found in table, skipping!\n");
 969                 return 1;
 970         }
 971         return 0;
 972 }
 973
 974 void __init mp_register_ioapic(int id, u32 address, u32 gsi_base)
 975 {
 976         int idx = 0;
 977
 978         if (bad_ioapic(address))
 979                 return;
 980
 981         idx = nr_ioapics;
 982
 983         mp_ioapics[idx].type = MP_IOAPIC;
 984         mp_ioapics[idx].flags = MPC_APIC_USABLE;
 985         mp_ioapics[idx].apicaddr = address;
 986
 987         set_fixmap_nocache(FIX_IO_APIC_BASE_0 + idx, address);
 988         mp_ioapics[idx].apicid = uniq_ioapic_id(id);
 989 #ifdef CONFIG_X86_32
 990         mp_ioapics[idx].apicver = io_apic_get_version(idx);
 991 #else
 992         mp_ioapics[idx].apicver = 0;
 993 #endif
 994         /*
 995          * Build basic GSI lookup table to facilitate gsi->io_apic lookups
 996          * and to prevent reprogramming of IOAPIC pins (PCI GSIs).
 997          */
 998         mp_ioapic_routing[idx].apic_id = mp_ioapics[idx].apicid;
 999         mp_ioapic_routing[idx].gsi_base = gsi_base;
1000         mp_ioapic_routing[idx].gsi_end = gsi_base +
1001             io_apic_get_redir_entries(idx);
1002
1003         printk(KERN_INFO "IOAPIC[%d]: apic_id %d, version %d, address 0x%x, "
1004                "GSI %d-%d\n", idx, mp_ioapics[idx].apicid,
1005                mp_ioapics[idx].apicver, mp_ioapics[idx].apicaddr,
1006                mp_ioapic_routing[idx].gsi_base, mp_ioapic_routing[idx].gsi_end);
1007
1008         nr_ioapics++;
1009 }
1010
1011 int __init acpi_probe_gsi(void)
1012 {
1013         int idx;
1014         int gsi;
1015         int max_gsi = 0;
1016
1017         if (acpi_disabled)
1018                 return 0;
1019
1020         if (!acpi_ioapic)
1021                 return 0;
1022
1023         max_gsi = 0;
1024         for (idx = 0; idx < nr_ioapics; idx++) {
1025                 gsi = mp_ioapic_routing[idx].gsi_end;
1026
1027                 if (gsi > max_gsi)
1028                         max_gsi = gsi;
1029         }
1030
1031         return max_gsi + 1;
1032 }
1033
1034 static void assign_to_mp_irq(struct mpc_intsrc *m,
1035                                     struct mpc_intsrc *mp_irq)
1036 {
1037         memcpy(mp_irq, m, sizeof(struct mpc_intsrc));
1038 }
1039
1040 static int mp_irq_cmp(struct mpc_intsrc *mp_irq,
1041                                 struct mpc_intsrc *m)
1042 {
1043         return memcmp(mp_irq, m, sizeof(struct mpc_intsrc));
1044 }
1045
1046 static void save_mp_irq(struct mpc_intsrc *m)
1047 {
1048         int i;
1049
1050         for (i = 0; i < mp_irq_entries; i++) {
1051                 if (!mp_irq_cmp(&mp_irqs[i], m))
1052                         return;
1053         }
1054
1055         assign_to_mp_irq(m, &mp_irqs[mp_irq_entries]);
1056         if (++mp_irq_entries == MAX_IRQ_SOURCES)
1057                 panic("Max # of irq sources exceeded!!\n");
1058 }
1059
1060 void __init mp_override_legacy_irq(u8 bus_irq, u8 polarity, u8 trigger, u32 gsi)
1061 {
1062         int ioapic;
1063         int pin;
1064         struct mpc_intsrc mp_irq;
1065
1066         /*
1067          * Convert 'gsi' to 'ioapic.pin'.
1068          */
1069         ioapic = mp_find_ioapic(gsi);
1070         if (ioapic < 0)
1071                 return;
1072         pin = mp_find_ioapic_pin(ioapic, gsi);
1073
1074         /*
1075          * TBD: This check is for faulty timer entries, where the override
1076          *      erroneously sets the trigger to level, resulting in a HUGE
1077          *      increase of timer interrupts!
1078          */
1079         if ((bus_irq == 0) && (trigger == 3))
1080                 trigger = 1;
1081
1082         mp_irq.type = MP_INTSRC;
1083         mp_irq.irqtype = mp_INT;
1084         mp_irq.irqflag = (trigger << 2) | polarity;
1085         mp_irq.srcbus = MP_ISA_BUS;
1086         mp_irq.srcbusirq = bus_irq;     /* IRQ */
1087         mp_irq.dstapic = mp_ioapics[ioapic].apicid; /* APIC ID */
1088         mp_irq.dstirq = pin;    /* INTIN# */
1089
1090         save_mp_irq(&mp_irq);
1091 }
1092
1093 void __init mp_config_acpi_legacy_irqs(void)
1094 {
1095         int i;
1096         int ioapic;
1097         unsigned int dstapic;
1098         struct mpc_intsrc mp_irq;
1099
1100 #if defined (CONFIG_MCA) || defined (CONFIG_EISA)
1101         /*
1102          * Fabricate the legacy ISA bus (bus #31).
1103          */
1104         mp_bus_id_to_type[MP_ISA_BUS] = MP_BUS_ISA;
1105 #endif
1106         set_bit(MP_ISA_BUS, mp_bus_not_pci);
1107         pr_debug("Bus #%d is ISA\n", MP_ISA_BUS);
1108
1109 #ifdef CONFIG_X86_ES7000
1110         /*
1111          * Older generations of ES7000 have no legacy identity mappings
1112          */
1113         if (es7000_plat == 1)
1114                 return;
1115 #endif
1116
1117         /*
1118          * Locate the IOAPIC that manages the ISA IRQs (0-15).
1119          */
1120         ioapic = mp_find_ioapic(0);
1121         if (ioapic < 0)
1122                 return;
1123         dstapic = mp_ioapics[ioapic].apicid;
1124
1125         /*
1126          * Use the default configuration for the IRQs 0-15.  Unless
1127          * overridden by (MADT) interrupt source override entries.
1128          */
1129         for (i = 0; i < 16; i++) {
1130                 int idx;
1131
1132                 for (idx = 0; idx < mp_irq_entries; idx++) {
1133                         struct mpc_intsrc *irq = mp_irqs + idx;
1134
1135                         /* Do we already have a mapping for this ISA IRQ? */
1136                         if (irq->srcbus == MP_ISA_BUS && irq->srcbusirq == i)
1137                                 break;
1138
1139                         /* Do we already have a mapping for this IOAPIC pin */
1140                         if (irq->dstapic == dstapic && irq->dstirq == i)
1141                                 break;
1142                 }
1143
1144                 if (idx != mp_irq_entries) {
1145                         printk(KERN_DEBUG "ACPI: IRQ%d used by override.\n", i);
1146                         continue;       /* IRQ already used */
1147                 }
1148
1149                 mp_irq.type = MP_INTSRC;
1150                 mp_irq.irqflag = 0;     /* Conforming */
1151                 mp_irq.srcbus = MP_ISA_BUS;
1152                 mp_irq.dstapic = dstapic;
1153                 mp_irq.irqtype = mp_INT;
1154                 mp_irq.srcbusirq = i; /* Identity mapped */
1155                 mp_irq.dstirq = i;
1156
1157                 save_mp_irq(&mp_irq);
1158         }
1159 }
1160
1161 int mp_register_gsi(struct device *dev, u32 gsi, int triggering, int polarity)
1162 {
1163         int ioapic;
1164         int ioapic_pin;
1165
1166         if (acpi_irq_model != ACPI_IRQ_MODEL_IOAPIC)
1167                 return gsi;
1168
1169         /* Don't set up the ACPI SCI because it's already set up */
1170         if (acpi_gbl_FADT.sci_interrupt == gsi)
1171                 return gsi;
1172
1173         ioapic = mp_find_ioapic(gsi);
1174         if (ioapic < 0) {
1175                 printk(KERN_WARNING "No IOAPIC for GSI %u\n", gsi);
1176                 return gsi;
1177         }
1178
1179         ioapic_pin = mp_find_ioapic_pin(ioapic, gsi);
1180
1181 #ifdef CONFIG_X86_32
1182         if (ioapic_renumber_irq)
1183                 gsi = ioapic_renumber_irq(ioapic, gsi);
1184 #endif
1185
1186         if (ioapic_pin > MP_MAX_IOAPIC_PIN) {
1187                 printk(KERN_ERR "Invalid reference to IOAPIC pin "
1188                        "%d-%d\n", mp_ioapic_routing[ioapic].apic_id,
1189                        ioapic_pin);
1190                 return gsi;
1191         }
1192
1193         /*
1194          * Avoid pin reprogramming.  PRTs typically include entries
1195          * with redundant pin->gsi mappings (but unique PCI devices);
1196          * we only program the IOAPIC on the first.
1197          */
1198         if (test_bit(ioapic_pin, mp_ioapic_routing[ioapic].pin_programmed)) {
1199                 pr_debug("Pin %d-%d already programmed\n",
1200                          mp_ioapic_routing[ioapic].apic_id, ioapic_pin);
1201                 return gsi;
1202         }
1203         set_bit(ioapic_pin, mp_ioapic_routing[ioapic].pin_programmed);
1204         io_apic_set_pci_routing(dev, ioapic, ioapic_pin, gsi,
1205                                 triggering == ACPI_EDGE_SENSITIVE ? 0 : 1,
1206                                 polarity == ACPI_ACTIVE_HIGH ? 0 : 1);
1207
1208         return gsi;
1209 }
1210
1211 int mp_config_acpi_gsi(unsigned char number, unsigned int devfn, u8 pin,
1212                         u32 gsi, int triggering, int polarity)
1213 {
1214 #ifdef CONFIG_X86_MPPARSE
1215         struct mpc_intsrc mp_irq;
1216         int ioapic;
1217
1218         if (!acpi_ioapic)
1219                 return 0;
1220
1221         /* print the entry should happen on mptable identically */
1222         mp_irq.type = MP_INTSRC;
1223         mp_irq.irqtype = mp_INT;
1224         mp_irq.irqflag = (triggering == ACPI_EDGE_SENSITIVE ? 4 : 0x0c) |
1225                                 (polarity == ACPI_ACTIVE_HIGH ? 1 : 3);
1226         mp_irq.srcbus = number;
1227         mp_irq.srcbusirq = (((devfn >> 3) & 0x1f) << 2) | ((pin - 1) & 3);
1228         ioapic = mp_find_ioapic(gsi);
1229         mp_irq.dstapic = mp_ioapic_routing[ioapic].apic_id;
1230         mp_irq.dstirq = mp_find_ioapic_pin(ioapic, gsi);
1231
1232         save_mp_irq(&mp_irq);
1233 #endif
1234         return 0;
1235 }
1236
1237 /*
1238  * Parse IOAPIC related entries in MADT
1239  * returns 0 on success, < 0 on error
1240  */
1241 static int __init acpi_parse_madt_ioapic_entries(void)
1242 {
1243         int count;
1244
1245         /*
1246          * ACPI interpreter is required to complete interrupt setup,
1247          * so if it is off, don't enumerate the io-apics with ACPI.
1248          * If MPS is present, it will handle them,
1249          * otherwise the system will stay in PIC mode
1250          */
1251         if (acpi_disabled || acpi_noirq) {
1252                 return -ENODEV;
1253         }
1254
1255         if (!cpu_has_apic)
1256                 return -ENODEV;
1257
1258         /*
1259          * if "noapic" boot option, don't look for IO-APICs
1260          */
1261         if (skip_ioapic_setup) {
1262                 printk(KERN_INFO PREFIX "Skipping IOAPIC probe "
1263                        "due to 'noapic' option.\n");
1264                 return -ENODEV;
1265         }
1266
1267         count =
1268             acpi_table_parse_madt(ACPI_MADT_TYPE_IO_APIC, acpi_parse_ioapic,
1269                                   MAX_IO_APICS);
1270         if (!count) {
1271                 printk(KERN_ERR PREFIX "No IOAPIC entries present\n");
1272                 return -ENODEV;
1273         } else if (count < 0) {
1274                 printk(KERN_ERR PREFIX "Error parsing IOAPIC entry\n");
1275                 return count;
1276         }
1277
1278         count =
1279             acpi_table_parse_madt(ACPI_MADT_TYPE_INTERRUPT_OVERRIDE, acpi_parse_int_src_ovr,
1280                                   nr_irqs);
1281         if (count < 0) {
1282                 printk(KERN_ERR PREFIX
1283                        "Error parsing interrupt source overrides entry\n");
1284                 /* TBD: Cleanup to allow fallback to MPS */
1285                 return count;
1286         }
1287
1288         /*
1289          * If BIOS did not supply an INT_SRC_OVR for the SCI
1290          * pretend we got one so we can set the SCI flags.
1291          */
1292         if (!acpi_sci_override_gsi)
1293                 acpi_sci_ioapic_setup(acpi_gbl_FADT.sci_interrupt, 0, 0);
1294
1295         /* Fill in identity legacy mapings where no override */
1296         mp_config_acpi_legacy_irqs();
1297
1298         count =
1299             acpi_table_parse_madt(ACPI_MADT_TYPE_NMI_SOURCE, acpi_parse_nmi_src,
1300                                   nr_irqs);
1301         if (count < 0) {
1302                 printk(KERN_ERR PREFIX "Error parsing NMI SRC entry\n");
1303                 /* TBD: Cleanup to allow fallback to MPS */
1304                 return count;
1305         }
1306
1307         return 0;
1308 }
1309 #else
1310 static inline int acpi_parse_madt_ioapic_entries(void)
1311 {
1312         return -1;
1313 }
1314 #endif  /* !CONFIG_X86_IO_APIC */
1315
1316 static void __init early_acpi_process_madt(void)
1317 {
1318 #ifdef CONFIG_X86_LOCAL_APIC
1319         int error;
1320
1321         if (!acpi_table_parse(ACPI_SIG_MADT, acpi_parse_madt)) {
1322
1323                 /*
1324                  * Parse MADT LAPIC entries
1325                  */
1326                 error = early_acpi_parse_madt_lapic_addr_ovr();
1327                 if (!error) {
1328                         acpi_lapic = 1;
1329                         smp_found_config = 1;
1330                 }
1331                 if (error == -EINVAL) {
1332                         /*
1333                          * Dell Precision Workstation 410, 610 come here.
1334                          */
1335                         printk(KERN_ERR PREFIX
1336                                "Invalid BIOS MADT, disabling ACPI\n");
1337                         disable_acpi();
1338                 }
1339         }
1340 #endif
1341 }
1342
1343 static void __init acpi_process_madt(void)
1344 {
1345 #ifdef CONFIG_X86_LOCAL_APIC
1346         int error;
1347
1348         if (!acpi_table_parse(ACPI_SIG_MADT, acpi_parse_madt)) {
1349
1350                 /*
1351                  * Parse MADT LAPIC entries
1352                  */
1353                 error = acpi_parse_madt_lapic_entries();
1354                 if (!error) {
1355                         acpi_lapic = 1;
1356
1357 #ifdef CONFIG_X86_BIGSMP
1358                         generic_bigsmp_probe();
1359 #endif
1360                         /*
1361                          * Parse MADT IO-APIC entries
1362                          */
1363                         error = acpi_parse_madt_ioapic_entries();
1364                         if (!error) {
1365                                 acpi_irq_model = ACPI_IRQ_MODEL_IOAPIC;
1366                                 acpi_ioapic = 1;
1367
1368                                 smp_found_config = 1;
1369                                 if (apic->setup_apic_routing)
1370                                         apic->setup_apic_routing();
1371                         }
1372                 }
1373                 if (error == -EINVAL) {
1374                         /*
1375                          * Dell Precision Workstation 410, 610 come here.
1376                          */
1377                         printk(KERN_ERR PREFIX
1378                                "Invalid BIOS MADT, disabling ACPI\n");
1379                         disable_acpi();
1380                 }
1381         } else {
1382                 /*
1383                  * ACPI found no MADT, and so ACPI wants UP PIC mode.
1384                  * In the event an MPS table was found, forget it.
1385                  * Boot with "acpi=off" to use MPS on such a system.
1386                  */
1387                 if (smp_found_config) {
1388                         printk(KERN_WARNING PREFIX
1389                                 "No APIC-table, disabling MPS\n");
1390                         smp_found_config = 0;
1391                 }
1392         }
1393
1394         /*
1395          * ACPI supports both logical (e.g. Hyper-Threading) and physical
1396          * processors, where MPS only supports physical.
1397          */
1398         if (acpi_lapic && acpi_ioapic)
1399                 printk(KERN_INFO "Using ACPI (MADT) for SMP configuration "
1400                        "information\n");
1401         else if (acpi_lapic)
1402                 printk(KERN_INFO "Using ACPI for processor (LAPIC) "
1403                        "configuration information\n");
1404 #endif
1405         return;
1406 }
1407
1408 static int __init disable_acpi_irq(const struct dmi_system_id *d)
1409 {
1410         if (!acpi_force) {
1411                 printk(KERN_NOTICE "%s detected: force use of acpi=noirq\n",
1412                        d->ident);
1413                 acpi_noirq_set();
1414         }
1415         return 0;
1416 }
1417
1418 static int __init disable_acpi_pci(const struct dmi_system_id *d)
1419 {
1420         if (!acpi_force) {
1421                 printk(KERN_NOTICE "%s detected: force use of pci=noacpi\n",
1422                        d->ident);
1423                 acpi_disable_pci();
1424         }
1425         return 0;
1426 }
1427
1428 static int __init dmi_disable_acpi(const struct dmi_system_id *d)
1429 {
1430         if (!acpi_force) {
1431                 printk(KERN_NOTICE "%s detected: acpi off\n", d->ident);
1432                 disable_acpi();
1433         } else {
1434                 printk(KERN_NOTICE
1435                        "Warning: DMI blacklist says broken, but acpi forced\n");
1436         }
1437         return 0;
1438 }
1439
1440 /*
1441  * Limit ACPI to CPU enumeration for HT
1442  */
1443 static int __init force_acpi_ht(const struct dmi_system_id *d)
1444 {
1445         if (!acpi_force) {
1446                 printk(KERN_NOTICE "%s detected: force use of acpi=ht\n",
1447                        d->ident);
1448                 disable_acpi();
1449                 acpi_ht = 1;
1450         } else {
1451                 printk(KERN_NOTICE
1452                        "Warning: acpi=force overrules DMI blacklist: acpi=ht\n");
1453         }
1454         return 0;
1455 }
1456
1457 /*
1458  * Force ignoring BIOS IRQ0 pin2 override
1459  */
1460 static int __init dmi_ignore_irq0_timer_override(const struct dmi_system_id *d)
1461 {
1462         /*
1463          * The ati_ixp4x0_rev() early PCI quirk should have set
1464          * the acpi_skip_timer_override flag already:
1465          */
1466         if (!acpi_skip_timer_override) {
1467                 WARN(1, KERN_ERR "ati_ixp4x0 quirk not complete.\n");
1468                 pr_notice("%s detected: Ignoring BIOS IRQ0 pin2 override\n",
1469                         d->ident);
1470                 acpi_skip_timer_override = 1;
1471         }
1472         return 0;
1473 }
1474
1475 /*
1476  * If your system is blacklisted here, but you find that acpi=force
1477  * works for you, please contact linux-acpi@vger.kernel.org
1478  */
1479 static struct dmi_system_id __initdata acpi_dmi_table[] = {
1480         /*
1481          * Boxes that need ACPI disabled
1482          */
1483         {
1484          .callback = dmi_disable_acpi,
1485          .ident = "IBM Thinkpad",
1486          .matches = {
1487                      DMI_MATCH(DMI_BOARD_VENDOR, "IBM"),
1488                      DMI_MATCH(DMI_BOARD_NAME, "2629H1G"),
1489                      },
1490          },
1491
1492         /*
1493          * Boxes that need acpi=ht
1494          */
1495         {
1496          .callback = force_acpi_ht,
1497          .ident = "FSC Primergy T850",
1498          .matches = {
1499                      DMI_MATCH(DMI_SYS_VENDOR, "FUJITSU SIEMENS"),
1500                      DMI_MATCH(DMI_PRODUCT_NAME, "PRIMERGY T850"),
1501                      },
1502          },
1503         {
1504          .callback = force_acpi_ht,
1505          .ident = "HP VISUALIZE NT Workstation",
1506          .matches = {
1507                      DMI_MATCH(DMI_BOARD_VENDOR, "Hewlett-Packard"),
1508                      DMI_MATCH(DMI_PRODUCT_NAME, "HP VISUALIZE NT Workstation"),
1509                      },
1510          },
1511         {
1512          .callback = force_acpi_ht,
1513          .ident = "Compaq Workstation W8000",
1514          .matches = {
1515                      DMI_MATCH(DMI_SYS_VENDOR, "Compaq"),
1516                      DMI_MATCH(DMI_PRODUCT_NAME, "Workstation W8000"),
1517                      },
1518          },
1519         {
1520          .callback = force_acpi_ht,
1521          .ident = "ASUS P4B266",
1522          .matches = {
1523                      DMI_MATCH(DMI_BOARD_VENDOR, "ASUSTeK Computer INC."),
1524                      DMI_MATCH(DMI_BOARD_NAME, "P4B266"),
1525                      },
1526          },
1527         {
1528          .callback = force_acpi_ht,
1529          .ident = "ASUS P2B-DS",
1530          .matches = {
1531                      DMI_MATCH(DMI_BOARD_VENDOR, "ASUSTeK Computer INC."),
1532                      DMI_MATCH(DMI_BOARD_NAME, "P2B-DS"),
1533                      },
1534          },
1535         {
1536          .callback = force_acpi_ht,
1537          .ident = "ASUS CUR-DLS",
1538          .matches = {
1539                      DMI_MATCH(DMI_BOARD_VENDOR, "ASUSTeK Computer INC."),
1540                      DMI_MATCH(DMI_BOARD_NAME, "CUR-DLS"),
1541                      },
1542          },
1543         {
1544          .callback = force_acpi_ht,
1545          .ident = "ABIT i440BX-W83977",
1546          .matches = {
1547                      DMI_MATCH(DMI_BOARD_VENDOR, "ABIT <http://www.abit.com>"),
1548                      DMI_MATCH(DMI_BOARD_NAME, "i440BX-W83977 (BP6)"),
1549                      },
1550          },
1551         {
1552          .callback = force_acpi_ht,
1553          .ident = "IBM Bladecenter",
1554          .matches = {
1555                      DMI_MATCH(DMI_BOARD_VENDOR, "IBM"),
1556                      DMI_MATCH(DMI_BOARD_NAME, "IBM eServer BladeCenter HS20"),
1557                      },
1558          },
1559         {
1560          .callback = force_acpi_ht,
1561          .ident = "IBM eServer xSeries 360",
1562          .matches = {
1563                      DMI_MATCH(DMI_BOARD_VENDOR, "IBM"),
1564                      DMI_MATCH(DMI_BOARD_NAME, "eServer xSeries 360"),
1565                      },
1566          },
1567         {
1568          .callback = force_acpi_ht,
1569          .ident = "IBM eserver xSeries 330",
1570          .matches = {
1571                      DMI_MATCH(DMI_BOARD_VENDOR, "IBM"),
1572                      DMI_MATCH(DMI_BOARD_NAME, "eserver xSeries 330"),
1573                      },
1574          },
1575         {
1576          .callback = force_acpi_ht,
1577          .ident = "IBM eserver xSeries 440",
1578          .matches = {
1579                      DMI_MATCH(DMI_BOARD_VENDOR, "IBM"),
1580                      DMI_MATCH(DMI_PRODUCT_NAME, "eserver xSeries 440"),
1581                      },
1582          },
1583
1584         /*
1585          * Boxes that need ACPI PCI IRQ routing disabled
1586          */
1587         {
1588          .callback = disable_acpi_irq,
1589          .ident = "ASUS A7V",
1590          .matches = {
1591                      DMI_MATCH(DMI_BOARD_VENDOR, "ASUSTeK Computer INC"),
1592                      DMI_MATCH(DMI_BOARD_NAME, "<A7V>"),
1593                      /* newer BIOS, Revision 1011, does work */
1594                      DMI_MATCH(DMI_BIOS_VERSION,
1595                                "ASUS A7V ACPI BIOS Revision 1007"),
1596                      },
1597          },
1598         {
1599                 /*
1600                  * Latest BIOS for IBM 600E (1.16) has bad pcinum
1601                  * for LPC bridge, which is needed for the PCI
1602                  * interrupt links to work. DSDT fix is in bug 5966.
1603                  * 2645, 2646 model numbers are shared with 600/600E/600X
1604                  */
1605          .callback = disable_acpi_irq,
1606          .ident = "IBM Thinkpad 600 Series 2645",
1607          .matches = {
1608                      DMI_MATCH(DMI_BOARD_VENDOR, "IBM"),
1609                      DMI_MATCH(DMI_BOARD_NAME, "2645"),
1610                      },
1611          },
1612         {
1613          .callback = disable_acpi_irq,
1614          .ident = "IBM Thinkpad 600 Series 2646",
1615          .matches = {
1616                      DMI_MATCH(DMI_BOARD_VENDOR, "IBM"),
1617                      DMI_MATCH(DMI_BOARD_NAME, "2646"),
1618                      },
1619          },
1620         /*
1621          * Boxes that need ACPI PCI IRQ routing and PCI scan disabled
1622          */
1623         {                       /* _BBN 0 bug */
1624          .callback = disable_acpi_pci,
1625          .ident = "ASUS PR-DLS",
1626          .matches = {
1627                      DMI_MATCH(DMI_BOARD_VENDOR, "ASUSTeK Computer INC."),
1628                      DMI_MATCH(DMI_BOARD_NAME, "PR-DLS"),
1629                      DMI_MATCH(DMI_BIOS_VERSION,
1630                                "ASUS PR-DLS ACPI BIOS Revision 1010"),
1631                      DMI_MATCH(DMI_BIOS_DATE, "03/21/2003")
1632                      },
1633          },
1634         {
1635          .callback = disable_acpi_pci,
1636          .ident = "Acer TravelMate 36x Laptop",
1637          .matches = {
1638                      DMI_MATCH(DMI_SYS_VENDOR, "Acer"),
1639                      DMI_MATCH(DMI_PRODUCT_NAME, "TravelMate 360"),
1640                      },
1641          },
1642         {}
1643 };
1644
1645 /* second table for DMI checks that should run after early-quirks */
1646 static struct dmi_system_id __initdata acpi_dmi_table_late[] = {
1647         /*
1648          * HP laptops which use a DSDT reporting as HP/SB400/10000,
1649          * which includes some code which overrides all temperature
1650          * trip points to 16C if the INTIN2 input of the I/O APIC
1651          * is enabled.  This input is incorrectly designated the
1652          * ISA IRQ 0 via an interrupt source override even though
1653          * it is wired to the output of the master 8259A and INTIN0
1654          * is not connected at all.  Force ignoring BIOS IRQ0 pin2
1655          * override in that cases.
1656          */
1657         {
1658          .callback = dmi_ignore_irq0_timer_override,
1659          .ident = "HP nx6115 laptop",
1660          .matches = {
1661                      DMI_MATCH(DMI_SYS_VENDOR, "Hewlett-Packard"),
1662                      DMI_MATCH(DMI_PRODUCT_NAME, "HP Compaq nx6115"),
1663                      },
1664          },
1665         {
1666          .callback = dmi_ignore_irq0_timer_override,
1667          .ident = "HP NX6125 laptop",
1668          .matches = {
1669                      DMI_MATCH(DMI_SYS_VENDOR, "Hewlett-Packard"),
1670                      DMI_MATCH(DMI_PRODUCT_NAME, "HP Compaq nx6125"),
1671                      },
1672          },
1673         {
1674          .callback = dmi_ignore_irq0_timer_override,
1675          .ident = "HP NX6325 laptop",
1676          .matches = {
1677                      DMI_MATCH(DMI_SYS_VENDOR, "Hewlett-Packard"),
1678                      DMI_MATCH(DMI_PRODUCT_NAME, "HP Compaq nx6325"),
1679                      },
1680          },
1681         {
1682          .callback = dmi_ignore_irq0_timer_override,
1683          .ident = "HP 6715b laptop",
1684          .matches = {
1685                      DMI_MATCH(DMI_SYS_VENDOR, "Hewlett-Packard"),
1686                      DMI_MATCH(DMI_PRODUCT_NAME, "HP Compaq 6715b"),
1687                      },
1688          },
1689         {}
1690 };
1691
1692 /*
1693  * acpi_boot_table_init() and acpi_boot_init()
1694  *  called from setup_arch(), always.
1695  *      1. checksums all tables
1696  *      2. enumerates lapics
1697  *      3. enumerates io-apics
1698  *
1699  * acpi_table_init() is separate to allow reading SRAT without
1700  * other side effects.
1701  *
1702  * side effects of acpi_boot_init:
1703  *      acpi_lapic = 1 if LAPIC found
1704  *      acpi_ioapic = 1 if IOAPIC found
1705  *      if (acpi_lapic && acpi_ioapic) smp_found_config = 1;
1706  *      if acpi_blacklisted() acpi_disabled = 1;
1707  *      acpi_irq_model=...
1708  *      ...
1709  *
1710  * return value: (currently ignored)
1711  *      0: success
1712  *      !0: failure
1713  */
1714
1715 int __init acpi_boot_table_init(void)
1716 {
1717         int error;
1718
1719         dmi_check_system(acpi_dmi_table);
1720
1721         /*
1722          * If acpi_disabled, bail out
1723          * One exception: acpi=ht continues far enough to enumerate LAPICs
1724          */
1725         if (acpi_disabled && !acpi_ht)
1726                 return 1;
1727
1728         /*
1729          * Initialize the ACPI boot-time table parser.
1730          */
1731         error = acpi_table_init();
1732         if (error) {
1733                 disable_acpi();
1734                 return error;
1735         }
1736
1737         acpi_table_parse(ACPI_SIG_BOOT, acpi_parse_sbf);
1738
1739         /*
1740          * blacklist may disable ACPI entirely
1741          */
1742         error = acpi_blacklisted();
1743         if (error) {
1744                 if (acpi_force) {
1745                         printk(KERN_WARNING PREFIX "acpi=force override\n");
1746                 } else {
1747                         printk(KERN_WARNING PREFIX "Disabling ACPI support\n");
1748                         disable_acpi();
1749                         return error;
1750                 }
1751         }
1752
1753         return 0;
1754 }
1755
1756 int __init early_acpi_boot_init(void)
1757 {
1758         /*
1759          * If acpi_disabled, bail out
1760          * One exception: acpi=ht continues far enough to enumerate LAPICs
1761          */
1762         if (acpi_disabled && !acpi_ht)
1763                 return 1;
1764
1765         /*
1766          * Process the Multiple APIC Description Table (MADT), if present
1767          */
1768         early_acpi_process_madt();
1769
1770         return 0;
1771 }
1772
1773 int __init acpi_boot_init(void)
1774 {
1775         /* those are executed after early-quirks are executed */
1776         dmi_check_system(acpi_dmi_table_late);
1777
1778         /*
1779          * If acpi_disabled, bail out
1780          * One exception: acpi=ht continues far enough to enumerate LAPICs
1781          */
1782         if (acpi_disabled && !acpi_ht)
1783                 return 1;
1784
1785         acpi_table_parse(ACPI_SIG_BOOT, acpi_parse_sbf);
1786
1787         /*
1788          * set sci_int and PM timer address
1789          */
1790         acpi_table_parse(ACPI_SIG_FADT, acpi_parse_fadt);
1791
1792         /*
1793          * Process the Multiple APIC Description Table (MADT), if present
1794          */
1795         acpi_process_madt();
1796
1797         acpi_table_parse(ACPI_SIG_HPET, acpi_parse_hpet);
1798
1799         return 0;
1800 }
1801
1802 static int __init parse_acpi(char *arg)
1803 {
1804         if (!arg)
1805                 return -EINVAL;
1806
1807         /* "acpi=off" disables both ACPI table parsing and interpreter */
1808         if (strcmp(arg, "off") == 0) {
1809                 disable_acpi();
1810         }
1811         /* acpi=force to over-ride black-list */
1812         else if (strcmp(arg, "force") == 0) {
1813                 acpi_force = 1;
1814                 acpi_ht = 1;
1815                 acpi_disabled = 0;
1816         }
1817         /* acpi=strict disables out-of-spec workarounds */
1818         else if (strcmp(arg, "strict") == 0) {
1819                 acpi_strict = 1;
1820         }
1821         /* Limit ACPI just to boot-time to enable HT */
1822         else if (strcmp(arg, "ht") == 0) {
1823                 if (!acpi_force)
1824                         disable_acpi();
1825                 acpi_ht = 1;
1826         }
1827         /* acpi=rsdt use RSDT instead of XSDT */
1828         else if (strcmp(arg, "rsdt") == 0) {
1829                 acpi_rsdt_forced = 1;
1830         }
1831         /* "acpi=noirq" disables ACPI interrupt routing */
1832         else if (strcmp(arg, "noirq") == 0) {
1833                 acpi_noirq_set();
1834         } else {
1835                 /* Core will printk when we return error. */
1836                 return -EINVAL;
1837         }
1838         return 0;
1839 }
1840 early_param("acpi", parse_acpi);
1841
1842 /* FIXME: Using pci= for an ACPI parameter is a travesty. */
1843 static int __init parse_pci(char *arg)
1844 {
1845         if (arg && strcmp(arg, "noacpi") == 0)
1846                 acpi_disable_pci();
1847         return 0;
1848 }
1849 early_param("pci", parse_pci);
1850
1851 int __init acpi_mps_check(void)
1852 {
1853 #if defined(CONFIG_X86_LOCAL_APIC) && !defined(CONFIG_X86_MPPARSE)
1854 /* mptable code is not built-in*/
1855         if (acpi_disabled || acpi_noirq) {
1856                 printk(KERN_WARNING "MPS support code is not built-in.\n"
1857                        "Using acpi=off or acpi=noirq or pci=noacpi "
1858                        "may have problem\n");
1859                 return 1;
1860         }
1861 #endif
1862         return 0;
1863 }
1864
1865 #ifdef CONFIG_X86_IO_APIC
1866 static int __init parse_acpi_skip_timer_override(char *arg)
1867 {
1868         acpi_skip_timer_override = 1;
1869         return 0;
1870 }
1871 early_param("acpi_skip_timer_override", parse_acpi_skip_timer_override);
1872
1873 static int __init parse_acpi_use_timer_override(char *arg)
1874 {
1875         acpi_use_timer_override = 1;
1876         return 0;
1877 }
1878 early_param("acpi_use_timer_override", parse_acpi_use_timer_override);
1879 #endif /* CONFIG_X86_IO_APIC */
1880
1881 static int __init setup_acpi_sci(char *s)
1882 {
1883         if (!s)
1884                 return -EINVAL;
1885         if (!strcmp(s, "edge"))
1886                 acpi_sci_flags =  ACPI_MADT_TRIGGER_EDGE |
1887                         (acpi_sci_flags & ~ACPI_MADT_TRIGGER_MASK);
1888         else if (!strcmp(s, "level"))
1889                 acpi_sci_flags = ACPI_MADT_TRIGGER_LEVEL |
1890                         (acpi_sci_flags & ~ACPI_MADT_TRIGGER_MASK);
1891         else if (!strcmp(s, "high"))
1892                 acpi_sci_flags = ACPI_MADT_POLARITY_ACTIVE_HIGH |
1893                         (acpi_sci_flags & ~ACPI_MADT_POLARITY_MASK);
1894         else if (!strcmp(s, "low"))
1895                 acpi_sci_flags = ACPI_MADT_POLARITY_ACTIVE_LOW |
1896                         (acpi_sci_flags & ~ACPI_MADT_POLARITY_MASK);
1897         else
1898                 return -EINVAL;
1899         return 0;
1900 }
1901 early_param("acpi_sci", setup_acpi_sci);
1902
1903 int __acpi_acquire_global_lock(unsigned int *lock)
1904 {
1905         unsigned int old, new, val;
1906         do {
1907                 old = *lock;
1908                 new = (((old & ~0x3) + 2) + ((old >> 1) & 0x1));
1909                 val = cmpxchg(lock, old, new);
1910         } while (unlikely (val != old));
1911         return (new < 3) ? -1 : 0;
1912 }
1913
1914 int __acpi_release_global_lock(unsigned int *lock)
1915 {
1916         unsigned int old, new, val;
1917         do {
1918                 old = *lock;
1919                 new = old & ~0x3;
1920                 val = cmpxchg(lock, old, new);
1921         } while (unlikely (val != old));
1922         return old & 0x1;
1923 }