acpi: parse the MCFG table
[akaros.git] / kern / drivers / dev / acpi.c
1 /*
2  * This file is part of the UCB release of Plan 9. It is subject to the license
3  * terms in the LICENSE file found in the top-level directory of this
4  * distribution and at http://akaros.cs.berkeley.edu/files/Plan9License. No
5  * part of the UCB release of Plan 9, including this file, may be copied,
6  * modified, propagated, or distributed except according to the terms contained
7  * in the LICENSE file.
8  */
9
10 #include <acpi.h>
11 #include <assert.h>
12 #include <cpio.h>
13 #include <error.h>
14 #include <kmalloc.h>
15 #include <kref.h>
16 #include <net/ip.h>
17 #include <ns.h>
18 #include <pmap.h>
19 #include <slab.h>
20 #include <slice.h>
21 #include <smp.h>
22 #include <stdio.h>
23 #include <string.h>
24
25 #include "../timers/hpet.h"
26
27 #ifdef CONFIG_X86
28 #include <arch/pci.h>
29 #endif
30
31 /* -----------------------------------------------------------------------------
32  * Basic ACPI device.
33  *
34  * The qid.Path will be made unique by incrementing lastpath. lastpath starts
35  * at Qroot.
36  *
37  * Qtbl will return a pointer to the Atable, which includes the signature, OEM
38  * data, and so on.
39  *
40  * Raw, at any level, dumps the raw table at that level, which by the ACPI
41  * flattened tree layout will include all descendents.
42  *
43  * Qpretty, at any level, will print the pretty form for that level and all
44  * descendants.
45  */
46 enum { Qroot = 0,
47
48        // The type is the qid.path mod NQtypes.
49        Qdir = 0,
50        Qpretty,
51        Qraw,
52        Qtbl,
53        NQtypes,
54
55        QIndexShift = 8,
56        QIndexMask = (1 << QIndexShift) - 1,
57 };
58
59 #define ATABLEBUFSZ ROUNDUP(sizeof(struct Atable), KMALLOC_ALIGNMENT)
60
61 static uint64_t lastpath;
62 static struct slice emptyslice;
63 static struct Atable **atableindex;
64 struct dev acpidevtab;
65
66 static char *devname(void)
67 {
68         return acpidevtab.name;
69 }
70
71 /*
72  * ACPI 4.0 Support.
73  * Still WIP.
74  *
75  * This driver locates tables and parses only a small subset
76  * of tables. All other tables are mapped and kept for the user-level
77  * interpreter.
78  */
79 static struct cmdtab ctls[] = {
80     {CMregion, "region", 6},
81     {CMgpe, "gpe", 3},
82 };
83
84 static struct Facs *facs; /* Firmware ACPI control structure */
85 static struct Fadt *fadt; /* Fixed ACPI description to reach ACPI regs */
86 static struct Atable *root;
87 static struct Xsdt *xsdt;     /* XSDT table */
88 static struct Atable *tfirst; /* loaded DSDT/SSDT/... tables */
89 static struct Atable *tlast;  /* pointer to last table */
90 struct Atable *apics;         /* APIC info */
91 struct Atable *srat;          /* System resource affinity used by physalloc */
92 struct Atable *dmar;
93 static struct Slit *slit;      /* Sys locality info table used by scheduler */
94 static struct Atable *mscttbl; /* Maximum system characteristics table */
95 static struct Atable *mcfgtbl;
96 static struct Reg *reg;        /* region used for I/O */
97 static struct Gpe *gpes;       /* General purpose events */
98 static int ngpes;
99
100 static char *regnames[] = {
101     "mem", "io", "pcicfg", "embed", "smb", "cmos", "pcibar", "ipmi",
102 };
103
104 /*
105  * Lists to store RAM that we copy ACPI tables into. When we map a new
106  * ACPI list into the kernel, we copy it into a specifically RAM buffer
107  * (to make sure it's not coming from e.g. slow device memory). We store
108  * pointers to those buffers on these lists.
109  */
110 struct Acpilist {
111         struct Acpilist *next;
112         size_t size;
113         int8_t raw[];
114 };
115
116 static struct Acpilist *acpilists;
117
118 /*
119  * Produces an Atable at some level in the tree. Note that Atables are
120  * isomorphic to directories in the file system namespace; this code
121  * ensures that invariant.
122  */
123 struct Atable *mkatable(struct Atable *parent, int type, char *name,
124                         uint8_t *raw, size_t rawsize, size_t addsize)
125 {
126         void *m;
127         struct Atable *t;
128
129         m = kzmalloc(ATABLEBUFSZ + addsize, MEM_WAIT);
130         if (m == NULL)
131                 panic("no memory for more aml tables");
132         t = m;
133         t->parent = parent;
134         t->tbl = NULL;
135         if (addsize != 0)
136                 t->tbl = m + ATABLEBUFSZ;
137         t->rawsize = rawsize;
138         t->raw = raw;
139         strlcpy(t->name, name, sizeof(t->name));
140         mkqid(&t->qid, (lastpath << QIndexShift) + Qdir, 0, QTDIR);
141         mkqid(&t->rqid, (lastpath << QIndexShift) + Qraw, 0, 0);
142         mkqid(&t->pqid, (lastpath << QIndexShift) + Qpretty, 0, 0);
143         mkqid(&t->tqid, (lastpath << QIndexShift) + Qtbl, 0, 0);
144         lastpath++;
145
146         return t;
147 }
148
149 struct Atable *finatable(struct Atable *t, struct slice *slice)
150 {
151         size_t n;
152         struct Atable *tail;
153         struct dirtab *dirs;
154
155         n = slice_len(slice);
156         t->nchildren = n;
157         t->children = (struct Atable **)slice_finalize(slice);
158         dirs =
159             kreallocarray(NULL, n + NQtypes, sizeof(struct dirtab), MEM_WAIT);
160         assert(dirs != NULL);
161         dirs[0] = (struct dirtab){".", t->qid, 0, 0555};
162         dirs[1] = (struct dirtab){"pretty", t->pqid, 0, 0444};
163         dirs[2] = (struct dirtab){"raw", t->rqid, 0, 0444};
164         dirs[3] = (struct dirtab){"table", t->tqid, 0, 0444};
165         for (size_t i = 0; i < n; i++) {
166                 strlcpy(dirs[i + NQtypes].name, t->children[i]->name, KNAMELEN);
167                 dirs[i + NQtypes].qid = t->children[i]->qid;
168                 dirs[i + NQtypes].length = 0;
169                 dirs[i + NQtypes].perm = DMDIR | 0555;
170         }
171         t->cdirs = dirs;
172         tail = NULL;
173         while (n-- > 0) {
174                 t->children[n]->next = tail;
175                 tail = t->children[n];
176         }
177
178         return t;
179 }
180
181 struct Atable *finatable_nochildren(struct Atable *t)
182 {
183         return finatable(t, &emptyslice);
184 }
185
186 static char *dumpGas(char *start, char *end, char *prefix, struct Gas *g);
187 static void dumpxsdt(void);
188
189 static char *acpiregstr(int id)
190 {
191         static char buf[20]; /* BUG */
192
193         if (id >= 0 && id < ARRAY_SIZE(regnames))
194                 return regnames[id];
195         seprintf(buf, buf + sizeof(buf), "spc:%#x", id);
196         return buf;
197 }
198
199 static int acpiregid(char *s)
200 {
201         for (int i = 0; i < ARRAY_SIZE(regnames); i++)
202                 if (strcmp(regnames[i], s) == 0)
203                         return i;
204         return -1;
205 }
206
207 /*
208  * TODO(rminnich): Fix these if we're ever on a different-endian machine.
209  * They are specific to little-endian processors and are not portable.
210  */
211 static uint8_t mget8(uintptr_t p, void *unused)
212 {
213         uint8_t *cp = (uint8_t *)p;
214         return *cp;
215 }
216
217 static void mset8(uintptr_t p, uint8_t v, void *unused)
218 {
219         uint8_t *cp = (uint8_t *)p;
220         *cp = v;
221 }
222
223 static uint16_t mget16(uintptr_t p, void *unused)
224 {
225         uint16_t *cp = (uint16_t *)p;
226         return *cp;
227 }
228
229 static void mset16(uintptr_t p, uint16_t v, void *unused)
230 {
231         uint16_t *cp = (uint16_t *)p;
232         *cp = v;
233 }
234
235 static uint32_t mget32(uintptr_t p, void *unused)
236 {
237         uint32_t *cp = (uint32_t *)p;
238         return *cp;
239 }
240
241 static void mset32(uintptr_t p, uint32_t v, void *unused)
242 {
243         uint32_t *cp = (uint32_t *)p;
244         *cp = v;
245 }
246
247 static uint64_t mget64(uintptr_t p, void *unused)
248 {
249         uint64_t *cp = (uint64_t *)p;
250         return *cp;
251 }
252
253 static void mset64(uintptr_t p, uint64_t v, void *unused)
254 {
255         uint64_t *cp = (uint64_t *)p;
256         *cp = v;
257 }
258
259 static uint8_t ioget8(uintptr_t p, void *unused)
260 {
261         return inb(p);
262 }
263
264 static void ioset8(uintptr_t p, uint8_t v, void *unused)
265 {
266         outb(p, v);
267 }
268
269 static uint16_t ioget16(uintptr_t p, void *unused)
270 {
271         return inw(p);
272 }
273
274 static void ioset16(uintptr_t p, uint16_t v, void *unused)
275 {
276         outw(p, v);
277 }
278
279 static uint32_t ioget32(uintptr_t p, void *unused)
280 {
281         return inl(p);
282 }
283
284 static void ioset32(uintptr_t p, uint32_t v, void *unused)
285 {
286         outl(p, v);
287 }
288
289 /*
290  * TODO(rminnich): these cfgs are hacky. Maybe all the struct Reg should have
291  * struct pci_device or something?
292  */
293 static uint8_t cfgget8(uintptr_t p, void *r)
294 {
295         struct Reg *ro = r;
296         struct pci_device pcidev;
297
298         explode_tbdf(ro->tbdf);
299         return pcidev_read8(&pcidev, p);
300 }
301
302 static void cfgset8(uintptr_t p, uint8_t v, void *r)
303 {
304         struct Reg *ro = r;
305         struct pci_device pcidev;
306
307         explode_tbdf(ro->tbdf);
308         pcidev_write8(&pcidev, p, v);
309 }
310
311 static uint16_t cfgget16(uintptr_t p, void *r)
312 {
313         struct Reg *ro = r;
314         struct pci_device pcidev;
315
316         explode_tbdf(ro->tbdf);
317         return pcidev_read16(&pcidev, p);
318 }
319
320 static void cfgset16(uintptr_t p, uint16_t v, void *r)
321 {
322         struct Reg *ro = r;
323         struct pci_device pcidev;
324
325         explode_tbdf(ro->tbdf);
326         pcidev_write16(&pcidev, p, v);
327 }
328
329 static uint32_t cfgget32(uintptr_t p, void *r)
330 {
331         struct Reg *ro = r;
332         struct pci_device pcidev;
333
334         explode_tbdf(ro->tbdf);
335         return pcidev_read32(&pcidev, p);
336 }
337
338 static void cfgset32(uintptr_t p, uint32_t v, void *r)
339 {
340         struct Reg *ro = r;
341         struct pci_device pcidev;
342
343         explode_tbdf(ro->tbdf);
344         pcidev_write32(&pcidev, p, v);
345 }
346
347 static struct Regio memio = {NULL,   mget8,  mset8,  mget16, mset16,
348                              mget32, mset32, mget64, mset64};
349
350 static struct Regio ioio = {NULL,    ioget8,  ioset8, ioget16, ioset16,
351                             ioget32, ioset32, NULL,   NULL};
352
353 static struct Regio cfgio = {NULL,     cfgget8,  cfgset8, cfgget16, cfgset16,
354                              cfgget32, cfgset32, NULL,    NULL};
355
356 /*
357  * Copy memory, 1/2/4/8-bytes at a time, to/from a region.
358  */
359 static long regcpy(struct Regio *dio, uintptr_t da, struct Regio *sio,
360                    uintptr_t sa, long len, int align)
361 {
362         int n, i;
363
364         printd("regcpy %#p %#p %#p %#p\n", da, sa, len, align);
365         if ((len % align) != 0)
366                 printd("regcpy: bug: copy not aligned. truncated\n");
367         n = len / align;
368         for (i = 0; i < n; i++) {
369                 switch (align) {
370                 case 1:
371                         printd("cpy8 %#p %#p\n", da, sa);
372                         dio->set8(da, sio->get8(sa, sio->arg), dio->arg);
373                         break;
374                 case 2:
375                         printd("cpy16 %#p %#p\n", da, sa);
376                         dio->set16(da, sio->get16(sa, sio->arg), dio->arg);
377                         break;
378                 case 4:
379                         printd("cpy32 %#p %#p\n", da, sa);
380                         dio->set32(da, sio->get32(sa, sio->arg), dio->arg);
381                         break;
382                 case 8:
383                         printd("cpy64 %#p %#p\n", da, sa);
384                         warn("Not doing set64 for some reason, fix me!");
385                         //  dio->set64(da, sio->get64(sa, sio->arg), dio->arg);
386                         break;
387                 default:
388                         panic("regcpy: align bug");
389                 }
390                 da += align;
391                 sa += align;
392         }
393         return n * align;
394 }
395
396 /*
397  * Perform I/O within region in access units of accsz bytes.
398  * All units in bytes.
399  */
400 static long regio(struct Reg *r, void *p, uint32_t len, uintptr_t off, int iswr)
401 {
402         struct Regio rio;
403         uintptr_t rp;
404
405         printd("reg%s %s %#p %#p %#lx sz=%d\n", iswr ? "out" : "in", r->name, p,
406                off, len, r->accsz);
407         rp = 0;
408         if (off + len > r->len) {
409                 printd("regio: access outside limits");
410                 len = r->len - off;
411         }
412         if (len <= 0) {
413                 printd("regio: zero len\n");
414                 return 0;
415         }
416         switch (r->spc) {
417         case Rsysmem:
418                 if (r->p == NULL)
419                         r->p = KADDR_NOCHECK(r->base);
420                 if (r->p == NULL)
421                         error(EFAIL, "regio: vmap/KADDR failed");
422                 rp = (uintptr_t)r->p + off;
423                 rio = memio;
424                 break;
425         case Rsysio:
426                 rp = r->base + off;
427                 rio = ioio;
428                 break;
429         case Rpcicfg:
430                 rp = r->base + off;
431                 rio = cfgio;
432                 rio.arg = r;
433                 break;
434         case Rpcibar:
435         case Rembed:
436         case Rsmbus:
437         case Rcmos:
438         case Ripmi:
439         case Rfixedhw:
440                 printd("regio: reg %s not supported\n", acpiregstr(r->spc));
441                 error(EFAIL, "region not supported");
442         }
443         if (iswr)
444                 regcpy(&rio, rp, &memio, (uintptr_t)p, len, r->accsz);
445         else
446                 regcpy(&memio, (uintptr_t)p, &rio, rp, len, r->accsz);
447         return len;
448 }
449
450 /*
451  * Compute and return SDT checksum: '0' is a correct sum.
452  */
453 static uint8_t sdtchecksum(void *addr, int len)
454 {
455         uint8_t *p, sum;
456
457         sum = 0;
458         for (p = addr; len-- > 0; p++)
459                 sum += *p;
460
461         return sum;
462 }
463
464 static void *sdtmap(uintptr_t pa, size_t *n, int cksum)
465 {
466         struct Sdthdr *sdt;
467         struct Acpilist *p;
468
469         if (!pa) {
470                 printk("sdtmap: NULL pa\n");
471                 return NULL;
472         }
473         sdt = KADDR_NOCHECK(pa);
474         if (sdt == NULL) {
475                 printk("acpi: vmap: NULL\n");
476                 return NULL;
477         }
478         *n = l32get(sdt->length);
479         if (!*n) {
480                 printk("sdt has zero length: pa = %p, sig = %.4s\n", pa,
481                        sdt->sig);
482                 return NULL;
483         }
484         if (cksum != 0 && sdtchecksum(sdt, *n) != 0) {
485                 printk("acpi: SDT: bad checksum. pa = %p, len = %lu\n", pa, *n);
486                 return NULL;
487         }
488         p = kzmalloc(sizeof(struct Acpilist) + *n, MEM_WAIT);
489         if (p == NULL)
490                 panic("sdtmap: memory allocation failed for %lu bytes", *n);
491         memmove(p->raw, (void *)sdt, *n);
492         p->size = *n;
493         p->next = acpilists;
494         acpilists = p;
495
496         return p->raw;
497 }
498
499 static int loadfacs(uintptr_t pa)
500 {
501         size_t n;
502
503         facs = sdtmap(pa, &n, 0);
504         if (facs == NULL)
505                 return -1;
506         if (memcmp(facs->sig, "FACS", 4) != 0) {
507                 facs = NULL;
508                 return -1;
509         }
510
511         /* no unmap */
512         printd("acpi: facs: hwsig: %#p\n", facs->hwsig);
513         printd("acpi: facs: wakingv: %#p\n", facs->wakingv);
514         printd("acpi: facs: flags: %#p\n", facs->flags);
515         printd("acpi: facs: glock: %#p\n", facs->glock);
516         printd("acpi: facs: xwakingv: %#p\n", facs->xwakingv);
517         printd("acpi: facs: vers: %#p\n", facs->vers);
518         printd("acpi: facs: ospmflags: %#p\n", facs->ospmflags);
519
520         return 0;
521 }
522
523 static void loaddsdt(uintptr_t pa)
524 {
525         size_t n;
526         uint8_t *dsdtp;
527
528         dsdtp = sdtmap(pa, &n, 1);
529         if (dsdtp == NULL) {
530                 printk("acpi: Failed to map dsdtp.\n");
531                 return;
532         }
533 }
534
535 static void gasget(struct Gas *gas, uint8_t *p)
536 {
537         gas->spc = p[0];
538         gas->len = p[1];
539         gas->off = p[2];
540         gas->accsz = p[3];
541         gas->addr = l64get(p + 4);
542 }
543
544 static char *dumpfadt(char *start, char *end, struct Fadt *fp)
545 {
546         if (fp == NULL)
547                 return start;
548
549         start = seprintf(start, end, "acpi: FADT@%p\n", fp);
550         start = seprintf(start, end, "acpi: fadt: facs: $%p\n", fp->facs);
551         start = seprintf(start, end, "acpi: fadt: dsdt: $%p\n", fp->dsdt);
552         start =
553             seprintf(start, end, "acpi: fadt: pmprofile: $%p\n", fp->pmprofile);
554         start = seprintf(start, end, "acpi: fadt: sciint: $%p\n", fp->sciint);
555         start = seprintf(start, end, "acpi: fadt: smicmd: $%p\n", fp->smicmd);
556         start = seprintf(start, end, "acpi: fadt: acpienable: $%p\n",
557                          fp->acpienable);
558         start = seprintf(start, end, "acpi: fadt: acpidisable: $%p\n",
559                          fp->acpidisable);
560         start =
561             seprintf(start, end, "acpi: fadt: s4biosreq: $%p\n", fp->s4biosreq);
562         start =
563             seprintf(start, end, "acpi: fadt: pstatecnt: $%p\n", fp->pstatecnt);
564         start = seprintf(start, end, "acpi: fadt: pm1aevtblk: $%p\n",
565                          fp->pm1aevtblk);
566         start = seprintf(start, end, "acpi: fadt: pm1bevtblk: $%p\n",
567                          fp->pm1bevtblk);
568         start = seprintf(start, end, "acpi: fadt: pm1acntblk: $%p\n",
569                          fp->pm1acntblk);
570         start = seprintf(start, end, "acpi: fadt: pm1bcntblk: $%p\n",
571                          fp->pm1bcntblk);
572         start =
573             seprintf(start, end, "acpi: fadt: pm2cntblk: $%p\n", fp->pm2cntblk);
574         start =
575             seprintf(start, end, "acpi: fadt: pmtmrblk: $%p\n", fp->pmtmrblk);
576         start = seprintf(start, end, "acpi: fadt: gpe0blk: $%p\n", fp->gpe0blk);
577         start = seprintf(start, end, "acpi: fadt: gpe1blk: $%p\n", fp->gpe1blk);
578         start =
579             seprintf(start, end, "acpi: fadt: pm1evtlen: $%p\n", fp->pm1evtlen);
580         start =
581             seprintf(start, end, "acpi: fadt: pm1cntlen: $%p\n", fp->pm1cntlen);
582         start =
583             seprintf(start, end, "acpi: fadt: pm2cntlen: $%p\n", fp->pm2cntlen);
584         start =
585             seprintf(start, end, "acpi: fadt: pmtmrlen: $%p\n", fp->pmtmrlen);
586         start = seprintf(start, end, "acpi: fadt: gpe0blklen: $%p\n",
587                          fp->gpe0blklen);
588         start = seprintf(start, end, "acpi: fadt: gpe1blklen: $%p\n",
589                          fp->gpe1blklen);
590         start = seprintf(start, end, "acpi: fadt: gp1base: $%p\n", fp->gp1base);
591         start = seprintf(start, end, "acpi: fadt: cstcnt: $%p\n", fp->cstcnt);
592         start =
593             seprintf(start, end, "acpi: fadt: plvl2lat: $%p\n", fp->plvl2lat);
594         start =
595             seprintf(start, end, "acpi: fadt: plvl3lat: $%p\n", fp->plvl3lat);
596         start = seprintf(start, end, "acpi: fadt: flushsz: $%p\n", fp->flushsz);
597         start = seprintf(start, end, "acpi: fadt: flushstride: $%p\n",
598                          fp->flushstride);
599         start = seprintf(start, end, "acpi: fadt: dutyoff: $%p\n", fp->dutyoff);
600         start =
601             seprintf(start, end, "acpi: fadt: dutywidth: $%p\n", fp->dutywidth);
602         start = seprintf(start, end, "acpi: fadt: dayalrm: $%p\n", fp->dayalrm);
603         start = seprintf(start, end, "acpi: fadt: monalrm: $%p\n", fp->monalrm);
604         start = seprintf(start, end, "acpi: fadt: century: $%p\n", fp->century);
605         start = seprintf(start, end, "acpi: fadt: iapcbootarch: $%p\n",
606                          fp->iapcbootarch);
607         start = seprintf(start, end, "acpi: fadt: flags: $%p\n", fp->flags);
608         start = dumpGas(start, end, "acpi: fadt: resetreg: ", &fp->resetreg);
609         start =
610             seprintf(start, end, "acpi: fadt: resetval: $%p\n", fp->resetval);
611         start = seprintf(start, end, "acpi: fadt: xfacs: %p\n", fp->xfacs);
612         start = seprintf(start, end, "acpi: fadt: xdsdt: %p\n", fp->xdsdt);
613         start =
614             dumpGas(start, end, "acpi: fadt: xpm1aevtblk:", &fp->xpm1aevtblk);
615         start =
616             dumpGas(start, end, "acpi: fadt: xpm1bevtblk:", &fp->xpm1bevtblk);
617         start =
618             dumpGas(start, end, "acpi: fadt: xpm1acntblk:", &fp->xpm1acntblk);
619         start =
620             dumpGas(start, end, "acpi: fadt: xpm1bcntblk:", &fp->xpm1bcntblk);
621         start = dumpGas(start, end, "acpi: fadt: xpm2cntblk:", &fp->xpm2cntblk);
622         start = dumpGas(start, end, "acpi: fadt: xpmtmrblk:", &fp->xpmtmrblk);
623         start = dumpGas(start, end, "acpi: fadt: xgpe0blk:", &fp->xgpe0blk);
624         start = dumpGas(start, end, "acpi: fadt: xgpe1blk:", &fp->xgpe1blk);
625         return start;
626 }
627
628 static struct Atable *parsefadt(struct Atable *parent, char *name, uint8_t *p,
629                                 size_t rawsize)
630 {
631         struct Atable *t;
632         struct Fadt *fp;
633
634         t = mkatable(parent, FADT, name, p, rawsize, sizeof(struct Fadt));
635
636         if (rawsize < 116) {
637                 printk("ACPI: unusually short FADT, aborting!\n");
638                 return t;
639         }
640         /* for now, keep the globals. We'll get rid of them later. */
641         fp = t->tbl;
642         fadt = fp;
643         fp->facs = l32get(p + 36);
644         fp->dsdt = l32get(p + 40);
645         fp->pmprofile = p[45];
646         fp->sciint = l16get(p + 46);
647         fp->smicmd = l32get(p + 48);
648         fp->acpienable = p[52];
649         fp->acpidisable = p[53];
650         fp->s4biosreq = p[54];
651         fp->pstatecnt = p[55];
652         fp->pm1aevtblk = l32get(p + 56);
653         fp->pm1bevtblk = l32get(p + 60);
654         fp->pm1acntblk = l32get(p + 64);
655         fp->pm1bcntblk = l32get(p + 68);
656         fp->pm2cntblk = l32get(p + 72);
657         fp->pmtmrblk = l32get(p + 76);
658         fp->gpe0blk = l32get(p + 80);
659         fp->gpe1blk = l32get(p + 84);
660         fp->pm1evtlen = p[88];
661         fp->pm1cntlen = p[89];
662         fp->pm2cntlen = p[90];
663         fp->pmtmrlen = p[91];
664         fp->gpe0blklen = p[92];
665         fp->gpe1blklen = p[93];
666         fp->gp1base = p[94];
667         fp->cstcnt = p[95];
668         fp->plvl2lat = l16get(p + 96);
669         fp->plvl3lat = l16get(p + 98);
670         fp->flushsz = l16get(p + 100);
671         fp->flushstride = l16get(p + 102);
672         fp->dutyoff = p[104];
673         fp->dutywidth = p[105];
674         fp->dayalrm = p[106];
675         fp->monalrm = p[107];
676         fp->century = p[108];
677         fp->iapcbootarch = l16get(p + 109);
678         fp->flags = l32get(p + 112);
679
680         /*
681          * qemu gives us a 116 byte fadt, though i haven't seen any HW do that.
682          * The right way to do this is to realloc the table and fake it out.
683          */
684         if (rawsize < 244)
685                 return finatable_nochildren(t);
686
687         gasget(&fp->resetreg, p + 116);
688         fp->resetval = p[128];
689         fp->xfacs = l64get(p + 132);
690         fp->xdsdt = l64get(p + 140);
691         gasget(&fp->xpm1aevtblk, p + 148);
692         gasget(&fp->xpm1bevtblk, p + 160);
693         gasget(&fp->xpm1acntblk, p + 172);
694         gasget(&fp->xpm1bcntblk, p + 184);
695         gasget(&fp->xpm2cntblk, p + 196);
696         gasget(&fp->xpmtmrblk, p + 208);
697         gasget(&fp->xgpe0blk, p + 220);
698         gasget(&fp->xgpe1blk, p + 232);
699
700         if (fp->xfacs != 0)
701                 loadfacs(fp->xfacs);
702         else
703                 loadfacs(fp->facs);
704
705         if (fp->xdsdt == (uint64_t)fp->dsdt) /* acpica */
706                 loaddsdt(fp->xdsdt);
707         else
708                 loaddsdt(fp->dsdt);
709
710         return finatable_nochildren(t);
711 }
712
713 static char *dumpmsct(char *start, char *end, struct Atable *table)
714 {
715         struct Msct *msct;
716
717         if (!table)
718                 return start;
719
720         msct = table->tbl;
721         if (!msct)
722                 return start;
723
724         start =
725             seprintf(start, end, "acpi: msct: %d doms %d clkdoms %#p maxpa\n",
726                      msct->ndoms, msct->nclkdoms, msct->maxpa);
727         for (int i = 0; i < table->nchildren; i++) {
728                 struct Atable *domtbl = table->children[i]->tbl;
729                 struct Mdom *st = domtbl->tbl;
730
731                 start =
732                     seprintf(start, end, "\t[%d:%d] %d maxproc %#p maxmmem\n",
733                              st->start, st->end, st->maxproc, st->maxmem);
734         }
735         start = seprintf(start, end, "\n");
736
737         return start;
738 }
739
740 /*
741  * XXX: should perhaps update our idea of available memory.
742  * Else we should remove this code.
743  */
744 static struct Atable *parsemsct(struct Atable *parent, char *name, uint8_t *raw,
745                                 size_t rawsize)
746 {
747         struct Atable *t;
748         uint8_t *r, *re;
749         struct Msct *msct;
750         struct Mdom **stl, *st;
751         size_t off, nmdom;
752         int i;
753
754         re = raw + rawsize;
755         off = l32get(raw + 36);
756         nmdom = 0;
757         for (r = raw + off, re = raw + rawsize; r < re; r += 22)
758                 nmdom++;
759         t = mkatable(parent, MSCT, name, raw, rawsize,
760                      sizeof(struct Msct) + nmdom * sizeof(struct Mdom));
761         msct = t->tbl;
762         msct->ndoms = l32get(raw + 40) + 1;
763         msct->nclkdoms = l32get(raw + 44) + 1;
764         msct->maxpa = l64get(raw + 48);
765         msct->nmdom = nmdom;
766         msct->dom = NULL;
767         if (nmdom != 0)
768                 msct->dom = (void *)msct + sizeof(struct Msct);
769         for (i = 0, r = raw; i < nmdom; i++, r += 22) {
770                 msct->dom[i].start = l32get(r + 2);
771                 msct->dom[i].end = l32get(r + 6);
772                 msct->dom[i].maxproc = l32get(r + 10);
773                 msct->dom[i].maxmem = l64get(r + 14);
774         }
775         mscttbl = finatable_nochildren(t);
776
777         return mscttbl;
778 }
779
780 /* TODO(rminnich): only handles on IOMMU for now. */
781 static char *dumpdmar(char *start, char *end, struct Atable *dmar)
782 {
783         struct Dmar *dt;
784
785         if (dmar == NULL)
786                 return start;
787
788         dt = dmar->tbl;
789         start = seprintf(start, end, "acpi: DMAR addr %p:\n", dt);
790         start = seprintf(start, end, "\tdmar: intr_remap %d haw %d\n",
791                          dt->intr_remap, dt->haw);
792         for (int i = 0; i < dmar->nchildren; i++) {
793                 struct Atable *at = dmar->children[i];
794                 struct Drhd *drhd = at->tbl;
795
796                 start = seprintf(start, end, "\tDRHD: ");
797                 start = seprintf(start, end, "%s 0x%02x 0x%016x\n",
798                                  drhd->all & 1 ? "INCLUDE_PCI_ALL" : "Scoped",
799                                  drhd->segment, drhd->rba);
800         }
801
802         return start;
803 }
804
805 static char *dumpsrat(char *start, char *end, struct Atable *table)
806 {
807         if (table == NULL)
808                 return seprintf(start, end, "NO SRAT\n");
809         start = seprintf(start, end, "acpi: SRAT@%p:\n", table->tbl);
810         for (; table != NULL; table = table->next) {
811                 struct Srat *st = table->tbl;
812
813                 if (st == NULL)
814                         continue;
815                 switch (st->type) {
816                 case SRlapic:
817                         start = seprintf(
818                             start, end,
819                             "\tlapic: dom %d apic %d sapic %d clk %d\n",
820                             st->lapic.dom, st->lapic.apic, st->lapic.sapic,
821                             st->lapic.clkdom);
822                         break;
823                 case SRmem:
824                         start =
825                             seprintf(start, end, "\tmem: dom %d %#p %#p %c%c\n",
826                                      st->mem.dom, st->mem.addr, st->mem.len,
827                                      st->mem.hplug ? 'h' : '-',
828                                      st->mem.nvram ? 'n' : '-');
829                         break;
830                 case SRlx2apic:
831                         start = seprintf(start, end,
832                                          "\tlx2apic: dom %d apic %d clk %d\n",
833                                          st->lx2apic.dom, st->lx2apic.apic,
834                                          st->lx2apic.clkdom);
835                         break;
836                 default:
837                         start =
838                             seprintf(start, end, "\t<unknown srat entry>\n");
839                 }
840         }
841         start = seprintf(start, end, "\n");
842         return start;
843 }
844
845 static struct Atable *parsesrat(struct Atable *parent, char *name, uint8_t *p,
846                                 size_t rawsize)
847 {
848
849         struct Atable *t, *tt, *tail;
850         uint8_t *pe;
851         int stlen, flags;
852         struct slice slice;
853         char buf[16];
854         int i;
855         struct Srat *st;
856
857         /* TODO: Parse the second SRAT */
858         if (srat != NULL) {
859                 warn("Multiple SRATs detected and ignored!");
860                 return NULL;
861         }
862
863         t = mkatable(parent, SRAT, name, p, rawsize, 0);
864         slice_init(&slice);
865         pe = p + rawsize;
866         for (p += 48, i = 0; p < pe; p += stlen, i++) {
867                 snprintf(buf, sizeof(buf), "%d", i);
868                 stlen = p[1];
869                 tt = mkatable(t, SRAT, buf, p, stlen, sizeof(struct Srat));
870                 st = tt->tbl;
871                 st->type = p[0];
872                 switch (st->type) {
873                 case SRlapic:
874                         st->lapic.dom =
875                             p[2] | p[9] << 24 | p[10] << 16 | p[11] << 8;
876                         st->lapic.apic = p[3];
877                         st->lapic.sapic = p[8];
878                         st->lapic.clkdom = l32get(p + 12);
879                         if (l32get(p + 4) == 0) {
880                                 kfree(tt);
881                                 tt = NULL;
882                         }
883                         break;
884                 case SRmem:
885                         st->mem.dom = l32get(p + 2);
886                         st->mem.addr = l64get(p + 8);
887                         st->mem.len = l64get(p + 16);
888                         flags = l32get(p + 28);
889                         if ((flags & 1) == 0) { /* not enabled */
890                                 kfree(tt);
891                                 tt = NULL;
892                         } else {
893                                 st->mem.hplug = flags & 2;
894                                 st->mem.nvram = flags & 4;
895                         }
896                         break;
897                 case SRlx2apic:
898                         st->lx2apic.dom = l32get(p + 4);
899                         st->lx2apic.apic = l32get(p + 8);
900                         st->lx2apic.clkdom = l32get(p + 16);
901                         if (l32get(p + 12) == 0) {
902                                 kfree(tt);
903                                 tt = NULL;
904                         }
905                         break;
906                 default:
907                         printd("unknown SRAT structure\n");
908                         kfree(tt);
909                         tt = NULL;
910                         break;
911                 }
912                 if (tt != NULL) {
913                         finatable_nochildren(tt);
914                         slice_append(&slice, tt);
915                 }
916         }
917         srat = finatable(t, &slice);
918
919         return srat;
920 }
921
922 static char *dumpslit(char *start, char *end, struct Slit *sl)
923 {
924         int i;
925
926         if (sl == NULL)
927                 return start;
928         start = seprintf(start, end, "acpi slit:\n");
929         for (i = 0; i < sl->rowlen * sl->rowlen; i++) {
930                 start = seprintf(start, end, "slit: %ux\n",
931                                  sl->e[i / sl->rowlen][i % sl->rowlen].dist);
932         }
933         start = seprintf(start, end, "\n");
934         return start;
935 }
936
937 static int cmpslitent(void *v1, void *v2)
938 {
939         struct SlEntry *se1, *se2;
940
941         se1 = v1;
942         se2 = v2;
943         return se1->dist - se2->dist;
944 }
945
946 static struct Atable *parseslit(struct Atable *parent, char *name, uint8_t *raw,
947                                 size_t rawsize)
948 {
949         struct Atable *t;
950         uint8_t *r, *re;
951         int i, j, k;
952         struct SlEntry *se;
953         size_t addsize, rowlen;
954         void *p;
955
956         addsize = sizeof(*slit);
957         rowlen = l64get(raw + 36);
958         addsize += rowlen * sizeof(struct SlEntry *);
959         addsize += sizeof(struct SlEntry) * rowlen * rowlen;
960
961         t = mkatable(parent, SLIT, name, raw, rawsize, addsize);
962         slit = t->tbl;
963         slit->rowlen = rowlen;
964         p = (void *)slit + sizeof(*slit);
965         slit->e = p;
966         p += rowlen * sizeof(struct SlEntry *);
967         for (i = 0; i < rowlen; i++) {
968                 slit->e[i] = p;
969                 p += sizeof(struct SlEntry) * rowlen;
970         }
971         for (i = 0, r = raw + 44, re = raw + rawsize; r < re; r++, i++) {
972                 int j = i / rowlen;
973                 int k = i % rowlen;
974
975                 se = &slit->e[j][k];
976                 se->dom = k;
977                 se->dist = *r;
978         }
979
980 #if 0
981         /* TODO: might need to sort this shit */
982         for (i = 0; i < slit->rowlen; i++)
983                 qsort(slit->e[i], slit->rowlen, sizeof(slit->e[0][0]), cmpslitent);
984 #endif
985
986         return finatable_nochildren(t);
987 }
988
989 int pickcore(int mycolor, int index)
990 {
991         int color;
992         int ncorepercol;
993
994         if (slit == NULL)
995                 return 0;
996         ncorepercol = num_cores / slit->rowlen;
997         color = slit->e[mycolor][index / ncorepercol].dom;
998         return color * ncorepercol + index % ncorepercol;
999 }
1000
1001 static char *polarity[4] = {"polarity/trigger like in ISA", "active high",
1002                             "BOGUS POLARITY", "active low"};
1003
1004 static char *trigger[] = {"BOGUS TRIGGER", "edge", "BOGUS TRIGGER", "level"};
1005
1006 static char *printiflags(char *start, char *end, int flags)
1007 {
1008
1009         return seprintf(start, end, "[%s,%s]", polarity[flags & AFpmask],
1010                         trigger[(flags & AFtmask) >> 2]);
1011 }
1012
1013 static char *dumpmadt(char *start, char *end, struct Atable *apics)
1014 {
1015         struct Madt *mt;
1016
1017         if (apics == NULL)
1018                 return start;
1019
1020         mt = apics->tbl;
1021         if (mt == NULL)
1022                 return seprintf(start, end, "acpi: no MADT");
1023         start = seprintf(start, end, "acpi: MADT@%p: lapic paddr %p pcat %d:\n",
1024                          mt, mt->lapicpa, mt->pcat);
1025         for (int i = 0; i < apics->nchildren; i++) {
1026                 struct Atable *apic = apics->children[i];
1027                 struct Apicst *st = apic->tbl;
1028
1029                 switch (st->type) {
1030                 case ASlapic:
1031                         start = seprintf(start, end, "\tlapic pid %d id %d\n",
1032                                          st->lapic.pid, st->lapic.id);
1033                         break;
1034                 case ASioapic:
1035                 case ASiosapic:
1036                         start = seprintf(
1037                             start, end, "\tioapic id %d addr %p ibase %d\n",
1038                             st->ioapic.id, st->ioapic.addr, st->ioapic.ibase);
1039                         break;
1040                 case ASintovr:
1041                         start = seprintf(
1042                             start, end, "\tintovr irq %d intr %d flags $%p",
1043                             st->intovr.irq, st->intovr.intr, st->intovr.flags);
1044                         start = printiflags(start, end, st->intovr.flags);
1045                         start = seprintf(start, end, "\n");
1046                         break;
1047                 case ASnmi:
1048                         start =
1049                             seprintf(start, end, "\tnmi intr %d flags $%p\n",
1050                                      st->nmi.intr, st->nmi.flags);
1051                         break;
1052                 case ASlnmi:
1053                         start = seprintf(
1054                             start, end, "\tlnmi pid %d lint %d flags $%p\n",
1055                             st->lnmi.pid, st->lnmi.lint, st->lnmi.flags);
1056                         break;
1057                 case ASlsapic:
1058                         start = seprintf(
1059                             start, end,
1060                             "\tlsapic pid %d id %d eid %d puid %d puids %s\n",
1061                             st->lsapic.pid, st->lsapic.id, st->lsapic.eid,
1062                             st->lsapic.puid, st->lsapic.puids);
1063                         break;
1064                 case ASintsrc:
1065                         start = seprintf(start, end,
1066                                          "\tintr type %d pid %d peid %d iosv "
1067                                          "%d intr %d %#x\n",
1068                                          st->type, st->intsrc.pid,
1069                                          st->intsrc.peid, st->intsrc.iosv,
1070                                          st->intsrc.intr, st->intsrc.flags);
1071                         start = printiflags(start, end, st->intsrc.flags);
1072                         start = seprintf(start, end, "\n");
1073                         break;
1074                 case ASlx2apic:
1075                         start =
1076                             seprintf(start, end, "\tlx2apic puid %d id %d\n",
1077                                      st->lx2apic.puid, st->lx2apic.id);
1078                         break;
1079                 case ASlx2nmi:
1080                         start = seprintf(
1081                             start, end, "\tlx2nmi puid %d intr %d flags $%p\n",
1082                             st->lx2nmi.puid, st->lx2nmi.intr, st->lx2nmi.flags);
1083                         break;
1084                 default:
1085                         start =
1086                             seprintf(start, end, "\t<unknown madt entry>\n");
1087                 }
1088         }
1089         start = seprintf(start, end, "\n");
1090         return start;
1091 }
1092
1093 static struct Atable *parsemadt(struct Atable *parent, char *name, uint8_t *p,
1094                                 size_t size)
1095 {
1096         struct Atable *t, *tt, *tail;
1097         uint8_t *pe;
1098         struct Madt *mt;
1099         struct Apicst *st, *l;
1100         int id;
1101         size_t stlen;
1102         char buf[16];
1103         int i;
1104         struct slice slice;
1105
1106         slice_init(&slice);
1107         t = mkatable(parent, MADT, name, p, size, sizeof(struct Madt));
1108         mt = t->tbl;
1109         mt->lapicpa = l32get(p + 36);
1110         mt->pcat = l32get(p + 40);
1111         pe = p + size;
1112         for (p += 44, i = 0; p < pe; p += stlen, i++) {
1113                 snprintf(buf, sizeof(buf), "%d", i);
1114                 stlen = p[1];
1115                 tt = mkatable(t, APIC, buf, p, stlen, sizeof(struct Apicst));
1116                 st = tt->tbl;
1117                 st->type = p[0];
1118                 switch (st->type) {
1119                 case ASlapic:
1120                         st->lapic.pid = p[2];
1121                         st->lapic.id = p[3];
1122                         if (l32get(p + 4) == 0) {
1123                                 kfree(tt);
1124                                 tt = NULL;
1125                         }
1126                         break;
1127                 case ASioapic:
1128                         st->ioapic.id = id = p[2];
1129                         st->ioapic.addr = l32get(p + 4);
1130                         st->ioapic.ibase = l32get(p + 8);
1131                         /* ioapic overrides any ioapic entry for the same id */
1132                         for (int i = 0; i < slice_len(&slice); i++) {
1133                                 l = ((struct Atable *)slice_get(&slice, i))
1134                                         ->tbl;
1135                                 if (l->type == ASiosapic &&
1136                                     l->iosapic.id == id) {
1137                                         st->ioapic = l->iosapic;
1138                                         /* we leave it linked; could be removed
1139                                          */
1140                                         break;
1141                                 }
1142                         }
1143                         break;
1144                 case ASintovr:
1145                         st->intovr.irq = p[3];
1146                         st->intovr.intr = l32get(p + 4);
1147                         st->intovr.flags = l16get(p + 8);
1148                         break;
1149                 case ASnmi:
1150                         st->nmi.flags = l16get(p + 2);
1151                         st->nmi.intr = l32get(p + 4);
1152                         break;
1153                 case ASlnmi:
1154                         st->lnmi.pid = p[2];
1155                         st->lnmi.flags = l16get(p + 3);
1156                         st->lnmi.lint = p[5];
1157                         break;
1158                 case ASladdr:
1159                         /* This is for 64 bits, perhaps we should not
1160                          * honor it on 32 bits.
1161                          */
1162                         mt->lapicpa = l64get(p + 8);
1163                         break;
1164                 case ASiosapic:
1165                         id = st->iosapic.id = p[2];
1166                         st->iosapic.ibase = l32get(p + 4);
1167                         st->iosapic.addr = l64get(p + 8);
1168                         /* iosapic overrides any ioapic entry for the same id */
1169                         for (int i = 0; i < slice_len(&slice); i++) {
1170                                 l = ((struct Atable *)slice_get(&slice, i))
1171                                         ->tbl;
1172                                 if (l->type == ASioapic && l->ioapic.id == id) {
1173                                         l->ioapic = st->iosapic;
1174                                         kfree(tt);
1175                                         tt = NULL;
1176                                         break;
1177                                 }
1178                         }
1179                         break;
1180                 case ASlsapic:
1181                         st->lsapic.pid = p[2];
1182                         st->lsapic.id = p[3];
1183                         st->lsapic.eid = p[4];
1184                         st->lsapic.puid = l32get(p + 12);
1185                         if (l32get(p + 8) == 0) {
1186                                 kfree(tt);
1187                                 tt = NULL;
1188                         } else
1189                                 kstrdup(&st->lsapic.puids, (char *)p + 16);
1190                         break;
1191                 case ASintsrc:
1192                         st->intsrc.flags = l16get(p + 2);
1193                         st->type = p[4];
1194                         st->intsrc.pid = p[5];
1195                         st->intsrc.peid = p[6];
1196                         st->intsrc.iosv = p[7];
1197                         st->intsrc.intr = l32get(p + 8);
1198                         st->intsrc.any = l32get(p + 12);
1199                         break;
1200                 case ASlx2apic:
1201                         st->lx2apic.id = l32get(p + 4);
1202                         st->lx2apic.puid = l32get(p + 12);
1203                         if (l32get(p + 8) == 0) {
1204                                 kfree(tt);
1205                                 tt = NULL;
1206                         }
1207                         break;
1208                 case ASlx2nmi:
1209                         st->lx2nmi.flags = l16get(p + 2);
1210                         st->lx2nmi.puid = l32get(p + 4);
1211                         st->lx2nmi.intr = p[8];
1212                         break;
1213                 default:
1214                         printd("unknown APIC structure\n");
1215                         kfree(tt);
1216                         tt = NULL;
1217                 }
1218                 if (tt != NULL) {
1219                         finatable_nochildren(tt);
1220                         slice_append(&slice, tt);
1221                 }
1222         }
1223         apics = finatable(t, &slice);
1224
1225         return apics;
1226 }
1227
1228 static struct Atable *parsedmar(struct Atable *parent, char *name, uint8_t *raw,
1229                                 size_t rawsize)
1230 {
1231         struct Atable *t, *tt;
1232         int i;
1233         int baselen = MIN(rawsize, 38);
1234         int nentry, nscope, npath, off, dslen, dhlen, len, type, flags;
1235         void *pathp;
1236         char buf[16];
1237         struct slice drhds;
1238         struct Drhd *drhd;
1239         struct Dmar *dt;
1240
1241         /* count the entries */
1242         for (nentry = 0, off = 48; off < rawsize; nentry++) {
1243                 dslen = l16get(raw + off + 2);
1244                 printk("acpi DMAR: entry %d is addr %p (0x%x/0x%x)\n", nentry,
1245                        raw + off, l16get(raw + off), dslen);
1246                 off = off + dslen;
1247         }
1248         printk("DMAR: %d entries\n", nentry);
1249
1250         t = mkatable(parent, DMAR, name, raw, rawsize, sizeof(*dmar));
1251         dt = t->tbl;
1252         /* The table can be only partly filled. */
1253         if (baselen >= 38 && raw[37] & 1)
1254                 dt->intr_remap = 1;
1255         if (baselen >= 37)
1256                 dt->haw = raw[36] + 1;
1257
1258         /* Now we walk all the DMAR entries. */
1259         slice_init(&drhds);
1260         for (off = 48, i = 0; i < nentry; i++, off += dslen) {
1261                 snprintf(buf, sizeof(buf), "%d", i);
1262                 dslen = l16get(raw + off + 2);
1263                 type = l16get(raw + off);
1264                 // TODO(dcross): Introduce sensible symbolic constants
1265                 // for DMAR entry types. For right now, type 0 => DRHD.
1266                 // We skip everything else.
1267                 if (type != 0)
1268                         continue;
1269                 npath = 0;
1270                 nscope = 0;
1271                 for (int o = off + 16; o < (off + dslen); o += dhlen) {
1272                         nscope++;
1273                         dhlen = *(raw + o + 1); // Single byte length.
1274                         npath += ((dhlen - 6) / 2);
1275                 }
1276                 tt = mkatable(t, DRHD, buf, raw + off, dslen,
1277                               sizeof(struct Drhd) + 2 * npath +
1278                                   nscope * sizeof(struct DevScope));
1279                 flags = *(raw + off + 4);
1280                 drhd = tt->tbl;
1281                 drhd->all = flags & 1;
1282                 drhd->segment = l16get(raw + off + 6);
1283                 drhd->rba = l64get(raw + off + 8);
1284                 drhd->nscope = nscope;
1285                 drhd->scopes = (void *)drhd + sizeof(struct Drhd);
1286                 pathp = (void *)drhd + sizeof(struct Drhd) +
1287                         nscope * sizeof(struct DevScope);
1288                 for (int i = 0, o = off + 16; i < nscope; i++) {
1289                         struct DevScope *ds = &drhd->scopes[i];
1290
1291                         dhlen = *(raw + o + 1);
1292                         ds->enumeration_id = *(raw + o + 4);
1293                         ds->start_bus_number = *(raw + o + 5);
1294                         ds->npath = (dhlen - 6) / 2;
1295                         ds->paths = pathp;
1296                         for (int j = 0; j < ds->npath; j++)
1297                                 ds->paths[j] = l16get(raw + o + 6 + 2 * j);
1298                         pathp += 2 * ds->npath;
1299                         o += dhlen;
1300                 }
1301                 /*
1302                  * NOTE: if all is set, there should be no scopes of type
1303                  * This being ACPI, where vendors randomly copy tables
1304                  * from one system to another, and creating breakage,
1305                  * anything is possible. But we'll warn them.
1306                  */
1307                 finatable_nochildren(tt);
1308                 slice_append(&drhds, tt);
1309         }
1310         dmar = finatable(t, &drhds);
1311
1312         return dmar;
1313 }
1314
1315 /*
1316  * Map the table and keep it there.
1317  */
1318 static struct Atable *parsessdt(struct Atable *parent, char *name, uint8_t *raw,
1319                                 size_t size)
1320 {
1321         struct Atable *t;
1322         struct Sdthdr *h;
1323
1324         /*
1325          * We found it and it is too small.
1326          * Simply return with no side effect.
1327          */
1328         if (size < Sdthdrsz)
1329                 return NULL;
1330         t = mkatable(parent, SSDT, name, raw, size, 0);
1331         h = (struct Sdthdr *)raw;
1332         memmove(t->name, h->sig, sizeof(h->sig));
1333         t->name[sizeof(h->sig)] = '\0';
1334
1335         return finatable_nochildren(t);
1336 }
1337
1338 static struct Atable *parsemcfg(struct Atable *parent, char *name, uint8_t *raw,
1339                                 size_t rawsize)
1340 {
1341         struct Atable *t;
1342         struct acpi_mcfg *mcfg = (struct acpi_mcfg *)raw;
1343         struct acpi_mcfg_data *tbl;
1344         size_t nr_mcfg_entries;
1345         uint8_t *p;
1346
1347         if (rawsize < 36)
1348                 return NULL;
1349         t = mkatable(parent, MCFG, name, raw, rawsize, 0);
1350
1351         nr_mcfg_entries = (l32get(mcfg->length) - 36) / 16;
1352         tbl = kmalloc(sizeof(struct acpi_mcfg_data)
1353                       + sizeof(struct acpi_mcfg_entry) * nr_mcfg_entries,
1354                       MEM_WAIT);
1355         tbl->nr_entries = nr_mcfg_entries;
1356         p = mcfg->entries;
1357         for (int i = 0; i < tbl->nr_entries; i++) {
1358                 tbl->entries[i].addr = l64get(p + 0);
1359                 tbl->entries[i].segment = l16get(p + 8);
1360                 tbl->entries[i].start_bus = p[10];
1361                 tbl->entries[i].end_bus = p[11];
1362                 p += 16;
1363         }
1364         t->tbl = tbl;
1365
1366         mcfgtbl = finatable_nochildren(t);
1367
1368         return mcfgtbl;
1369 }
1370
1371 static char *dumpmcfg(char *start, char *end, struct Atable *table)
1372 {
1373         struct acpi_mcfg *mcfg;
1374         struct acpi_mcfg_data *tbl;
1375
1376         if (!table)
1377                 return start;
1378
1379         mcfg = (struct acpi_mcfg*)table->raw;
1380         tbl = table->tbl;
1381
1382         start = seprintf(start, end, "mcfg: oem id: %c%c%c%c%c%c\n",
1383                          mcfg->oemid[0], mcfg->oemid[1], mcfg->oemid[2],
1384                          mcfg->oemid[3], mcfg->oemid[4], mcfg->oemid[5]);
1385         start = seprintf(start, end, "mcfg: oem table id: %c%c%c%c%c%c%c%c\n",
1386                          mcfg->oemtblid[0], mcfg->oemtblid[1],
1387                          mcfg->oemtblid[2], mcfg->oemtblid[3],
1388                          mcfg->oemtblid[4], mcfg->oemtblid[5],
1389                          mcfg->oemtblid[6], mcfg->oemtblid[7]);
1390         start = seprintf(start, end, "mcfg: oem rev: 0x%x\n",
1391                          l32get(mcfg->oemrev));
1392         start = seprintf(start, end, "mcfg: creator id: %c%c%c%c\n",
1393                          mcfg->creatorid[0], mcfg->creatorid[1],
1394                          mcfg->creatorid[2], mcfg->creatorid[3]);
1395         start = seprintf(start, end, "mcfg: creator rev: 0x%x\n",
1396                          l32get(mcfg->creatorrev));
1397
1398         start = seprintf(start, end, "mcfg: nr_entries %d\n", tbl->nr_entries);
1399         for (int i = 0; i < tbl->nr_entries; i++) {
1400                 start = seprintf(start, end, "\tSeg: %d Bus: %d-%d Addr: %p\n",
1401                                  tbl->entries[i].segment,
1402                                  tbl->entries[i].start_bus,
1403                                  tbl->entries[i].end_bus,
1404                                  tbl->entries[i].addr);
1405         }
1406
1407         return start;
1408 }
1409
1410 physaddr_t acpi_pci_get_mmio_cfg_addr(int segment, int bus, int dev, int func)
1411 {
1412         struct acpi_mcfg_data *tbl = mcfgtbl->tbl;
1413
1414         for (int i = 0; i < tbl->nr_entries; i++) {
1415                 if (segment == tbl->entries[i].segment &&
1416                     tbl->entries[i].start_bus <= bus &&
1417                     bus <= tbl->entries[i].end_bus)
1418                         return tbl->entries[i].addr
1419                                 + (((bus - tbl->entries[i].start_bus) << 20)
1420                                    | (dev << 15)
1421                                    | (func << 12)
1422                                   );
1423         }
1424         return 0;
1425 }
1426
1427 static char *dumptable(char *start, char *end, char *sig, uint8_t *p, int l)
1428 {
1429         int n, i;
1430
1431         if (2 > 1) {
1432                 start = seprintf(start, end, "%s @ %#p\n", sig, p);
1433                 if (2 > 2)
1434                         n = l;
1435                 else
1436                         n = 256;
1437                 for (i = 0; i < n; i++) {
1438                         if ((i % 16) == 0)
1439                                 start = seprintf(start, end, "%x: ", i);
1440                         start = seprintf(start, end, " %2.2ux", p[i]);
1441                         if ((i % 16) == 15)
1442                                 start = seprintf(start, end, "\n");
1443                 }
1444                 start = seprintf(start, end, "\n");
1445                 start = seprintf(start, end, "\n");
1446         }
1447         return start;
1448 }
1449
1450 static char *seprinttable(char *s, char *e, struct Atable *t)
1451 {
1452         uint8_t *p;
1453         int i, n;
1454
1455         p = (uint8_t *)t->tbl; /* include header */
1456         n = t->rawsize;
1457         s = seprintf(s, e, "%s @ %#p\n", t->name, p);
1458         for (i = 0; i < n; i++) {
1459                 if ((i % 16) == 0)
1460                         s = seprintf(s, e, "%x: ", i);
1461                 s = seprintf(s, e, " %2.2ux", p[i]);
1462                 if ((i % 16) == 15)
1463                         s = seprintf(s, e, "\n");
1464         }
1465         return seprintf(s, e, "\n\n");
1466 }
1467
1468 static void *rsdsearch(char *signature)
1469 {
1470         uintptr_t p;
1471         uint8_t *bda;
1472         void *rsd;
1473
1474         /*
1475          * Search for the data structure signature:
1476          * 1) in the BIOS ROM between 0xE0000 and 0xFFFFF.
1477          */
1478         return sigscan(KADDR_NOCHECK(0xE0000), 0x20000, signature);
1479 }
1480
1481 /*
1482  * Note: some of this comment is from the unfinished user interpreter.
1483  *
1484  * The DSDT is always given to the user interpreter.
1485  * Tables listed here are also loaded from the XSDT:
1486  * MSCT, MADT, and FADT are processed by us, because they are
1487  * required to do early initialization before we have user processes.
1488  * Other tables are given to the user level interpreter for
1489  * execution.
1490  *
1491  * These historically returned a value to tell acpi whether or not it was okay
1492  * to unmap the table.  (return 0 means there was no table, meaning it was okay
1493  * to unmap).  We just use the kernbase mapping, so it's irrelevant.
1494  *
1495  * N.B. The intel source code defines the constants for ACPI in a
1496  * non-endian-independent manner. Rather than bring in the huge wad o' code
1497  * that represents, we just the names.
1498  */
1499 struct Parser {
1500         char *sig;
1501         struct Atable *(*parse)(struct Atable *parent, char *name, uint8_t *raw,
1502                                 size_t rawsize);
1503 };
1504
1505 static struct Parser ptable[] = {
1506     {"FACP", parsefadt}, {"APIC", parsemadt}, {"DMAR", parsedmar},
1507     {"SRAT", parsesrat}, {"SLIT", parseslit}, {"MSCT", parsemsct},
1508     {"SSDT", parsessdt}, {"HPET", parsehpet}, {"MCFG", parsemcfg},
1509 };
1510
1511 /*
1512  * process xsdt table and load tables with sig, or all if NULL.
1513  * (XXX: should be able to search for sig, oemid, oemtblid)
1514  */
1515 static void parsexsdt(struct Atable *root)
1516 {
1517         ERRSTACK(1);
1518         struct Sdthdr *sdt;
1519         struct Atable *table;
1520         struct slice slice;
1521         size_t l, end;
1522         uintptr_t dhpa;
1523         struct Atable *n;
1524         uint8_t *tbl;
1525
1526         slice_init(&slice);
1527         if (waserror()) {
1528                 slice_destroy(&slice);
1529                 return;
1530         }
1531
1532         tbl = xsdt->p + sizeof(struct Sdthdr);
1533         end = xsdt->len - sizeof(struct Sdthdr);
1534         for (int i = 0; i < end; i += xsdt->asize) {
1535                 dhpa = (xsdt->asize == 8) ? l64get(tbl + i) : l32get(tbl + i);
1536                 sdt = sdtmap(dhpa, &l, 1);
1537                 if (sdt == NULL)
1538                         continue;
1539                 printd("acpi: %s addr %#p\n", tsig, sdt);
1540                 for (int j = 0; j < ARRAY_SIZE(ptable); j++) {
1541                         if (memcmp(sdt->sig, ptable[j].sig, sizeof(sdt->sig)) ==
1542                             0) {
1543                                 table = ptable[j].parse(root, ptable[j].sig,
1544                                                         (void *)sdt, l);
1545                                 if (table != NULL)
1546                                         slice_append(&slice, table);
1547                                 break;
1548                         }
1549                 }
1550         }
1551         finatable(root, &slice);
1552 }
1553
1554 void makeindex(struct Atable *root)
1555 {
1556         uint64_t index;
1557
1558         if (root == NULL)
1559                 return;
1560         index = root->qid.path >> QIndexShift;
1561         atableindex[index] = root;
1562         for (int k = 0; k < root->nchildren; k++)
1563                 makeindex(root->children[k]);
1564 }
1565
1566 static void parsersdptr(void)
1567 {
1568         struct Rsdp *rsd;
1569         int asize, cksum;
1570         uintptr_t sdtpa;
1571
1572         static_assert(sizeof(struct Sdthdr) == 36);
1573
1574         /* Find the root pointer. */
1575         rsd = rsdsearch("RSD PTR ");
1576         if (rsd == NULL) {
1577                 printk("NO RSDP\n");
1578                 return;
1579         }
1580
1581         /*
1582          * Initialize the root of ACPI parse tree.
1583          */
1584         lastpath = Qroot;
1585         root = mkatable(NULL, XSDT, devname(), NULL, 0, sizeof(struct Xsdt));
1586         root->parent = root;
1587
1588         printd(
1589             "/* RSDP */ struct Rsdp = {%08c, %x, %06c, %x, %p, %d, %p, %x}\n",
1590             rsd->signature, rsd->rchecksum, rsd->oemid, rsd->revision,
1591             *(uint32_t *)rsd->raddr, *(uint32_t *)rsd->length,
1592             *(uint32_t *)rsd->xaddr, rsd->xchecksum);
1593
1594         printd("acpi: RSD PTR@ %#p, physaddr $%p length %ud %#llux rev %d\n",
1595                rsd, l32get(rsd->raddr), l32get(rsd->length), l64get(rsd->xaddr),
1596                rsd->revision);
1597
1598         if (rsd->revision >= 2) {
1599                 cksum = sdtchecksum(rsd, 36);
1600                 if (cksum != 0) {
1601                         printk("acpi: bad RSD checksum %d, 64 bit parser "
1602                                "aborted\n",
1603                                cksum);
1604                         return;
1605                 }
1606                 sdtpa = l64get(rsd->xaddr);
1607                 asize = 8;
1608         } else {
1609                 cksum = sdtchecksum(rsd, 20);
1610                 if (cksum != 0) {
1611                         printk("acpi: bad RSD checksum %d, 32 bit parser "
1612                                "aborted\n",
1613                                cksum);
1614                         return;
1615                 }
1616                 sdtpa = l32get(rsd->raddr);
1617                 asize = 4;
1618         }
1619
1620         /*
1621          * process the RSDT or XSDT table.
1622          */
1623         xsdt = root->tbl;
1624         xsdt->p = sdtmap(sdtpa, &xsdt->len, 1);
1625         if (xsdt->p == NULL) {
1626                 printk("acpi: sdtmap failed\n");
1627                 return;
1628         }
1629         if ((xsdt->p[0] != 'R' && xsdt->p[0] != 'X') ||
1630             memcmp(xsdt->p + 1, "SDT", 3) != 0) {
1631                 printd("acpi: xsdt sig: %c%c%c%c\n", xsdt->p[0], xsdt->p[1],
1632                        xsdt->p[2], xsdt->p[3]);
1633                 xsdt = NULL;
1634                 return;
1635         }
1636         xsdt->asize = asize;
1637         printd("acpi: XSDT %#p\n", xsdt);
1638         parsexsdt(root);
1639         atableindex =
1640             kreallocarray(NULL, lastpath, sizeof(struct Atable *), MEM_WAIT);
1641         assert(atableindex != NULL);
1642         makeindex(root);
1643 }
1644
1645 /* Given an xsdt, find the table matching 'sig', if any. */
1646 static struct Sdthdr *xsdt_find_tbl(struct Sdthdr *xsdt, const char *sig,
1647                                     int addr_size)
1648 {
1649         uint8_t *ptr_tbl;
1650         size_t ptr_tbl_len;
1651         physaddr_t sdt_pa;
1652         struct Sdthdr *sdt;
1653
1654         ptr_tbl = (uint8_t *)xsdt + sizeof(struct Sdthdr);
1655         ptr_tbl_len = l32get(xsdt->length) - sizeof(struct Sdthdr);
1656         for (int i = 0; i < ptr_tbl_len; i += addr_size) {
1657                 sdt_pa = (addr_size == 8) ? l64get(ptr_tbl + i)
1658                                           : l32get(ptr_tbl + i);
1659                 sdt = KADDR_NOCHECK(sdt_pa);
1660                 if (memcmp(sdt->sig, sig, sizeof(sdt->sig)) == 0)
1661                         return sdt;
1662         }
1663         return NULL;
1664 }
1665
1666 /* This may be an overestimate, if some LAPICS are present but disabled */
1667 static int madt_get_nr_cores(struct Sdthdr *madt)
1668 {
1669         uint8_t *p, *madt_end;
1670         size_t entry_len;
1671         int nr_cores = 0;
1672
1673         p = (uint8_t *)madt;
1674         madt_end = p + l32get(madt->length);
1675         for (p += 44; p < madt_end; p += entry_len) {
1676                 entry_len = p[1];
1677                 switch (p[0]) {
1678                 case ASlapic:
1679                         nr_cores++;
1680                         break;
1681                 default:
1682                         break;
1683                 }
1684         }
1685         return nr_cores;
1686 }
1687
1688 int get_early_num_cores(void)
1689 {
1690         struct Rsdp *rsd;
1691         int asize;
1692         physaddr_t sdtpa;
1693         struct Sdthdr *xsdt, *madt;
1694         uint8_t *xsdt_buf;
1695         int nr_cores;
1696
1697         rsd = rsdsearch("RSD PTR ");
1698         assert(rsd);
1699         if (rsd->revision >= 2) {
1700                 sdtpa = l64get(rsd->xaddr);
1701                 asize = 8;
1702         } else {
1703                 sdtpa = l32get(rsd->raddr);
1704                 asize = 4;
1705         }
1706
1707         xsdt = KADDR_NOCHECK(sdtpa);
1708         xsdt_buf = (uint8_t *)xsdt;
1709         if ((xsdt_buf[0] != 'R' && xsdt_buf[0] != 'X') ||
1710             memcmp(xsdt_buf + 1, "SDT", 3) != 0) {
1711                 panic("acpi: xsdt sig: %c%c%c%c\n", xsdt_buf[0], xsdt_buf[1],
1712                       xsdt_buf[2], xsdt_buf[3]);
1713         }
1714         madt = xsdt_find_tbl(xsdt, "APIC", asize);
1715         assert(madt);
1716         nr_cores = madt_get_nr_cores(madt);
1717         if (nr_cores == 0) {
1718                 warn("MADT parsing found 0 cores!");
1719                 nr_cores = 1;
1720         }
1721         return nr_cores;
1722 }
1723
1724 /*
1725  * The invariant that each level in the tree has an associated
1726  * Atable implies that each chan can be mapped to an Atable.
1727  * The assertions here enforce that invariant.
1728  */
1729 static struct Atable *genatable(struct chan *c)
1730 {
1731         struct Atable *a;
1732         uint64_t ai;
1733
1734         ai = c->qid.path >> QIndexShift;
1735         assert(ai < lastpath);
1736         a = atableindex[ai];
1737         assert(a != NULL);
1738
1739         return a;
1740 }
1741
1742 static int acpigen(struct chan *c, char *name, struct dirtab *tab, int ntab,
1743                    int i, struct dir *dp)
1744 {
1745         struct Atable *a = genatable(c);
1746
1747         if (i == DEVDOTDOT) {
1748                 assert((c->qid.path & QIndexMask) == Qdir);
1749                 devdir(c, a->parent->qid, a->parent->name, 0, eve.name,
1750                        DMDIR | 0555, dp);
1751                 return 1;
1752         }
1753         return devgen(c, name, a->cdirs, a->nchildren + NQtypes, i, dp);
1754 }
1755
1756 /*
1757  * Print the contents of the XSDT.
1758  */
1759 static void dumpxsdt(void)
1760 {
1761         printk("xsdt: len = %lu, asize = %lu, p = %p\n", xsdt->len, xsdt->asize,
1762                xsdt->p);
1763 }
1764
1765 static char *dumpGas(char *start, char *end, char *prefix, struct Gas *g)
1766 {
1767         start = seprintf(start, end, "%s", prefix);
1768
1769         switch (g->spc) {
1770         case Rsysmem:
1771         case Rsysio:
1772         case Rembed:
1773         case Rsmbus:
1774         case Rcmos:
1775         case Rpcibar:
1776         case Ripmi:
1777                 start = seprintf(start, end, "[%s ", regnames[g->spc]);
1778                 break;
1779         case Rpcicfg:
1780                 start = seprintf(start, end, "[pci ");
1781                 start = seprintf(start, end, "dev %#p ",
1782                                  (uint32_t)(g->addr >> 32) & 0xFFFF);
1783                 start = seprintf(start, end, "fn %#p ",
1784                                  (uint32_t)(g->addr & 0xFFFF0000) >> 16);
1785                 start = seprintf(start, end, "adr %#p ",
1786                                  (uint32_t)(g->addr & 0xFFFF));
1787                 break;
1788         case Rfixedhw:
1789                 start = seprintf(start, end, "[hw ");
1790                 break;
1791         default:
1792                 start = seprintf(start, end, "[spc=%#p ", g->spc);
1793         }
1794         start = seprintf(start, end, "off %d len %d addr %#p sz%d]", g->off,
1795                          g->len, g->addr, g->accsz);
1796         start = seprintf(start, end, "\n");
1797         return start;
1798 }
1799
1800 static unsigned int getbanked(uintptr_t ra, uintptr_t rb, int sz)
1801 {
1802         unsigned int r;
1803
1804         r = 0;
1805         switch (sz) {
1806         case 1:
1807                 if (ra != 0)
1808                         r |= inb(ra);
1809                 if (rb != 0)
1810                         r |= inb(rb);
1811                 break;
1812         case 2:
1813                 if (ra != 0)
1814                         r |= inw(ra);
1815                 if (rb != 0)
1816                         r |= inw(rb);
1817                 break;
1818         case 4:
1819                 if (ra != 0)
1820                         r |= inl(ra);
1821                 if (rb != 0)
1822                         r |= inl(rb);
1823                 break;
1824         default:
1825                 printd("getbanked: wrong size\n");
1826         }
1827         return r;
1828 }
1829
1830 static unsigned int setbanked(uintptr_t ra, uintptr_t rb, int sz, int v)
1831 {
1832         unsigned int r;
1833
1834         r = -1;
1835         switch (sz) {
1836         case 1:
1837                 if (ra != 0)
1838                         outb(ra, v);
1839                 if (rb != 0)
1840                         outb(rb, v);
1841                 break;
1842         case 2:
1843                 if (ra != 0)
1844                         outw(ra, v);
1845                 if (rb != 0)
1846                         outw(rb, v);
1847                 break;
1848         case 4:
1849                 if (ra != 0)
1850                         outl(ra, v);
1851                 if (rb != 0)
1852                         outl(rb, v);
1853                 break;
1854         default:
1855                 printd("setbanked: wrong size\n");
1856         }
1857         return r;
1858 }
1859
1860 static unsigned int getpm1ctl(void)
1861 {
1862         assert(fadt != NULL);
1863         return getbanked(fadt->pm1acntblk, fadt->pm1bcntblk, fadt->pm1cntlen);
1864 }
1865
1866 static void setpm1sts(unsigned int v)
1867 {
1868         assert(fadt != NULL);
1869         setbanked(fadt->pm1aevtblk, fadt->pm1bevtblk, fadt->pm1evtlen / 2, v);
1870 }
1871
1872 static unsigned int getpm1sts(void)
1873 {
1874         assert(fadt != NULL);
1875         return getbanked(fadt->pm1aevtblk, fadt->pm1bevtblk,
1876                          fadt->pm1evtlen / 2);
1877 }
1878
1879 static unsigned int getpm1en(void)
1880 {
1881         int sz;
1882
1883         assert(fadt != NULL);
1884         sz = fadt->pm1evtlen / 2;
1885         return getbanked(fadt->pm1aevtblk + sz, fadt->pm1bevtblk + sz, sz);
1886 }
1887
1888 static int getgpeen(int n)
1889 {
1890         return inb(gpes[n].enio) & 1 << gpes[n].enbit;
1891 }
1892
1893 static void setgpeen(int n, unsigned int v)
1894 {
1895         int old;
1896
1897         old = inb(gpes[n].enio);
1898         if (v)
1899                 outb(gpes[n].enio, old | 1 << gpes[n].enbit);
1900         else
1901                 outb(gpes[n].enio, old & ~(1 << gpes[n].enbit));
1902 }
1903
1904 static void clrgpests(int n)
1905 {
1906         outb(gpes[n].stsio, 1 << gpes[n].stsbit);
1907 }
1908
1909 static unsigned int getgpests(int n)
1910 {
1911         return inb(gpes[n].stsio) & 1 << gpes[n].stsbit;
1912 }
1913
1914 #if 0
1915 static void acpiintr(Ureg *, void *)
1916 {
1917         int i;
1918         unsigned int sts, en;
1919
1920         printd("acpi: intr\n");
1921
1922         for (i = 0; i < ngpes; i++)
1923                 if (getgpests(i)) {
1924                         printd("gpe %d on\n", i);
1925                         en = getgpeen(i);
1926                         setgpeen(i, 0);
1927                         clrgpests(i);
1928                         if (en != 0)
1929                                 printd("acpiitr: calling gpe %d\n", i);
1930                         //  queue gpe for calling gpe->ho in the
1931                         //  aml process.
1932                         //  enable it again when it returns.
1933                 }
1934         sts = getpm1sts();
1935         en = getpm1en();
1936         printd("acpiitr: pm1sts %#p pm1en %#p\n", sts, en);
1937         if (sts & en)
1938                 printd("have enabled events\n");
1939         if (sts & 1)
1940                 printd("power button\n");
1941         // XXX serve other interrupts here.
1942         setpm1sts(sts);
1943 }
1944 #endif
1945
1946 static void initgpes(void)
1947 {
1948         int i, n0, n1;
1949
1950         assert(fadt != NULL);
1951         n0 = fadt->gpe0blklen / 2;
1952         n1 = fadt->gpe1blklen / 2;
1953         ngpes = n0 + n1;
1954         gpes = kzmalloc(sizeof(struct Gpe) * ngpes, 1);
1955         for (i = 0; i < n0; i++) {
1956                 gpes[i].nb = i;
1957                 gpes[i].stsbit = i & 7;
1958                 gpes[i].stsio = fadt->gpe0blk + (i >> 3);
1959                 gpes[i].enbit = (n0 + i) & 7;
1960                 gpes[i].enio = fadt->gpe0blk + ((n0 + i) >> 3);
1961         }
1962         for (i = 0; i + n0 < ngpes; i++) {
1963                 gpes[i + n0].nb = fadt->gp1base + i;
1964                 gpes[i + n0].stsbit = i & 7;
1965                 gpes[i + n0].stsio = fadt->gpe1blk + (i >> 3);
1966                 gpes[i + n0].enbit = (n1 + i) & 7;
1967                 gpes[i + n0].enio = fadt->gpe1blk + ((n1 + i) >> 3);
1968         }
1969         for (i = 0; i < ngpes; i++) {
1970                 setgpeen(i, 0);
1971                 clrgpests(i);
1972         }
1973 }
1974
1975 static void acpiioalloc(unsigned int addr, int len)
1976 {
1977         if (addr != 0)
1978                 printd("Just TAKING port %016lx to %016lx\n", addr, addr + len);
1979 }
1980
1981 static void acpiinitonce(void)
1982 {
1983         parsersdptr();
1984         if (root != NULL)
1985                 printk("ACPI initialized\n");
1986 }
1987
1988 int acpiinit(void)
1989 {
1990         run_once(acpiinitonce());
1991         return (root == NULL) ? -1 : 0;
1992 }
1993
1994 static struct chan *acpiattach(char *spec)
1995 {
1996         int i;
1997         struct chan *c;
1998         /*
1999          * This was written for the stock kernel.
2000          * This code must use 64 registers to be acpi ready in nix.
2001          */
2002         if (acpiinit() < 0)
2003                 error(ENOSYS, "no acpi");
2004
2005         /*
2006          * should use fadt->xpm* and fadt->xgpe* registers for 64 bits.
2007          * We are not ready in this kernel for that.
2008          */
2009         assert(fadt != NULL);
2010         acpiioalloc(fadt->smicmd, 1);
2011         acpiioalloc(fadt->pm1aevtblk, fadt->pm1evtlen);
2012         acpiioalloc(fadt->pm1bevtblk, fadt->pm1evtlen);
2013         acpiioalloc(fadt->pm1acntblk, fadt->pm1cntlen);
2014         acpiioalloc(fadt->pm1bcntblk, fadt->pm1cntlen);
2015         acpiioalloc(fadt->pm2cntblk, fadt->pm2cntlen);
2016         acpiioalloc(fadt->pmtmrblk, fadt->pmtmrlen);
2017         acpiioalloc(fadt->gpe0blk, fadt->gpe0blklen);
2018         acpiioalloc(fadt->gpe1blk, fadt->gpe1blklen);
2019
2020         initgpes();
2021 #ifdef RON_SAYS_CONFIG_WE_ARE_NOT_WORTHY
2022         /* this is frightening. SMI: just say no. Although we will almost
2023          * certainly find that we have no choice.
2024          *
2025          * This starts ACPI, which may require we handle
2026          * power mgmt events ourselves. Use with care.
2027          */
2028         outb(fadt->smicmd, fadt->acpienable);
2029         for (i = 0; i < 10; i++)
2030                 if (getpm1ctl() & Pm1SciEn)
2031                         break;
2032         if (i == 10)
2033                 error(EFAIL, "acpi: failed to enable\n");
2034         if (fadt->sciint != 0)
2035                 intrenable(fadt->sciint, acpiintr, 0, BUSUNKNOWN, "acpi");
2036 #endif
2037         c = devattach(devname(), spec);
2038
2039         return c;
2040 }
2041
2042 static struct walkqid *acpiwalk(struct chan *c, struct chan *nc, char **name,
2043                                 unsigned int nname)
2044 {
2045         /*
2046          * Note that devwalk hard-codes a test against the location of 'devgen',
2047          * so we pretty much have to not pass it here.
2048          */
2049         return devwalk(c, nc, name, nname, NULL, 0, acpigen);
2050 }
2051
2052 static size_t acpistat(struct chan *c, uint8_t *dp, size_t n)
2053 {
2054         struct Atable *a = genatable(c);
2055
2056         if (c->qid.type == QTDIR)
2057                 a = a->parent;
2058         assert(a != NULL);
2059
2060         /* TODO(dcross): make acpigen work here. */
2061         return devstat(c, dp, n, a->cdirs, a->nchildren + NQtypes, devgen);
2062 }
2063
2064 static struct chan *acpiopen(struct chan *c, int omode)
2065 {
2066         return devopen(c, omode, NULL, 0, acpigen);
2067 }
2068
2069 static void acpiclose(struct chan *unused)
2070 {
2071 }
2072
2073 static char *ttext;
2074 static int tlen;
2075
2076 // Get the table from the qid.
2077 // Read that one table using the pointers.
2078 static size_t acpiread(struct chan *c, void *a, size_t n, off64_t off)
2079 {
2080         long q;
2081         struct Atable *t;
2082         char *ns, *s, *e, *ntext;
2083
2084         if (ttext == NULL) {
2085                 tlen = 32768;
2086                 ttext = kzmalloc(tlen, 0);
2087         }
2088         if (ttext == NULL)
2089                 error(ENOMEM, "acpiread: no memory");
2090         q = c->qid.path & QIndexMask;
2091         switch (q) {
2092         case Qdir:
2093                 return devdirread(c, a, n, NULL, 0, acpigen);
2094         case Qraw:
2095                 return readmem(off, a, n, ttext, tlen);
2096         case Qtbl:
2097                 s = ttext;
2098                 e = ttext + tlen;
2099                 strlcpy(s, "no tables\n", tlen);
2100                 for (t = tfirst; t != NULL; t = t->next) {
2101                         ns = seprinttable(s, e, t);
2102                         while (ns == e - 1) {
2103                                 ntext = krealloc(ttext, tlen * 2, 0);
2104                                 if (ntext == NULL)
2105                                         panic("acpi: no memory\n");
2106                                 s = ntext + (ttext - s);
2107                                 ttext = ntext;
2108                                 tlen *= 2;
2109                                 e = ttext + tlen;
2110                                 ns = seprinttable(s, e, t);
2111                         }
2112                         s = ns;
2113                 }
2114                 return readstr(off, a, n, ttext);
2115         case Qpretty:
2116                 s = ttext;
2117                 e = ttext + tlen;
2118                 s = dumpfadt(s, e, fadt);
2119                 s = dumpmadt(s, e, apics);
2120                 s = dumpslit(s, e, slit);
2121                 s = dumpsrat(s, e, srat);
2122                 s = dumpdmar(s, e, dmar);
2123                 s = dumpmsct(s, e, mscttbl);
2124                 s = dumpmcfg(s, e, mcfgtbl);
2125                 return readstr(off, a, n, ttext);
2126         default:
2127                 error(EINVAL, "acpiread: bad path %d\n", q);
2128         }
2129         error(EPERM, ERROR_FIXME);
2130
2131         return -1;
2132 }
2133
2134 static size_t acpiwrite(struct chan *c, void *a, size_t n, off64_t off)
2135 {
2136         error(EFAIL, "acpiwrite: not until we can figure out what it's for");
2137 #if 0
2138         ERRSTACK(2);
2139         struct cmdtab *ct;
2140         struct cmdbuf *cb;
2141         struct Reg *r;
2142         unsigned int rno, fun, dev, bus, i;
2143
2144         if (c->qid.path == Qio) {
2145                 if (reg == NULL)
2146                         error(EFAIL, "region not configured");
2147                 return regio(reg, a, n, off, 1);
2148         }
2149         if (c->qid.path != Qctl)
2150                 error(EPERM, ERROR_FIXME);
2151
2152         cb = parsecmd(a, n);
2153         if (waserror()) {
2154                 kfree(cb);
2155                 nexterror();
2156         }
2157         ct = lookupcmd(cb, ctls, ARRAY_SIZE(ctls));
2158         switch (ct->index) {
2159                 case CMregion:
2160                         /* TODO: this block is racy on reg (global) */
2161                         r = reg;
2162                         if (r == NULL) {
2163                                 r = kzmalloc(sizeof(struct Reg), 0);
2164                                 r->name = NULL;
2165                         }
2166                         kstrdup(&r->name, cb->f[1]);
2167                         r->spc = acpiregid(cb->f[2]);
2168                         if (r->spc < 0) {
2169                                 kfree(r);
2170                                 reg = NULL;
2171                                 error(EFAIL, "bad region type");
2172                         }
2173                         if (r->spc == Rpcicfg || r->spc == Rpcibar) {
2174                                 rno = r->base >> Rpciregshift & Rpciregmask;
2175                                 fun = r->base >> Rpcifunshift & Rpcifunmask;
2176                                 dev = r->base >> Rpcidevshift & Rpcidevmask;
2177                                 bus = r->base >> Rpcibusshift & Rpcibusmask;
2178 #ifdef CONFIG_X86
2179                                 r->tbdf = MKBUS(BusPCI, bus, dev, fun);
2180 #else
2181                                 r->tbdf = 0
2182 #endif
2183                                 r->base = rno;  /* register ~ our base addr */
2184                         }
2185                         r->base = strtoul(cb->f[3], NULL, 0);
2186                         r->len = strtoul(cb->f[4], NULL, 0);
2187                         r->accsz = strtoul(cb->f[5], NULL, 0);
2188                         if (r->accsz < 1 || r->accsz > 4) {
2189                                 kfree(r);
2190                                 reg = NULL;
2191                                 error(EFAIL, "bad region access size");
2192                         }
2193                         reg = r;
2194                         printd("region %s %s %p %p sz%d",
2195                                    r->name, acpiregstr(r->spc), r->base, r->len, r->accsz);
2196                         break;
2197                 case CMgpe:
2198                         i = strtoul(cb->f[1], NULL, 0);
2199                         if (i >= ngpes)
2200                                 error(ERANGE, "gpe out of range");
2201                         kstrdup(&gpes[i].obj, cb->f[2]);
2202                         setgpeen(i, 1);
2203                         break;
2204                 default:
2205                         panic("acpi: unknown ctl");
2206         }
2207         poperror();
2208         kfree(cb);
2209         return n;
2210 #endif
2211 }
2212
2213 struct {
2214         char *(*pretty)(struct Atable *atbl, char *start, char *end, void *arg);
2215 } acpisw[NACPITBLS] = {};
2216
2217 static char *pretty(struct Atable *atbl, char *start, char *end, void *arg)
2218 {
2219         int type;
2220
2221         type = atbl->type;
2222         if (type < 0 || NACPITBLS < type)
2223                 return start;
2224         if (acpisw[type].pretty == NULL)
2225                 return seprintf(start, end, "\"\"\n");
2226         return acpisw[type].pretty(atbl, start, end, arg);
2227 }
2228
2229 static char *raw(struct Atable *atbl, char *start, char *end, void *unused_arg)
2230 {
2231         size_t len = MIN(end - start, atbl->rawsize);
2232
2233         memmove(start, atbl->raw, len);
2234
2235         return start + len;
2236 }
2237
2238 struct dev acpidevtab __devtab = {
2239     .name = "acpi",
2240
2241     .reset = devreset,
2242     .init = devinit,
2243     .shutdown = devshutdown,
2244     .attach = acpiattach,
2245     .walk = acpiwalk,
2246     .stat = acpistat,
2247     .open = acpiopen,
2248     .create = devcreate,
2249     .close = acpiclose,
2250     .read = acpiread,
2251     .bread = devbread,
2252     .write = acpiwrite,
2253     .bwrite = devbwrite,
2254     .remove = devremove,
2255     .wstat = devwstat,
2256 };