vmx: clean up mksegment, memset only if segment existed (devsegment clears new ones)

src: work on awk scripts too, see "src valley" (thanks phil9)

pc, pc64: work around bhyve all uncached MTRR's

merge

backout OCEXEC changes when potentially opening /srv files

Opening a /srv file sets the close-on-exec flag on the
shared channel breaking the exportfs openmount() hack.

The devsrv tries to prevent posting a channel with the
close-on-exec or remove-on-close flags. but nothing
currently prevents this poisoning on open.

Until this gets fixed in eigther exportfs or devsrv,
i'll back out the changes that could have potential side
effects like this.

sega(1): fix keys (thanks bigato)

plan9.ini(8): document *nomtrr= and order the table

pc, pc64: cleanup cpuidentify() and some comments

pc, pc64: add *nomtrr= kernel parameter

pc64: preserve reserved bits in CR0/CR4 for amd64 in mtrr setstate()

On AMD64, CR0/CR4 are 64-bit registers, with
the upper half reserved. So use uintptr type
to store the register values to get 32 bit on 386
and 64 bit on AMD64.

vncv: backing out previous change, this needs another revision

vncv: do NOT map Kaltgr to meta, introduce Mod4 (Super) as an extra key to use instead

vmx(1): build vmxgdb by default, clean it up as well

vmx: nanosec(): fix non-interruptable temporary, assign fasthz only once after xstart

pc: move ldmxcsr() prototype to fpu.c

vmx: add fmt checking, fix fmt errors, remove duplication for vmdebug

nusb/kb: update button state if event was actually received, fix typos (thanks umbraticus)

devmouse: remove redundant check

mouse(3): blankS, setS to follow the convention (thanks umbraticus)

mouse(3): document "scrollswap" ctl message, fix style a bit (thanks umbraticus)

vesa: make unsupported function not an error, set return status

vmx: add -D option to enable debug messages, use vmdebug for non-fatal "errors"

vmx: add -v|-w flag to control window creation behaviour

The -v flag now does not create a new rio window,
while -w flag does (restores the old behaviour).

This allows vmx to run under vncs and is in general
mode aligned to other emulators and programs.

libcomplete: open internal file-descriptor with OCEXEC flag

libsec: open internal file-descriptors with OCEXEC flag

merge

libauthsrv: open internal file-descriptors with OCEXEC flag

libauth: open internal file-descriptors with OCEXEC flag

aux/kbdfs, kbmaps: enable Kmod4 for other layouts, not just neo2

libdraw: open file-descriptor with OCEXEC flag in readcolmap()

libndb: open internal file-descriptors with OCEXEC flag

lib9p: open internal file-descriptor with OCEXEC flag in getremotesys()

lib9p: open /mnt/factotum/rpc with OCEXEC flag in auth9p()

lib9p: improve reqqueuecreate()

- open /proc/n/ctl with OCEXEC flag
- format pid as ulong
- don't leak the fd

merge

libdraw: open internal file-descriptors with OCEXEC flag

libdraw: remove unused Error label in freescreen()

libthread: reduce stack usage of threadkill*(), open /proc/n/ctl with OCEXEC flag

libthread: reduce stack usage for ioprocs, open /proc/n/ctl with OCEXEC flag

libthread: simplify threadsetname()

- open /proc/n/args with OCEXEC flag
- reduce stack usage by using smaller buffer for path
- format pid as ulong

libc: open internal file-descriptor with OCEXEC flag

rio: format pid's as ulongs

rio: open /dev/snarf with OCEXEC flag when writing

rio: simplify filsysinit() by using getuser(), format pid's as ulongs

libndb: remove db file size limit

Removes the 128 kB limit for files making up the database.
We used to skip over and complain about files that exceeded
the limit, forcing the user to generate hash files.

This caused things to inexplicably stop working after a file
hit the hidden limit, which is unreasonable behaviour considering
that libndb happily, albeit slowly, works with bigger files.

merge

pc64: assign fpsave/fprestore only once in fpuinit()

ptrap: implement filtering on plumb attributes

pc64: AMD64 mandates SSE support, remove the check in fpuinit()

xen: use pc/fpu.c

pc, pc64: move all fpu specific code from main.c to fpu.c

xen: fix for the last avx changes

amd64: FP: back to static size for allocation and copying

amd64: FP: always use enough to fit AVX state and align to 64 bytes

amd64, vmx: support avx/avx2 for host/guest; use *noavx= in plan9.ini to disable

rio: undo previous commit, was a stupid idea

rio: give visual clue during sweep and bandsizing when window is too small

We color the window border with a dark red in case the
window is too small.

rio: use libdraw's badrect() to exclude some extreme cases in goodrect()

rio: rewrite better portion() function

rio: handle corner selection for resizing better (thanks cinap)

rio: goodrect: clarify minimal height and actually use the smallest reasonable value

rio: allow windows as small as one line of text, still scrollable

aux/status^(bar msg): few small fixes (thanks umbraticus)

cwfs: fix interpretation of startdump argument

pc/dma, pc/sdide: use uintptr for physical address instead of ulong

pc, pc64: allocate dma bounce buffer right after xinit()

pc, pc64: exclude memory regions with unusual MTRR cache attributes

Use the MTRR registers to exclude memory ranges that
do not have the expected cache attributes:

RAM -> writeback
UMB -> uncached
UPA -> uncached

faces: add -c option to remove faces with button 1 click (thanks sirjofri)

merge

libdraw: do not force flushimage() on freescreen()

This causes visual flashes of white in rio. If it is
really needed (it is rare) it should be done by the caller.

rio: properly restore the windows contents on /dev/mouse close

The previous resize optimization now means that the wfill()
is skipped on resize for libdraw programs.

So do it once /dev/mouse is closed and the window processes
the Refresh message.

/lib/keyboard: Anführungszeichen uten (danke sirjofri)

/lib/keyboard: add fingers and more arrows (thanks umbraticus)

proof: don't confuse ""(1) (thanks Stuart Morrow)

"" looks for patterns in the form 'prompt;' or 'prompt%',
and gets confused when proof emits 'illegal;'. This change
replaces the ';' with a ':', which both matches other
conventional error outputs and prevents "" from getting
confused.

tmdate(2): remove lies

Initially the code tried to guess the date format. This
turned out to be a bit too magical, so the feature was
removed, but the manpage still documented the nonfeature.

rio: avoid redrawing window text on resize for programs using libdraw

As long as the client as the mouse file open
and maintains reading the winname file of the window
after a resize we will avoid drawing the text frame
on a resize as it will be overdrawn by the client.

This reduces flicker on resize somewhat for slow systems.

pc, pc64, xen: rewrite interrupt handling code

This implements proper intrdisable() support for all
interrupt controllers.

For enable, (*arch->intrassign)(Vctl*) fills in the
Vctl.enable and Vctl.disable pointers with the
appropriate routines and returns the assigned
vector number.

Once the Vctl struct has been linked to its vector
chain, Vctl.enable(Vctl*, shared) gets called with a
flag if the vector has been already enabled (shared).

This order is important here as enabling the interrupt
on the controller before we have linked the chain can
cause spurious interrupts, expecially on mp system
where the interrupt can target a different cpu than
the caller of intrenable().

The intrdisable() case is the other way around.
We first disable the interrupt on the controller
and after that unlink the Vctl from the chain.
On a multiprocessor, the xfree() of the Vctl struct
is delayed to avoid freeing it while it is still
in use by another cpu.

The xen port now also uses pc/irq.c which has been
made generic enougth to handle xen's irq scheme.
Also, archgeneric is now a separate file to avoid
pulling in dependencies from the 8259 interrupt
controller code.

games/mix: fix decoding of shift instructions

games/mix: fix SLAX and SRAX instructions (thanks nicolagi)

MIX shift instructions shift by bytes not bits.

fplot: add hyperbolic functions

fplot(1): use abs()

fplot: add abs

merge

games/mix: fix implementation of MOVE instruction (thanks nicolagi)

Plan 9 memcpy(2) uses the same implementation as memmove(2) to handle
overlapping ranges.  Hovewer, the MIX MOVE instruction, as described
in TAOCP, specifically does not do this.  It copies words one at a
time starting from the lowest address.

This change also expands the address validation to check that all
addresses within the source and destination ranges are valid before
proceeding.

kbmap/neo2: add support for neo2 kbmak (thanks jstsmthrgk)

upas: fix mk nuke

g: fix typo in last commit

upas/*: fix mkfile issues (thanks amavect)

Fixes 3 issues in our upas mkfiles:
- mk/mkfile and send/mkfile were rebuilding
  only the rfc822.tab.$O, even though the
  header also needed to be rebuilt.
- CLEANFILES had a pattern that  would not
  get expanded.
- Third, ../upas/mkfile was being included
  in the wrong place and making the wrong
  rule default.

pc, pc64: move common irq handling code out of trap.c

Move the common irq handling code out of trap.c
into pc/irq.c so that it can be shared between 386
and amd64 ports.

g: filter directory arguments

When searching directories recursively, it's still
desirable to filter the contents by the file pattern,
so that 'g foo /sys/src' doesn't end up searching for
foo within .$O files.

Files passed explicitly are still searched, so for the
old behavior, just use walk:

g foo `{walk -f $dir}

9boot(8): update manual to reflect efi loader search order changes

the efi loader now looks for plan9.ini and the kernel in the ESP
first, before looking elsewhere.

efi: prefer plan9.ini from ESP we loaded from

currently the EFI loader's behavior is to search all disks in a
firmware-defined order.  we search the list returned by the firmware
in reverse order in the hopes of searching the first 9FAT instead of
the ESP, but this results in unintuitive behavior when there are
multiple FAT partitions (possibly in multiple disks), such as loading
a plan9.ini and kernel from a different disk than the one you executed
the EFI loader from.

to resolve this, we change the EFI loader to instead prefer read
plan9.ini and the kernel from the same disk as the EFI loader was read
from, and then fall back to the old behavior, since the old behavior
is relied on by current installations.

dc: fix crashes with : operator (thanks istvan bak)

dc crashes because a Blk* sometimes ends getting double freed.
To make it crash, any of these lines will do:
(each line is a separate input to dc):

1 sa 2 :a le d sa v :a
1 sa 2 :a le d sa :a
1 sa 2 :a le d sa c

Fix by assigning p to sptr->val before EMTPY causes a jump.

Additionally, dcgetwd() can return 0. all other uses check for
0 ptr; Also fix a buffer overflow.

upas: make 'all' the default target

When consolidating the duplicated targets, the
one that actually got built ended up arbitrary.
Put in a 'default' target that runs 'mk all'.

pc, pc64: fix grub multiboot

It appears that our IDT overlaps with the data structures
passed from grub in multiboot load.

So defer setup of the interrupt table after the multiboot
parameters have been processed.

merge

ether8169: fix interrupt panic before init, defer initialization until attach

The driver used to register the interrupt handler just
after reset, tho the Ctlr struct, including the buffer
descriptor arrays where only allocated on attach.

This moves most of the reset/init out of pnp
function and into attach. This also means we can
error out and even retry on the next attach.

The logic of the reseter kproc has been changed:
now it is only started once the first initialization
completely succeeded. This avoids the strange qlock
passing.

Implement a shutdown function so the device gets
halted for /dev/reboot.

Assume 64 bit physical addresses for dma.

Check that pci bar0 is actually I/O.

pc, pc64: implement disabling of msi interrupts

nusb/kb, nusb/joy: dont try to set protocol on nonboot devices

the hid 1.11 specification says that for hid devices which arent in
the boot subclass (subclass 1), it is only optional to support the set
protocol command.  for my devices, trying to set protocol results in a
stall error and unusable devices.

fixes my Tex Shinobi keyboard and Playstation 4 controller.

pc, pc64: new MTRR code supporting AMD TOM2 MSR and fixed mtrr ranges

The new MTRR code handles overlapping ranges
and supports AMD specific TOM2 MSR.

The format in /dev/archctl now only shows
the effective cache ranges only, without
exposing the low level registers.