libc: wunlock() part 2

the initial issue was that wunlock() would wakeup readers while
holding the spinlock causing deadlock in libthread programs where
rendezvous() would do a thread switch within the same process
which then can acquire the RWLock again.

the first fix tried to prevent holding the spinlock, waking up
one reader at a time with releasing an re-acquiering the spinlock.
this violates the invariant that readers can only wakup writers
in runlock() when multiple readers where queued at the time of
wunlock(). at the first wakeup, q->head != nil so runlock() would
find a reader queued on runlock() when it expected a writer.

this (hopefully last) fix unlinks *all* the reader QLp's atomically
and in order while holding the spinlock and then traverses the
dequeued chain of QLp structures again to call rendezvous() so
the invariant described above holds.

upas/smtpd: don't call syslog() from the note handler, this can deadlock

when the alarm hits while the process is currently in syslog(), holding
the sl lock, then calling syslog again will deadlock:

/proc/1729193/text:386 plan 9 executable
/sys/lib/acid/port
/sys/lib/acid/386
acid: lstk()
sleep()+0x7 /sys/src/libc/9syscall/sleep.s:5
lock(lk=0x394d8)+0xb7 /sys/src/libc/port/lock.c:25
i=0x3e8
syslog(logname=0x41c64,cons=0x0,fmt=0x41c6a)+0x2d /sys/src/libc/9sys/syslog.c:60
err=0x79732f27
d=0x0
ctim=0x0
buf=0x0
p=0x0
arg=0x0
n=0x0
catchalarm(msg=0xdfffc854)+0x7a /sys/src/cmd/upas/smtp/smtpd.c:71
notifier+0x30 /sys/src/libc/port/atnotify.c:15

libc: cleanup atexit and put exits() in its own compilation unit

this avoids having to pull in atexit() and its dependencies
(lock(), unlock()) into every program. (as exits() is called
by _main() from main9.s).

vt: block when sending input to host (fixes truncated paste)

libsec: make sectorNumber argument for aes_xts routines uvlong

libsec: add AES CFB and AES OFB stream ciphers

aux/wpa: prevent PTK re-installation attack by replaying AP retransmits

this implements the mitigation suggested in section "6.5 Countermeasures" of
"Key Reinstallation Attacks: Forcing Nonce Resuse in WPA2" [1].

[1] https://papers.mathyvanhoef.com/ccs2017.pdf

ape/libsec: fix the build, bring ape libsec.h in sync with plan9 version

ssh: remove extern declarations for pkcs1padbuf() and asn1encodedigest() (now in libsec.h)

rsa: add auth/rsa2asn1, check write error in auth/rsa2x509 and auth/rsa2pub, document in rsa(8)

libsec: export asn1encodedigest(), asn1encodeRSApub(), asn1toRSApub(), pkcs1padbuf() and pkcs1unpadbuf()

libsec: allow \r\n terminated lines in decodePEM()

check for fs= in netaudit

hgwebfs: simplify retry loop construction

ndb/cs: icmp only supports version 4 addresses, icmpv6 only version 6 addresses

libauthsrv: preserve readcons() error message from read() error

hg: disable tag caching, allows accessing hg repo from dump

9boot: limit read size to 4K for efi simple file system protocol

copying files from the uefi shell works, reading plan9.ini works,
loading the kernel by calling Read to read in the DATA section of
the kernel *FAILS*. my guess is that uefi filesystem driver or
nvme driver tries to allocate a temporary buffer and hasnt got
the space. limiting the read size fixes it.

pc64: add ether82598 driver to configuration

ether82598: support for T540-T1, use physical addresses for isaconf port

reading mac doesnt work yet, requires ea= option in isaconf.

sdnvme: identify namespace list fails on intel ssd, just assume nsid=[1]

kernel: don't tokenize inplace in isaconfig() to make /dev/reboot work

kernel:  get rid of 36 bit Paerange mask in mtrr (supporting machines with more than 64GB of memory)

upas/fs: fix putcache(), sub-part messages should never go into the lru

we accidentally added non-top messages (attatchments) to the lru,
resulting in attachments to be freed. this is wrong.

xhci: do bounds checking in capability walking, check if controller vanished on init (thunderbolt unplug)

sshfs: use mtime for qid.vers, fix wstat without name change, fix wstat memory leak

upas/fs: replace fixed cache table with lru linked list

the cachetab just keeps track of recent messages that have not
been called cachefree() on. under some conditions, the fixed
table could overflow (all messages having refs > 0). with a
linked list, overflow becomes non fatal and the algorithm is
simpler to implement.

winwatch: show windows with empty labels (thanks jpm)

rename pcf kernel to pc, remove pcf, pccpuf, pccpu64 kernels, update documentation

there isnt much of a point in keep maintaining separate
kernel configurations for terminal and cpu kernels as
the role can be switched with service=cpu boot parameter.

to make stuff cosistent, we will just have one "pc" kernel
and one "pc64" kernel configuration now.

audiohda: add pci id for nvidia GM204

audiohda: add pci id for Intel 9 Series

vmx(3): document changes to devvmx interface

audiohda: add pci id for ICH10 (thanks echoline)

devvmx: call vmxshutdown from reboot() function manually

sshfs: fork ssh in its own namespace so it wont keep the mountpoint open

sshfs: start sendproc and recvproc in the sane notegroup as the fs process so theadexitsall() works on sshfs: ending.

ether82563: make the ethernet of thinkpad p50 work (thanks sam-d)

audiohda: Intel Sunrise Point-H support (thanks sam-d)

sdnvme: pass 0 instead of 0xffffffff as NSID for identify controller and create completion/submission queue commands (thanks Ori_B)

Samsung SSD 960 EVO fails with invalid namespace error otherwise...

devdup: remove useless OCEXEC check, handled by namec()

merge

devsegment: handle ORCLOSE on segment directory correctly, fix wrong qid, missing COPEN flag for segmentcreate()

devvmx, vmx: lilu dallas multivm

vmx(1): don't realloc virtio queues -- breaks pointers

sdiahci: Intel 200 Series Chipset Family PCH support (thanks aiju)

we used to tweak arround in the ICH registers for all intel controllers,
which is wrong, as the 200 series has different magic registes. see
the datasheet:

https://www.intel.com/content/www/us/en/chipsets/200-series-chipset-pch-datasheet-vol-2.html

this caused the clocks to be disabled for the 6th port causing a full
machine lockup touching the 6th port registers.

the next problem was that aiju's bios disabled the unused ports somehow
but didnt clear ther PI bits, so that they would stay in Sbist status even
after a port reset. so the port would get stuck in the Dportreset state
forever. the fix for this was to use a one second timeout for the
port reset procedure.

libmach: support disassembling from memory

vmx(1): VGA framebuffer should be normal memory

vmx(1): fixed code that assumed uintptr==uvlong

vmx(1): memory map improvements, x86 simulator for MMIO

devvmx: more efficient data structure for memory map; simplified (more reliable) step function

igfx: fix cdclk and dpll settings for dual channel lvds on sandybridge

vt: turn off nl -> nl+cr translation default in raw mode, don't scroll more than screen height

vt: block selection mode for snarf

merge

vt: implement /dev/cons and /dev/consctl as a fileserver, winch, incremental redraw

we used to bind a pipe to /dev/cons and /dev/consctl with some
shared segment hack to pass tty info arround. now we implement
this as a fileserver.

add support for "winchon"/"winchoff" ctl message to enable interrupt
on window size change. (used by ssh)

keep track of fullscreen scrolls, avoiding redrawing the whole
screen each time.

ssh: issue "winchon" ctl request to /dev/consctl to get interrupt on window size change from vt(1)

igfx: add did for x220

igfx: fix sandybridge fdi link training bits and ordering

- fix wrong bitfield for txctl (different between snb and ivb),
  and enable tx before rx
- DPLL_CTL_x snb/ivb: don't touch reserved bits

vmx: allocate sticky instead of more expensive fixed segment

vmx: pass multiboot framebuffer info to kernel

ether82563: add more pci ids for i210 and i354 from 9atom / openbsd

ether82563: support for i211 with iNVM. (thanks mfny and brennan for testing)

awk: allow string as exit status

awk: don't get into a infinite loop with eof while in string (thanks BurnZeZ)

kernel: double READSTR buffer size to 8000 bytes for devusb

devusb: superspeed bandwidth allocation handled by controller, skip usbload() calculation

with xhci, bandwidth allocations are handled by the controller
and there are various speed settings possible that currently
not exposed in the Udev. so just keep usbload() as it is for
usb2 and keep ep->load as zero for superspeed.

nusb/disk: add a 100ms sleep after ums reset, remove unused note handler, cleanup

my pretec usb stick sometimes hangs on the first inquiry request,
waiting for the inquiry response forever. adding a 100ms delay after
the reset command seems to fix it.

getting rid of unused "ding()" note handler and simplify umsrequest()
incomplete read handling.

doom: clean up temporary mus files

add games/wadfs

vt: fix silly bug causing characters be drawn one at a time

sysinfo: run aux/icanhasvmx with verbose flag

sysinfo: only dump #r/nvram on amd64,386

right now, theres no kernel that stores hostowner keys
in #r/nvram, but this could change in the future. so
only dump #r/nvram on the pc where we know that its
not used to hold keys.

vmx: fix hlt idle problem

usbxhci: implement recovery from host controller errors

inst: don't hardcode /net/ether0, might have usb ethernet

inst: get rid of ppp configuration

inst: get rid of halt, just run fshalt in finish directly

inst: post newfs fileservers under /srv/$fstype.newfs to avoid conflict with preexisting local filesystem

cwfs: -n always overrides postservice() name, no matter if config mode changes service

etheriwl: add pci id for Intel Centrino Advanced-N 6200 on x201 tablet (thanks arpunk)

usbxhci: handle out of memory in controller initialization

usbxhci: abandon multiple requests per endpoint, cleanup

more conservative approach: only one transaction in flight
per endpoint (except iso). also serialize controller commands.
no driver currently uses this and i doubt it is usefull.

create constants for common TRB flags and remove bogus 1<<16
flag on TR_NORMAL.

usbxhci: have to serialize and set read pointer for endpoint stop command

disk/edisk: add some headroom in the type table for dynamic entries

disk/edisk: add more partition type uuid's from wikipedia (thanks qeed)

usbohci, usbehci, usbxhci: save mmio base address in ctlr, cant PADDR() on 386...

usbxhci: provide shutdown function to halt the controller

nusb/*: cleanup

nusb/usbd: support for usb3 hubs

libregexp: fix lexer so it doesnt move past the string when it gets a \ escape

xhci: experimental usb3 support

nusb/usbd: create endpoint files for conf #1, usb3 preparation

usbehci: fix crash in cancelisoio() for highspeed device due to wrong pollival

pc, pc64: enable usbxhci in the configuration

usbxhci: simplify xecp()

usbxhci: implement controller handoff, ignore usb3.0 ports, honor pollival for isochronous endpoints

usbxhci: basic iso write support (usb soundcard playback)

usb: fix wrong pollival calculation in setmaxpkt()

usbxhci: handle changing maxpkt on control endpoint by reevaluating endpoint context

while endpoints != 0 are opend after the device descriptor has been
parsed and the endpoint properties like maxpkt have been set, the
control endpoint is opend with a guessed maxpkt value. once the first
8 bytes of the descriptor have been read by usbd, maxpkt gets set and
we need to reevaluate the control endpoint 0 context to update the value.

usbxhci: use physical register addresses for matcing controllers and printing. simplify endpoint slot initialization.