merge

sam: '^' and '_' cmds; same as '<' and '|' except that stdout goes to the command window

flate: fix wrong adler32() length calculation (thanks qrstuv)

vblade: fix code so #pragma pack isnt needed

add erik quanstros vblade utility

pc64: enable devaoe and sdloop in kernel configuration

sdloop: hardcode Enotup[] string to avoid devaoe dependency

sdaoe: allow aoedev= shorthand for id!lun -> id!#æ/aoe/lun

we cannot type æ character in the bootloader console, so allow
the shorthand syntax id!lun which gets translated to id!#æ/aoe/lun.

pc, pc64: adjust mpshutdown() comment to reflect the current state

pc, pc64: untangle acpireset() from mpshutdown()

mpshutdown() used to call acpireset() making it impossible to build
a kernel without archacpi. now, mpshutdown() is a helper function
that only shuts down the application processors that gets used from
mpreset() and acpireset().

the generic machine reset code in exported by devarch's archreset()
function that is called by mpreset() and from acpireset() as a fallback.
so the code duplication that was in mpshutdown() is avoided.

hgfs(4): add SOURCE to man page (thanks, spew)

fortunes: oh really.

hgfs(4): add HISTORY to man page

xen: remove segmentation constants, not used on xen.

pc: remove mmuinit0()

all mmuinit0() does is initialize m->gdt, but this isnt neccesary
as this is done by mmuinit() anyway before loading the gdt.

merge

kernel: remove "checked xxx page table entries" print from checkpages()

the purpose of checkpages() is to verify consitency of the hardware mmu state,
not to notify on the console that a program faulted. a program could also
continue after handling the note. (this seems to be the case in go programs)

kernel: print addresses in hex and sizes in decimal in xallocsummary

acme: allow typing '\n' in window tags

pc, pc64: cleanup devarch

- shorten cpuidprnt so it doesnt have to break line
- addarchfile: complain when running out of entries
- fix range check in rmemrw() (harmless)
- use nil instead of 0 for pointers

fstype(1): cleanup

boot(8): the method!server notation isnt usefull anymore...

- in 9front, the bootargs are in the form: method!device args
- remove redundant and wrong paragraphs regarding tcp booting
- document il boot method
- fix boot and bootrc confusions

teg2, xen: remove unused bootdisk[] and fix conf.nswppo factor in kernel memory size calculation

pc: remove unused bootdisk[] variable

pc, pc64: remove old B.COM command line parsing and just pass tokenized BOOTLINE to /boot/boot as argv[]

this change allows command line passing to /boot/boot from qemu like:
qemu -kernel 9pcf -append "-u glenda tcp"

kernel: replace ulong with uintptr in ucallocb() and fix unneeded parentheses

kernel: remove obsolete comment regarding Mntcache size in */main.c

kernel: new mount cache

this is a new more simple version of the mount cache
that does not require dynamic allocations for extends.

the Mntcache structure now contains a page bitmap
that is used for quick page invalidation. the size
of the bitmap is proportional to MAXCACHE.

instead of keeping track of cached range in the
Extend data structure, we keep all the information
in the Page itself. the offset from the page where
the cache range starts is in the low PGSHIT bits and
the end in the top bits of Page.va.

we choose Page.daddr to map 1:1 the Mountcache number
and page number (pn) in the Mountcache. to find a page,
we first check the bitmap if the page is there and then
do a pagelookup() with the daddr key.

audio/flacdec: fix pcmconv pipeline race (thanks mischief and henesy)

kernel: minor changes to mount cache

change page cache ids (bid) to uintptr so we use the full
address space of Page.daddr.

make maxcache offset check consistent in cread().

use consistent types in cupdate() and simplify with goto.

make internal functions static.

use nil instead of 0 for pointers.

xen: fix cross build

kernel: use new disk/mkfs -o option to get proper source filename list for bootfs.proto

disk/mkfs: add -o flag to list source files

merge

kernel: remove *.acid files in nuke target instead of $CONF.clean target

png: fail on invalid bpc

kernel: get rid of /boot/boot parametrization

there is no use for "bootdisk" variable parametrization
of /boot/boot and no point for the boot section with its
boot methods in the kernel configuration anymore. so
mkboot and boot$CONF.out are gone.

move the rules for bootfs.paq creation in 9/boot/bootmkfile.
location of bootfs.proto is now in 9/boot/bootfs.proto.
our /boot/boot target is now just "boot".

xen: fix mtrr dummy functions

bio: add Bfdopen() from plan9port

kernel: evaluate dependencies of bootfs.proto files for bootfs.paq

expand the list of files specified in bootfs.proto and use them
as dependencies to bootfs.paq rule. this way, bootfs.paq is
regenerated when the to be included files have been modified.

various cmds: replace magic numbers with Kdel/Keof, etc

kernel: correct dependency for printstub.$O instead of print.$O

stats: handle 'q' to close

a side effect of this is keys typed other than q/Del no longer get drawn on top of the window.

pc, pc64: untangle embedded controller (ec) dependency from devarch

kernel: generate dummy bootscreeninit() function when building without vga device

ndb/cs: fix spelling (thanks mischief)

acme/win: fix mistake

have to save partial reminder before null terminating current
event buffer :)

acme/win: remove old crap

merge

acme/win: fix fswrite() not assuming iounit < EVENTSIZE

fortunes: UX-wise (and generally speaking, for most common uses of a computer these days), Plan9 is, sadly, almost useless.

qmail: call mail instead of smtp with the wrong path

cfs: change default mountpoint to /mnt/cfs and fix the manual (thanks mischief)

acme: fix buffer overrun in xfidutfread() and xfidruneread(), cleanup

the utf8 buffers b1 where allocated from fbufalloc() which gives
us BUFSIZE bytes, but Xfid->count can be bigger than that. so just
emalloc() the requested number of bytes.

when converting from Runes to utf-8, we have to account for the
terminating '\0' byte snprint() places, so fix the maxrune number
calculation instead of using BUFSIZE+1 as buffer size.

kbmap: fix sprint() buffer overflow (thanks silasm)

A buffer can be overflowed in the init function of kbmap.c by using a filename of more than 112 characters.

sample output:
% cd /sys/lib/kbmap
% touch aaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaaa
% kbmap
kbmap 1974: suicide: sys: trap: fault write addr=0xa6a96510 pc=0x000011df
offending code is most likely the call to sprint in the init function of /sys/src/cmd/kbmap.c,
which in this case writes /sys/lib/kbmap/$file to a 128-bit buffer.
I'm willing to submit a patch for this myself along with a few minor improvements/fixes to kbmap
if I can figure out the nuances of doing so.

--silasm

plan9.ini(8): fix typo (thanks ftrvxmtrx)

plan9.ini(8): etheryuk

plan9.ini(8): document bcm and virtio ethernet and hda and ac97 audio.

plan9.ini(8): remove factotumopts= (not implemented), add secstore=, clarify domain name use for fs= and auth=

bootrc: keep original address when ndb/dnsgetip fails and let dial complain

bootrc: use "address" instead "ip" in wording netboot questions, as we domain names are allowed now.

merge

bootfs: remove disk/kfs fileserver, nobody uses it

bootrc: add ndb/dnsgetip resolver to bootfs so domain names can be used for fs=, auth= and secstore= (thanks mischief)

bootrc: preserve #ec/fs (thanks _sl)

ndb(8): document ndb/dnsgetip

dnsgetip: filter negative answers, remove -f flag, use dnsgetip logfile

ndb: add dnsgetip program to resolve A and AAAA records during bootstrapping

bootrc: handle multiple fs and auth addresses in netboot, always set auth= in /net/ndb

bootrc: do not pass authserver with -a flag to factotum, handle multiple secstore addresses

factotum is started in bootrc before the network is setup
(as we need it to negotiate wpa key for wifi). once, the network
is setup, the bootstrap authservers are passed in /net/ndb,
which factotum reads when doing bootstrap authdial. it does
this only when no authserver was specified earlier! but we
want net.rc to select the proper bootstrap authserver...

the $secstore variable takes precedence over $auth. as
there is no connection server yet, we have to select the set
of servers here and pass them to secstore with -s flag.
note that this will work if multiple addresses where
specified.

factotum: accept multiple bootstrap auth servers in /net/ndb and -a arguments

we might have to deal with multiple bootstrap auth server
ip addresses (ipv4 and ipv6) in the future, so deal with them.

secstore: allow multiple server addresses in $secstore and multiple -s arguments

on bootstrap, we might have to deal with multiple auth server ip
addresses (ipv4 and ipv6), so deal with it.

devsegment: fix segmentcreate function signature

merge

ethervirtio: fix queue notifications and interrupt flags, avoid useless notifications

bug: Rnointerrupt was used on Vqueue.used.flags instead of
Vqueue.avail.flags.

introduce vqnotify() function that notifies the device
about available ring advancement.

avoid queue notifications there that can be slow by
checking Unonotify flag in Vqueue.used.flags.

keep track of the number of notifications in the queue.

hgwebfs: add fake add_handler method for HTTPRangeHandler()

provide a add_handler() so code trying to add
byterange.HTTPRangeHandler will succeed. webfs
does handle "206 Partial Content" already.

ip/ipconfig: treat /32 mask as /0

some dhcp servers send a mask of 255.255.255.255 to indicate the gateway is directly routeable.

thanks to david du colombier for this patch.

ethervirtio: feature negotiation, allow setting mac address, dont read isr from ifstatus, avoid indirection

- properly negotiate Fctrlrx feature bit for promisc and multicast.
- allow setting mac address with ea= option from plan9.ini
- dont read the isr register from ifstats() as it has the side effect of reseting isr status
- embedd the Vqueue array in the Ctlr structure avoiding indirection
- add a interrupt counter Vqueue.nintr for statistical purposes
- only read network status register if the feature has been negotiated
- change name to "virtio" as "ethervirtio" is kind of redundant

ndb/dns: ignore terminating authoritative flag for no-answer when more nameservers are provided

continue recursing when we get empty but non-negative answer
from a (claimed) authoritative nameserer that provides more
nameservers.

this fixes wordpress dns:

63766.3: sending to 192.0.80.93/ns1.wordpress.com bossypally.files.wordpress.com ip
63766: rcvd OK from 192.0.80.93 (authoritative)
Q:    bossypally.files.wordpress.com ip
Auth: files.wordpress.com              5 min           ns    mdns1.wordpress.com
      files.wordpress.com              5 min           ns    mdns2.wordpress.com
      files.wordpress.com              5 min           ns    mdns3.wordpress.com
      files.wordpress.com              5 min           ns    mdns4.wordpress.com
      files.wordpress.com              5 min           ns    mdns5.wordpress.com
Hint: mdns1.wordpress.com              4 hr            ip    192.0.75.7
      mdns2.wordpress.com              4 hr            ip    198.181.117.7
      mdns3.wordpress.com              4 hr            ip    198.181.116.7
      mdns4.wordpress.com              4 hr            ip    198.181.118.7
      mdns5.wordpress.com              4 hr            ip    192.0.74.7

63766.4: sending to 192.0.75.7/mdns1.wordpress.com bossypally.files.wordpress.com ip
63766: rcvd OK from 192.0.75.7 (authoritative)
Q:    bossypally.files.wordpress.com ip
Ans:  bossypally.files.wordpress.com   5 min           ip    192.0.72.2
      bossypally.files.wordpress.com   5 min           ip    192.0.72.3
----------------------------
answer bossypally.files.wordpress.com   5 min           ip    192.0.72.2
answer bossypally.files.wordpress.com   5 min           ip    192.0.72.3
----------------------------

note the authoritative flag in the first response from ns1.wordpress.com that
would otherwise terminate the search.

ethervirtio: fix missing */

ethervirtio: implement promisc and multicast mode, cleanup

add vctlcmd() function to setup and comlete control commands.
handle Vctlq and implement promiscuous and multicast mode commands.
remove Vqueue.block[] and Vqueue.header. these are not properties
of the queue (Vctlq as no block array).

the block[] array only needs to be half the queue size as we use
two descriptors per packet.

fix broken shutdown() and remove useless ctl() function.

ethervirtio: avoid dumping packets in txproc when ring gets full

9boot(8): -from

strcat(2): fix strchr() and strrchr() function prototypes (thanks BurnZeZ)

pc, pc64: add and enable ethervirtio driver

many thanks to cinap_lenrek, erik quanstrom and david du colombier for feedback and testing.

resize: fix typo

astro: fix typo

games/md: fix interlace at scale 2

games/md: interlacing, sort of

audio(1): add mixfs to NAME section

pc, pc64: more conservative pcirouting

when we hit a conflict where the pci INTL register gives us
a different irq than we get from southbridge irq router, dont
just change the router setting to the bios assigned irq (that
was previously known as the BIOS workarround), but assume the
southbridge setting to be valid and change the pci INTL register
on the device to it.

only when the router link doesnt seem to be configured or
disabled, then program the router to the irq that bios asisgned
in the INTL register.

the reason is that changing the router setting changes the
irq routing for *all* devices on the same link and changing
it breaks previously checked and valid interrupt routings.
(so happend with virtualbox where the last device on the bus
is some powermanagement device that has wrong INTL setting
and changing the routing breaks the ethernet interrupts)

this change shouldnt affect modern machines which use ioapic
and mp tables or acpi for pci interrupt routing.

pc, pc64: preserve last KB of conventional memory (might contain bios tables)

we add new function convmemsize() that returns the size of
*usable* conventional memory that does some sanity checking
and reserves the last KB below the top of memory pointer.

this avoids lowraminit() overriding potential bios tables
and sigsearch() going off the rails looking for tables
at above 640K.

games/snes: do message display in screenproc

do the message drawing from the screenproc so there are no
race conditions with libdraw.

games/md, games/snes: fix memory leak on resize

hjfs(8): theres no chown in plan9, link to chgrp(1) manpage.

games/snes: fix extern pic declaration to match reality

games/md: apply same screen flush changes from games/snes

games/snes: flush screen in parallel to audio (fixes buffer underruns on x200s)

the x200s is too slow on a single core to keep up without
audio buffer underruns, so the idea is to flush screen
in parallel to witing audio samples in a separate process.

with the proc, we also can keep updating the screen on resize
when paused.

games/snes: save more audio state

audiohda: add pci ids for Intel 8 Series Lynx Point (thanks quux)

Based on OpenBSD driver:
- /sys/dev/pci/azalia.c rev 1.209
- /sys/dev/pci/pcidevs rev 1.1689
- only tested on amd64; machine is an Acer V5-573G
    exact model: V5-573G-74518G1Takk