sgi: new approach for etherseeq

touching transmit descriptors while dma is running causes the
front to fall off. new approach keeps a counter of free
descriptors in the Ring structure that is incremented
by txintr() when transmit completed.

txintr() will clean descriptors once dma has stopped and
restart dma when there are more descrtors in the chain.

sgi: work in progress kernel for sgi mips machines (only tested with r5k indy)

this provides basic console support using the ARC bios routines
theu uartarcs driver. and has native seeq ethernet driver which
was written by reading the 2ed devseq driver as i have no
documentation on the hardware. mmu and trap code is based on the
routerboard kernel.

mothra: remove unused confirmcurs; move confirmcursor up with the other cursors.

fortunes: TED, day 1: I want to believe -- WIRED magazine

pc, pc64: state dependency to usbehci.h in mkfiles

mpdigdiv.s: aaaaand its gone!

ape: fix main9 for mips

libmp: use portable mpdigdiv routines for mips (causes invalid instruction trap on indy)

ape: fix lockinit() for mips

zynq: fix out of bounds access in etherprobe()

calling etherprobe() with -1 cardno will rereference
and call cards[-1].reset() which is wrong. don't do that!

boot: allow alternative proto files per kernel and kernel config for bootfs.paq

bootmkfile will now looks for the following proto files in order
and pick the first one it finds to build the bootfs.paq file:

1) $CONF.boofs.proto (config specific)
2) bootfs.proto (kernel specific)
3) $BOOTDIR/bootfs.proto (default generic)

vc: fix coffsect.lnno overflow into nreloc

the coffsect.lnno field is 16 bit and can overflow into
the nreloc field confusing arc firmware on load. just
mask it to prevent overflow.

ircrc: remove unused clonefile

boot: bind #c to /dev with MREPL instead of MBEFORE to avoid double entries

vl, libmach, kernel: mips has 16K alignment for segments (for bigpages)

merge

usbohci: ensure Ed and Td alignment, fix for amd64

merge

db: fix unicode support (thanks giacomo)

from the unicode-db patch readme:

command() receives a char* that is assigned to lp, which is a Rune*,
and lp is incremented later in readchar(), so each read consumed 4 bytes.
The only time command() is called is in runpcs() with bkpt->comm,
which is a char* built in subpcs through a char*, so the string stored in
bkpt->comm was not a Rune string. A way to test the bug is:

db program
main:b argv/X
:r

pushtls(2): tls.h -> libsec.h (thanks, pr)

dhcpd: ignore ";" filename from sgi arcs bootp(); command

libmach: use #pragma pack to force 4 byte alignment of bootexec.h structures for amd64

ape: silence compiler "no return at end of function" for mips lock.c

merge

6c: MOVL xxx, r; MOVLQZX r, r -> MOVL xxx, r

eleminate MOVLQXZ instructions after MOVL as MOVL implicitely
zero extends the result.

ssam: fix typo

ssam: don't pollute the environment.

mp(2) man page: mpinvert, not mpinverse (thanks, pr)

kernel: get rid of auxpage() and preserve cache index bits in Page.va in mount cache

the mount cache uses Page.va to store cached range offset and
limit, but mips kernel uses cache index bits from Page.va to
maintain page coloring. Page.va was not initialized by auxpage().

this change removes auxpage() which was primarily used only
by the mount cache and use newpage() with cache file offset
page as va so we will get a page of the right color.

mount cache keeps the index bits intact by only using the top
and buttom PGSHIFT bits of Page.va for the range offset/limit.

kernel: avoid repeated calls to reclaim(), dont miss last page in Pte

when we are skipping a process because we could not acquire
its segment lock, dont call reclaim() again (which is pointless
as we didnt pageout any pages), instead try the next process.

the Pte.last pointer is inclusive, so don't miss the last page
in pageout().

rsa(8): recommend secstore(1) for Plan 9 RSA private key storage

mothra: <del>, <ins>, <wbr>

mothra: add <strike> support

boot: disable group/other permission checking in bootfs paqfs

when building bootfs in d770 mode directory, the other permissions
in bootfs paq are masked off which results in boot to fail. theres
no point in checking group/other permissions on boot, so just disable
permissin checking in paqfs with the -a flag.

doom: print correct version number on mismatch (thanks qu7uux)

webfs: do not send credentials in automatic referer url

rc-httpd: support for http basic authentication, fix cgi support to work with hgweb.cgi

httpauth: little helper for rc-httpd to do http basic authentication with plan9 auth server

hg, python: remove proto files

hg: install hgweb templates

pemencode: handle base64 input length < 3, fix bogus zero termination

imap4d: simplify auth code using encodefmt(), use readn() to get multiple of 3*18 in base64 input buffer

webfs: simplify http basic auth code by using encodefmt()

upas/marshal: deduplicate cistrcmp()/cistrncmp()/enc64()

use the libc versions of these routines avoiding
code duplication.

ndb/dns: reduce sencodefmt() to not link in enc32()/enc64() encoders

the special sencodefmt() in ndb/dn.c is only used with %H format for
hexadecimal printing for binary strings. removing the unused
calls to enc32() and enc64() reduces the code size by arround 4K.
(this is usefull for ndb/getip which gets linked into the kernel).

encode(2): clarify lim argument to enc*(), add SOURCE reference for encodefmt()

merge

smtp, smtpd: fix use of enc64(), fix memory leaks in doauth()

the approximation of n*2 to calculate the number of output bytes
for enc64() fails for inputs of size < 3. this is fixed by using
encodefmt() which gets the calculation right and also simplifies
the code avoiding the allocation and freeing of intermediate string
buffers.

netaudit: comment file server auth test (unreliable on cwfs)

gif: fix color table clipping (for cb5.gif)

factotum: remove unused extern declarations of invoker and authdom from header

kernel: fix integer overflow in syssegflush(), segment code cleanup

mcountseg(), mfreeseg():
use Pte.first/last pointers when possible and avoid constructs
like s->map[i]->pages[j].

freepte():
do not zero entries in freepte(), the segment is going away and
here is no point in zeroing page pointers. hoist common code at
the top avoiding duplication.

segpage(), fixfault():
avoid load after store for Pte** pointer.

fixfault():
return -1 in default case to avoid the "used but not set" warning
for mmuphys and get rid of the useless initialization.

syssegflush():
due to len being unsigned, the pe = PGROUND(pe) can make "chunk"
bigger than len causing a overflow. rewrite the function and deal
with page alignment and errors at the beginning.

syssegflush(), segpage(), fixfault(), putseg(), relocateseg(),
mcountseg(), mfreeseg():
keep naming consistent.

wpa(8): the -p flag will also prompt for user/password on wpa enterprise

pushtls(2): fix signature to TLSconn.trace()

webfs: implement CONNECT method for https connections over proxy

when using a http proxy, establish secure tls connection to the
other end with the CONNECT method so the proxy.

theo: OpenBSD is not generally known as an exposed democracy.

g: search .awk and .rc files

gs: fix bug 694539. Reading off the end of the cbuf when dash pattern len is max

kernel: catch address overflow in syssegfree()

the "to" address can overflow in syssegfree() causing wrong
number of pages to be passed to mfreeseg(). with the current
implementation of mfreeseg() however, this doesnt cause any
data corruption but was just freeing an unexpected number of
pages.

this change checks for this condition in syssegfree() and
errors out instead. also mfreeseg() was changed to take
ulong argument for number of pages instead of int to keep
it consistent with other routines that work with page counts.

snap: fix readseg() to cope with > 2gb segments

merge

zynq: sdio support

devsd: always page align sd buffers

sdbio() tests if it can pass the buffer pointer directly to
the driver when it is already in kernel memory. we also need
to check if the buffer is properly aligned but alignment
requirement is handled in system specific sdmalloc() and
was not known to devsd.

to solve this, we *always* page align sd buffers and get rid
of the system specific sdmalloc() macro (was only used in bcm
kernel).

zynq: do mpinit() early so cpu1 debug prints do not intermix

merge

set /mail/tmp permissions world writable in cdproto

zynq: fix usb by implementing delay() and give proper port speed in portstatus

col(1): add SOURCE (thanks, qrstuv)

libthread: get rid of chaninit() (thanks qrstuv)

chaninit() does not initialize Chan.qentry and Chan.nentry
and there is no way to get rid of such a channel. nobody is
using it, so removing the function to avoid confusion.

kernel: fix physical segment handling

ignore physical segments in mcountseg() and mfreeseg(). physical
segments are not backed by user pages, and doing putpage() on
physical segment pages in mfreeseg() is an error.

do now allow physical segemnts to be resized. the segment size
is only checked in segattach() to be within the physical segment!

ignore physical segments in portcountpagerefs() as pagenumber()
does not work on the malloced page structures of a physical segment.

get rid of Physseg.pgalloc() and Physseg.pgfree() indirection as
this was never used and if theres a need to do more efficient
allocation, it should be done in a portable way.

libdraw: font->display->defaultsubfont vs. display->defaultsubfont, dead code, malloc erros

it is possible to have fonts belong to different or no display, so the
check for defaultsubfont has to be against font->display, not the global
display variable.

remove unused freeup() routine.

handle strdup() error in allocsubfont() and realloc() error in buildfont().

devmnt: remove unused mntstats fields from Mntrpc

factotum: cleanup getnvramkey()

- remove secstore password code, it is not used anymore.
- zero the Nvrsafe structure on the stack before returning.
- use smprint(), can't overflow.

libdraw: use multiple read() calls in openfont() to read .font file

font files might be bigger than the i/o unit, so do multiple reads
until eof to read it.

libdraw: use readn() to read headers and Fontchar array

the Fontchar array might be bigger than the i/o unit,
so we have to use readn() to properly read it.

6c: fix missing memset in Bconv()

thread(2): remove another instance of /mnt/temp

libthread: remove unused internal functions and old xinc assembler files

libthread: use devdup instead of mounting pipe to /mnt/temp for close-on-exec in procexec()

the namespace might be shared by other processes. instead, we
create a anonymous pipe with pipe() and use devdup to open one
end close-on-exec. this is shorter and avoids the race condition.

do not touch Execargs after writing the error message as the
process might be gone after the write. this was to manually
close the fd which isnt neccesary as the kernel will do it
for us on the following exit.

leak: report alloc size mismatch

pool: maintain Pool.curalloc for poolallocalign() and blockgrow()

blockgrow() and poolallocalign() change the size of
allocated blocks which needs to be accounted for
in Pool.curalloc.

fortunes: My recent incompetence is humbling.  I should quit the industry.

aux/vga: dont error when vesa setscale fails after modeset (thanks rx9p for reporting)

kbdfs: work arround qemu

qemu does not send e0 escape for gray (arrow) keys, no matter
the numlock state. as a work arround, we assume gray key when
numlock is not active.

libdraw: check fontchar count in openmemsubfont() and readsubfont()

libdraw: cleanup getsubfont()

webfs: check $httpproxy and error when its bogus

the httpproxy environment variable needs to be a url as stated
in the manpage, so give an error when it isnt.

merge

jpg: handle progressive non-interleaved mode

merge

gs: backport 16MB string support

restore balance to reality

io(1), seg(1): add HISTORY section to man pages (thanks, jpm_)

devusb: check for nil hp->dump and hp->seprintep

pc, pc64: simplify intrdisable()

devusb: fix debug ctl nil crash

gs: backport aes support for pdf-1.6

gs: work arround broken xref table pdfs

rebuilding the xref table does not work for pdfs with
compressed object streams. as a work arround, we skip
xref table verification and ignore wrong xref gen #
for gen 0 objects.

pc, pc64: fix intrdisable() MaxIrqLAPIC -> MaxVectorAPIC (thanks mischief)

6c: eleminate more MOV instructions

convert:

x = B || W
MOVxLZX a, r; MOVxQZX r, b -> MOVxQZX a, r; MOVQ r, b
MOVxLSX a, r; MOVxQSX r, r -> MOVxQSX a, r; MOVQ r, r

the MOVQ can then be eleminated by copy propagation.

improve subprop() by accepting other mov and lea
instructions as the source op.