upas/common: deliver mail to mdir as .tmp file and rename after it has been fully written

theres a race condition when mail delivery to mdir is slow,
then upas/fs sees partial mail file and caches the truncated
file size.

to avoid this, delivery will create the new mail file with
the .tmp extension (which is ignored by upas/fs) and after
everything has been written, rename it to the final name.

kernel: avoid waserror() botch in devwalk (from drawterm, thanks aiju)

calculate alloc flag before waserror(), as compilers like
gcc will not notice the value changing later because
setjump() restores the old value due to callee-saves.

change is applies here to make it easier to merge with
drawterm.

thanks to aiju for debugging this; used to cause drawterm
memory leak until compiled with gcc -O0.

kernel: fix memory leak in checkpagerefs() debug function (thanks aiju)

tlshand: simplify tlsReadN()

tlshand: fix mpint to bytes conversion, reorganize send/recv buffer, check for overflow in msgSend()

when converting mpint to bytes, always pad it to the size of
the modulus (RSA,DHE,ECDHE). mptobytes() now takes a byte len
parameter which the caller usually calculates from the group
modulus using mpsignif(). this bug sometimes caused "bad record mac"
after the handshake.

use a shared buffer, given that msgSend()/msgRecv() don't overlap
we can use the first half for sending, and the top half for
receiving, shifting down as neccesary. the space beween sendp and
recvp is free.

explicitely check for overflow in msgSend().

merge

tlshand: fix ECDHE and DHE for SSLv3

fix typo in 9p(2) manpage

devvga: remove unused copy of checkport() function

devvga: fix mistake

devvga: include hwgc in vgactl file

aux/wpa: go to background when not prompting, handle open networks

pc(1): fix memory leak and add clog() function

nusb/lib: make usbcmd() return value symmetic; returning size of data phase (if any) (thanks aiju)

usbcmd() with Rh2d used to return the command size (8+ndata) wile returning
only ndata for Rd2h. this changes it to always return ndata for Rh2d. it
mostly doesnt matter as Rh2d callers only check r < 0 for error, but this
makes the interface symmetic.

hjfs: avoid 8c "non-interruptable temporary" warning

chgrp: remove unused function declaration (thanks archeus)

games/blit: remove strange debugging line

ndb/dns: double Maxretries for long cname redirection chains

nusb/serial: pl2303: better error handling

merge

sdnvme: enable in pcf, pccpuf, pc64 kernel configuration

sdnvme: don't write completion queue doorbell register when nothing has been processed

turns out on real hardware, the front falls off if we write
the completion queue doorbell registers without consuming
an entry. so only write the register when we have processed
something.

hjfs: disable hjfs check until more functionality is complete

hjfs: improve error messaging around blocks that are not found

hjfs: Fix bugs in ref count scan check. Enable as a console command (caveat: command arguments will change as I implement more functionality)

move blit roms to /sys/lib/blit

blit: fix mkfile

kernel: fix twakeup()/timerdel() race condition

timerdel() did not make sure that the timer function
is not active (on another cpu). just acquiering the
Timer lock in the timer function only blocks the caller
of timerdel()/timeradd() but not the other way arround
(on a multiprocessor).

this changes the timer code to track activity of
the timer function, having timerdel() wait until
the timer has finished executing.

sdnvme: NVMe controller driver (work in progress)

basic NVMe controller driver, reads and writes work.
"namespaces" show up as logical units.
uses pin/msi interrupts (no msi-x support yet).
one submission queue per cpu, shared completion queue.
no recovery from fatal controller errors.
only tested in qemu (no hardware available).

commiting this so it can be found by someone who has
hardware.

games/blit: mkfile: install into /bin/games

add games/blit

hjfs: fix broken dprint

hjfs: simplify dprinting

hjfs: add simple scan check of directory entry blocks

hjfs: check: check a block if its ref count is _not_ zero. Also check all the ref counts of blocks of a directory and clean up messages

various fortune corpuses: Nil means nothing.

hjfs: merge start of hjfs check implementation

hjfs: start implementation of checking a directory

devsd: handle case where theres no ifc->enable() function

merge

devsd: check return value of ifc->enable(), don't leak unit name/user strings

sdvirtio: return 1 for success in vioenable()/viodisable()

file(1): recognise Xilinx bitstreams

games/galaxy: fix exit race condition by pausing the galaxy before threadexitsall

hjfs: Add comment to change the OFF size to 8 when given the chance

games/galaxy: parallelize gravitational force calculations

Once the Barnes-Hut tree is constructed, the gravitational
force calculations can be done in parallel by dividing the
bodies up between a number of procs.

pc kernel: handle PCMP and RSD being in low (kaddr) or reserved (vmap) memory

on thinkpad x1v4, the PCMP structure resides in upper reserved memory
pa=0xd7f49000 - while system memory ends at 0x0ffff000; so we have to
vmap() it instead of KADDR().

the RSD structure for ACPI might reside in low memory, so we sould
KADDR() in that case.

upas/smtp: fix cram-md5 auth, simplify doauth(), check varargs for dBprint()

- smtpcram() was replying with the challenge instead of the response... m(
- simplify doauth, use error string for auth_getuserpasswd() error logging
- enable #pragma varargck for dBprint()

upas/smtp: generate 128-bit random message id (was 32 bit), use dBprint(), cleanup unused variables

plumb(2): Fix typo in description of Plumbdelattr (thanks sam-d)

webfs(4): timeout is in milliseconds not seconds (thanks sam-d)

upas/smtp: Revert smtp dial string behavior to match that of old upas (thanks sam-d)
Also do some cleanup around buffers and memory management

[012568kqv]a: correctly lex full range of integers in the assemblers (thanks Ori_B)
The Plan 9 assemblers use strtoll to parse the integer literals
in their input. It turns out that this is almost correct, but
VLONG_MIN is clamped. This patch changes to use strtoull
in order to allow the full range of integers.

remove accidentally commited binary /sys/src/cmd/upas/fs/chkidx file (thanks mischief)

hjfs: Clear all refs to zero when reaming.
And a couple clarity/formatting changes

ip/torrent: exit immidiately when file is complete after verification and not being in seed mode

ip/torrent: avoid peerid collision using truerand() instead of time(0)

fortune: avoid buffer overflow for lines >= 2K, make sure index has at least one entry, use nrand()/ntruerand() for uniform distribution

5l,6l,8l,kl,ql,vl: allow duplicate GLOBAL symbols (from Ori Bernstein)

The plan 9 assemblers support the DUPOK flag on text symbols. They parse and
ignore it on GLOBL symbols. This patch makes it work in the linkers.

The reason I ran into this is because my programming language (Myrddin) uses
data symbols to generate type information, and it's useful to avoid
duplicating all of the type info in every file that gets generated.

inst: make command window not overlap stats window in glendas riostart

cdproto: make mdir for glenda

diskparts(8), prep(8): add edisk in NAME section

mus(1): fix manpage references

vga(3): complete list of vga controllers and software cursors

devmouse: refactor screen blanking logic

devmouse controls the screen blanking timeout, so move the
code there avoiding cross calls between modules. the only
function that needs to be provided is blankscreen(), which
gets called with drawlock locked.

the blank timeout is set thru /dev/mousectl now, so kernels
without devvga can set it.

blanking now only happens while /dev/mouse is read. so this
avoids accidentally blanking the screen on cpu servers that
do not have a mouse to unblank it.

games/doom: don't spawn midi process when opening /dev/audio failed (thanks qwx)

tapefs: handle more cpio formats (thanks qrstuv)

upas/fs: tls sni support for pop3/imap

upas/fs: fix memory leaks in tls code, handle tls in a common wraptls() function

upas/fs: getting rid of the fine-grain locking...

now that locking works, its time to get rid of it.
given that the only concurrency is between the periodic reader
process and the filesystem code, just make sure the filesystem
rpc handlers do not run concurrenty while syncing is in progress
with a single qlock.

upas/fs: more cleanup...

upas/fs: remove more debugging crap

upas/fs: remove unused segbrk memory allocator

upas/fs: remove idx semaphore, cannot happen as symcmbox() always called with mailbox locked

upas/fs: fix more locking bugs, remove debugging clutter, remove planb mbox code

upas/fs: make sure mbox is locked during msgdecref() in rclunk()

gs: validate parameter is dict in .initialize_dsc_parse

gs bug 697190, upstream commit 875a0095

also check gs_alloc_struct return value from upstream commit a2afc66d

gs: check for sufficient params in .sethalftone5

ghostscript bug 697203, upstream commit f5c7555c303

gs: fix dangleing pointer crash with "lock" (ghostscript Bug 697204)

games/galaxy: fix creation of new bodies
I accidentally deleted the line that sets the initial
position of the vector

games/galaxy: avoid unnecessary calculations
It is not necessary to recalculate the center of the
screen every time.

games/galaxy: fix zoom

Zooming when far away from the center of gravity
of the galaxy would zoom the center of the screen
out of view. Now adjust the origin so that the
center of the screen stays centered

upas/fs: lock mbox in syncallmboxes() to avoid assert crash

upas/fs: remove useless syncsem, make sure mbox is locked when fetching / syncing

imap4d: simplify auth with encodefmt (backport from 9front)

nupas: delete okcidr(); always trust spf records

send(8): document new reject behaviour with -r flag

add mdir(6), splitmbox(8) and update upasfs(4)

merge

change listener from ip/imap4d to upas/imap4d

merging erik quanstros nupas

merge

kernel: get rid of active.Lock and active.thunderbirdsargo

pc kernel: give cpu servers as many image cache strctures as processes

pc kernel: avoid AP's spinning in syncclock(), don't wait for thunderbirdsargo

pc kernel: assume tsc and lapic clock rate on application processors is the same as on bootrap processor

pc kernel: don't use active.thunderbirdsargo in vunmap() tlb flush code

teg2: fix format string warning in mmu.c

games/galaxy: simplify zoom loop

games/galaxy: new mouse behavior
MB1 moves the galaxy. MB2 zooms the galaxy. New body creation
moved to the menu