upas/fs: another mistake ...

upas/fs: fix broken body.ext in walk (thanks sl)

libmach: change amd64 szreg to 8 (thanks charles forsyth)

delete old NOTICE file

snap: use Mach->szaddr as the width of the stack pointer (fixes snap on amd64)

to read the value of the stack pointer register, snap
used Machdata->szreg to determine the width of the
SP register in the Ureg structure. however, the value
does not match the Ureg.sp type for a number of architectures
(mips2, amd64) and it is unclear if this was an oversight
as it is rarely used (snap is indeed the only user) or
if it was intended for a different purpose.

so we use szaddr instead which matches the stack pointer
width in the Ureg and fixes the truncated stack issue on
amd64.

snap: add debug flag, make debug less verbose

snap: check for overflows, cleanup error handling

snap: consequently use ulong for page index and count

snap: be more conservative taking stack snapshot

include up to 8k below the stack to get some more context.

don't assume stack is at least 16K.

upas/fs: keep messages *marked* for deletion in the index

upas/fs: allow msgincref() with mb->refs == 0

this can happen when the on the final sync when the mailbox
is being freed:

freembox -> mboxdecref -> syncmbox -> wridxfile -> pridx -> insurecache -> msgincref

upas/fs: checkfid() might be called with uninitialized fid, ignore

upas/fs: fix walk

upas/fs: don't enter mailbox into hashtree when it is being freed

syncmbox() used to enter the mailbox into the hash tree to
update the qid.vers. this is wrong when we are doing the final
sync before freeing the mailbox as the hash reference has already
been removed by freemailbox().

also avoid adding hash entries for mails for the about to be
freed mailbox in cachehash().

mp(2): fix spelling

mp(2): clarify mptoa() and mpfmt() default base

upas/fs: rework the refcounting, use 64bit qid path, add checks

add function to check the refcounts for Mailbox and Message on a fid

use the full 64 bit of the qid.path, so we can use the full 32 bit for the id

instead of only maintaining refcount for the top message, msgincref() now
adds a reference to all its parent messages including self and top message.
then we can check in recursive delmessage() that all the parts have a zero
refcount.

remove the Fid.mtop field, it was never used.

make sure deletion and flag changes only affect the top message.

cachefree(): only look for top message in lru. sub-parts are never
added to the cache.

use the nparts field when reading sub-part of existing message, so
that we parse the index right in case the number of parts somehow
changed.

messages marked as Deleted but still in inbox should be written
to the index.

games/md: fix mkfile

games/md: use cpu.c from blit

games/blit: clean up cpu.c and make it pass tests

pc, pc64: park application processors in rebootcode with mmu off

instead of having application processors spin in mpshutdown()
with mmu on, and be subject to reboot() overriding kernel text
and modifying page tables, park the application processors in
rebootcode idle loop with the mmu off.

vt(1): vt doesnt exit when the host process exits as claimed (thanks driusan)

cc: fix wrong "useless or misleading comparison" warning

to reproduce:

  u8int x, y;

  x = 0xff;
  y = 0xc0;
  if((s8int)(x & y) >= 0)
  print("help\n");

compiles correctly but prints a warning

warning: test.c:11 useless or misleading comparison: UINT >= 0

the issue is that compar() unconditionally skipped over
all left casts ignoring the case when a cast would sign
extend the value.

the new code only skips over the cast when the original
type with is smaller than the cast result or when they
are equal width and types have same signedness. so the
effective left hand side type is the last truncation
or sign extension.

rc: implement $"x in terms of Xdol() and new Xqw() instruction

to get $"1 right, remove Xqdol() and instead implement it in
terms of Xdol() instruction and use the new Xqw() instruction
to quote the resulting list.

devip: fix swapped tcp snd.scale and recv.scale in tcpstate() format (thanks joe9)

libdraw: avoid deadlock for mouse ioproc sending on resizec

a deadlock has been observed with samterm (thanks burnzez),
that shows the mouse ioproc being stuck in sending on the
resize channel, while the mouse consumer is stuck in a
readmouse() loop wanting a rectangle to be drawn by the
user:

recv(v=0x42df50)+0x28 /sys/src/libthread/channel.c:321
readmouse(mc=0x42df50)+0x54 /sys/src/libdraw/mouse.c:34
getrect(.ret=0x41bce0,but=0x4,mc=0x42df50)+0x62 /sys/src/libdraw/getrect.c:49
r=0x41bc70
rc=0x41bc70
getr(rp=0x41bce0)+0x24 /sys/src/cmd/samterm/main.c:244
p=0x6b000004f6
r=0x2
sweeptext(new=0x0,tag=0x2d)+0x12 /sys/src/cmd/samterm/menu.c:208
r=0x2
t=0x42df50
inmesg(type=0x2,count=0x2)+0x1ab /sys/src/cmd/samterm/mesg.c:136
m=0x10000002d
l=0x2d00001b00
i=0x43829000000001
t=0x438290
lp=0x42e050
rcv()+0x7a /sys/src/cmd/samterm/mesg.c:77
threadmain(argv=0x7ffffeffef90)+0x173 /sys/src/cmd/samterm/main.c:63

so avoid blocking in the mouse ioproc by using nbsend()
instead of send() for writing to the resize channel.

devbridge: fix runt packets going through the bridge (thanks cinap)

linux will send small, unpadded arp packets which may arrive over
wifi, so allow small packets into the bridge and pad any packets that
are too small when going out.

games/c64: make keyboard table more readable

ether82563: ignore i82753 checksums, fixes T60 ethernet

nusb/kb: multitouch support (touchscreens, stylus)

touchscreens signal multiple contact points (X/Y) in
the hid descriptor separated by being nested in separate
collections. the contact point is identified by a
optional contact id. if omited, we use the collection
index and report id.

so we collect all the items (X/Y, buttons, wheel) from
separate collections in Hidslot structures and in the
end combine all the slots together.

buttons are or'ed together while absolute X/Y is applied
when it changed. relative X/Y deltas get added together.

thanks to kivik and Glats for testing.

rcpu: fix pvar to initialize empty variables (thanks mycroftiv)

nusb/kb: revert multitouch, breaks some mice...

upa/imap4d: ignore messages without digest info

disk/mkfs: remove unused cputype variable (thanks kvik)

merge

nusb/kb: lilu dallas multitouch

add dtracy to mkfile

add dtracy.h

dtracy: missing break in dteverify

adding dtracy (crude early version)

ssh: handle unknown MSG_CHANNE_REQUEST messages

ssh: handle MSG_GOBAL_REQUEST

respond to MSG_GLOBAL_REQUEST with MSG_REQUEST_FAILURE
as stated by rfc4254 when server wants a reply.

failing todo so breaks some proprietary keep-alive schemes.

ip/dhcpd: Add swap server support in dhcpd (thanks k0ga)

bcm: intrenable() can happen from any cpu in case of dma interrupts

libdraw: cannot happen

libdraw: fix gengetwindow()

- fix fd leak in winname read() <= 0 case
- avoid freeing d->image (was by freeimage((*scrp)->image))
- dont leak screen and window in fullscreen mode

bcm: cleanup timer code

- calculate hardcoded constants for more clarity
- avoid unneccesary modification of cntpns ctl register
- revert enabling IRQcntpns for cpu0
- remove unused Localintpending register offset constant

bcm: simplify irq handling by having per cpu Vctl chain

bcm: speed up co-processor operations by avoiding i+d cache flush on each operation

coproc.c generated the instrucitons anew each time,
requiering a i+d cache flush for each operation.

instead, we can speed this up like this:

given that the coprocessor registers are per cpu, we can
assume that interrupts have already been disabled by
the caller to prevent a process switch to another cpu.

we cache the instructions generated in a static append
only buffer and maintain separate end pointers for each
cpu.

the cache flushes only need to be done when new
operations have been added to the buffer.

nusb/serial: fix wrong guard statement (thanks deuteron)

merge

dnstcp: temporarily switch on resolver mode so we can resolve the dnsslaves for axfr check

sed: only dollars as first address are a problem for -u

rio(1): fix typo

mp(2): document mpfactorial

libmp: declare mpfactorial

merge

libaml: allow amlmapio() to re-enter the interpreter (can happen by pciadd() -> amleval())

- make frame base pointer variable
- in rwreg(), save/restore the interpreter state and allocate a Frame* on the stack
- add overflow checks for frame base pointer to xec() and amleval()
- gc() scans the whole stack from FP to the *real* bottom F0

devvmx: remove bogus . direntry

bcm: fix mysterious core clock resets under SMP (thanks richard miller)

reference: https://github.com/raspberrypi/firmware/issues/542

procsave(Proc* p)
{
uvlong t;

cycles(&t);
p->pcycles += t;

// TODO: save and restore VFPv3 FP state once 5[cal] know the new registers.
fpuprocsave(p);
/*
 * Prevent the following scenario:
 * pX sleeps on cpuA, leaving its page tables in mmul1
 * pX wakes up on cpuB, and exits, freeing its page tables
 *  pY on cpuB allocates a freed page table page and overwrites with data
 *  cpuA takes an interrupt, and is now running with bad page tables
 * In theory this shouldn't hurt because only user address space tables
 * are affected, and mmuswitch will clear mmul1 before a user process is
 * dispatched.  But empirically it correlates with weird problems, eg
 * resetting of the core clock at 0x4000001C which confuses local timers.
 */
if(conf.nmach > 1)
mmuswitch(nil);
}

bcm: fix mistake in mkfile

bcm: fix /dev/reboot text/data corruption (thanks richard miller)

- clean dcache before turning off caches and mmu (rebootcode.s)
- use WFE and inter-core mailboxes for cpu startup (rebootcode.s)
- disable SMP during dcache invalidation before enabling caches and mmu (in armv7.s)

awk(1): fix append operator to avoid truncating file

bcm: provide /dev/cputemp in a format stats can understand

merge

bcm: simplify reboot code

- synchronize rebootcode installation
- handle the 1MB identity map in mmu.c (mmuinit1())
- do not overlap CONFADDR with rebootcode, the non boot
  processors are parked there.
- make REBOOTADDR physical address

bcm: cleanup clock code

- disable local clock on interrupt to prevent accidents when reenabling
- always regitster local clock interrupt handler, even for cpu0
- simplify microdelay()
- don't mess with watchdog

bcm: fix l2 cache maintenance routines for raspi3 (armv8)

armv8 has 16-way l2, so adjust shift for the set-way cache
tag format.

misc small manpage fixes

devuart: don't sleep in uartdrainoutput() when called splhi or without a process

uartdrainoutput() might be called in early initialization
from uartctl() without a process.

rc: skip searchpath for "", "." and ".."

rc: use searchpath() logic to handle $cdpath

rc: ignore $cdpath for # device rooted paths (thanks kivik)

add Centrino Wireless-N 1030 (thanks lksmk from brazil)

/sys/lib/dist/mkfile: add pi.img target for raspi sdcard image

add /sys/src/boot/bcm/mkfile to download raspberry pi bootcode firmware

nusb/serial: add support for CH340 serial converter

merge

kbdfs: don't get confused by broken utf8

doom: fix music for patch wads

revert last change, which used games/wadfs to expose genmidi and music lumps.
replacements from patch wads were never seen that way.  instead, write genmidi
and music lumps to /tmp and play them from there.

acme: fix fd checks - initialize Window.rdselfd to -1 not 0

fix misleading/wrong fd checks

libdisk: catch null bytes in proto file, fix memory leaks

nusb/kb: work arround broken split transaction on raspi's dwc otg usb controller

bcm: import changes for raspi2/3 from richard miller

nusbrc: support for raspi3 ethernet

kernel: fix allocb for BLOCKALIGN*2 >= Hdrspc

devusb: use Enotconf[] string constant

nusb/ether: add support for lan78xx (raspi3) (thanks richard miller)

nusb/ether: tune buffer size parameters for SMSC ethernet (raspi) (thanks richard miller)

upas/fs: delete extra binaries

truetypefs(4): fix example path

kbdfs(8): fix nit

ttf: SHZ also uses 0x36

libttf: add SHZ[] instruction

libttf: dont unset LOOP in SHC

nusb/disk: also drive usb attached scsi devices

nusb/joy: update misleading comment (thanks Tobias Heinecke)

libttf: instruction 0x24 is DEPTH, not CLEAR

libdisk: back out last change