src/etc/mirror-all-snapshots.py

   1 #!/usr/bin/env python
   2 #
   3 # Copyright 2011-2013 The Rust Project Developers. See the COPYRIGHT
   4 # file at the top-level directory of this distribution and at
   5 # http://rust-lang.org/COPYRIGHT.
   6 #
   7 # Licensed under the Apache License, Version 2.0 <LICENSE-APACHE or
   8 # http://www.apache.org/licenses/LICENSE-2.0> or the MIT license
   9 # <LICENSE-MIT or http://opensource.org/licenses/MIT>, at your
  10 # option. This file may not be copied, modified, or distributed
  11 # except according to those terms.
  12
  13 import os
  14 from snapshot import *
  15
  16 f = open(snapshotfile)
  17 date = None
  18 rev = None
  19 platform = None
  20 snap = None
  21 i = 0
  22
  23 for line in f.readlines():
  24     i += 1
  25     parsed = parse_line(i, line)
  26     if not parsed:
  27         continue
  28
  29     if parsed["type"] == "snapshot":
  30         date = parsed["date"]
  31         rev = parsed["rev"]
  32
  33     elif rev is not None and parsed["type"] == "file":
  34         platform = parsed["platform"]
  35         hsh = parsed["hash"]
  36         snap = full_snapshot_name(date, rev, platform, hsh)
  37         dl = os.path.join(download_dir_base, snap)
  38         url = download_url_base + "/" + snap
  39         if (not os.path.exists(dl)):
  40             print("downloading " + url)
  41             get_url_to_file(url, dl)
  42         if (snap_filename_hash_part(snap) == hash_file(dl)):
  43             print("got download with ok hash")
  44         else:
  45             raise Exception("bad hash on download")