 Nick Sweeting
|
de6eb649e0
disable wget timestamping if using warcs
|
hace 7 años |
|
Nick Sweeting
|
ce07a6c738
patch subprocess.run to have better timeout handling
|
hace 7 años |
|
Nick Sweeting
|
7ea36c4adb
bump timeouts and improve curl archive method
|
hace 7 años |
|
Nick Sweeting
|
c42fcd42d7
fetch warc file inline with wget instead of as separate step
|
hace 7 años |
|
Nick Sweeting
|
321cdeda11
add mirror to git clone
|
hace 7 años |
|
Nick Sweeting
|
6189b1a8af
fix invalid old config vars
|
hace 7 años |
|
Nick Sweeting
|
f83750c545
cleanup options and make cli flags better for chrome headless timeouts
|
hace 7 años |
|
Nick Sweeting
|
911b84a79b
make wget cli options easier to read
|
hace 7 años |
|
Nick Sweeting
|
b77476cb83
fix user agent quoting
|
hace 7 años |
|
Nick Sweeting
|
e8808b0a1f
add WARC downloading
|
hace 7 años |
|
Nick Sweeting
|
74189966bf
add link to media
|
hace 7 años |
|
Nick Sweeting
|
a15a331798
fix media download with longer timeout
|
hace 7 años |
|
Nick Sweeting
|
c33f7ba91c
add ability to fetch media
|
hace 7 años |
|
Nick Sweeting
|
0df098717a
make git domains configurable
|
hace 7 años |
|
Nick Sweeting
|
827e15b31a
add git downloading
|
hace 7 años |
|
Nick Sweeting
|
57d42339a4
rename pip dir archive to archivebox
|
hace 7 años |
