Articles of wget

¿Cómo combinar las opciones '-i file' y '-O filename' de wget?

wget se puede alimentar con -i inputFileURLList y también puede usar un nombre de file personalizado con -O customArbitraryFileName . ¿Cómo puedo combinar estas dos capacidades para que lo alimente con un file que contenga una list URL con un nombre de file personalizado para cada una?

Wget Regex no consigue files por ftp

Desde el sitio ftp://atmos.nmsu.edu/PDS/data/mslrem_1001/DATA/ Quiero download los files que terminan en .TAB y tener el nombre RMD para todos los soles. Para eso probé el siguiente command: wget -r -nd –accept-regex '.*(RMD)\d+\_+[AZ][0-9]\.(TAB)' ftp://atmos.nmsu.edu/PDS/data/mslrem_1001/DATA/SOL_00001_00089/SOL00010/ La url es diferente solo para probarlo. El problema es que wget ignora la expresión de expresiones regulares y descarga todos los […]

wget en Centos 7 Terminal cómo download solo text sin código de estilo de website

sudo wget -O /home/KrypticRelic/Desktop/DefaultAccess.txt phenoelit.org/dpl/dpl.html Esto imprime una cantidad significativa de relleno para el text real que me gustaría. Ex. <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01//EN"> <html><head><title>Default Password List</title></head> <body bgcolor="#000000" link=#FF6600 vlink=#CC6600 alink=#FFFF00 text=#FF9900 > <CENTER><H1>Default Password List</H1><h2>2007-07-03 </h2> <TABLE FRAME=VOID CELLSPACING=0 COLS=47 RULES=NONE BORDER=0> <COLGROUP><COL WIDTH=177><COL WIDTH=348><COL WIDTH=472><COL WIDTH=292><COL WIDTH=150><COL WIDTH=399><COL WIDTH=429><COL WIDTH=841><COL […]

Hacer todas las URL en una página absoluta desde la línea de command

Me gusta usar curl y la línea de command para procesar páginas html. Las URL relativas son un dolor. ¿Existe alguna utilidad sencilla para hacer que todas las URL relativas sean absolutas? Idealmente, esto se vería como curlabsolute $URL | process

¿Cómo recuperar información de precios de www.meinfluessiggas.de en un script bash?

En https://www.meinfluessiggas.de hay que hacer clic en un button de tamaño de tanque (sección "Behältergröße") y completar un código postal (sección "PLZ Behälterstandort") para que el precio aparezca a la derecha. Quiero automatizar esto en un script bash pero me cuesta recuperar la información correcta: wget https://www.meinfluessiggas.de carga el origen de la página correctamente, pero […]

Wget no funciona para download todos los enlaces de una página web

Quiero download todos los files pdf en este website: http://www.math.utsc.utoronto.ca/b41/ El command que ejecuto es: wget -r -A "*.pdf" "http://www.math.utsc.utoronto.ca/b41/" Sin embargo, si va al website, hay una pestaña de "asignaciones", que tiene asignaciones del 1 al 10, ¿no las descarga por alguna razón? Todavía está en el mismo dominio, http://www.math.utsc.utoronto.ca/b41/a*.pdf , donde 1 <= […]

¿Cómo hacer una descarga recursiva con gwget (wget frontend)?

Usualmente ejecuto wget con las opciones -np -r , pero no incluye una vista previa del tamaño de la queue, así que estoy revisando el wget interfaz wget (en debian). No puedo hacer funcionar la opción recursiva; ¿Alguien sabe cómo hacerlo?

Por qué Curl -O -C en Mac no se puede download

La siguiente secuencia de commands funciona en Ubuntu, pero no en Mac. ¿Por qué? ¿Cómo editarlo para que funcione allí también? #!/bin/sh v=1.1 test_file="Test10.java" jar_file="dp4j-$v-jar-with-dependencies.jar" curl -O "http://repo2.maven.org/maven2/com/dp4j/dp4j/$v/$jar_file" # Start cat > $test_file << __EOF__ class T10 { private static void p(int i, Double d, String… s){} } public class Test10{ @com.dp4j.InjectReflection public void t() […]

reproducir files mp3 tan pronto como se descarguen

¿Cómo combinas estos dos commands diferentes en un solo script? $ wget http://mymusic.store.com/musicfoo.mp3 #file gets saved as musicfoo.mp3 $ mplayer musicfoo.mp3 wget intenta save el file en el disco con el nombre / extensión pnetworkingeterminado del file (como en Internet) … en mi caso, el file mp3 … mplayer usa este file como argumento para […]

Después de download un file .asp o .php, ¿se puede convertir a un file .html?

Me pregunto si la descarga de files a través de wget y tenerlos nombrados .asp o .php significa que descargo la página web. ¿No son estos files ejecutables? Si es así, después de download un file .asp o .php , ¿se puede convertir a un file .html ?