else:
return("fin")
# Script de prueba para lanzar las llamadas a las funciones
nombre = sys.argv[2]
accion = sys.argv[1]
filas = []
listaImagen = []
listaEnlace = []
listaOtros = []
if accion == "-s":
print("buscar: ", nombre, " en la web")
salida = htmler.generabase()
enlace = web.getUrl(nombre)
texto = enlace[1]
server = enlace [0]
print("Texto", texto)
filas = cadena.extrae(texto)
for fila in filas:
t2 = beautifuler.arregla(fila, server)
if t2[1] == 'link':
listaEnlace.append(t2[0])
elif t2[1] == "linx":
listaEnlace.append(t2[0])
elif t2[1] == "img":
listaImagen.append(t2[0])
else:
listaOtros.append(t2[0])
print("Lista de salidas")
def tejer(inicio, profundidad, nivel, opcion):
# Crear tabla de control del ciclo. Borramos primero, por si ya existe.
print(sqlfile.borraTabla())
print(sqlfile.creaTabla())
# Tabla cicle: Direccion, tipo de enlace, indicador pendiente-visto (1,0), contador llamadas
# Inicializa las listas
listaEnlaces = []
listaPendientes = []
listaPendientes.append(inicio)
listaEnlaces.append(inicio)
sqlfile.insertaCount(inicio, "link",1,1)
# Operativa por cada nivel
n = 0
while n < profundidad:
print("Cargo lista pendientes")
listaPendientes = sqlfile.consultaPendientes()
print("Lista Pendientes:", listaPendientes)
for reg in listaPendientes:
print("Busco el registro en la web:", reg)
t1 = web.getUrl(reg)
serv = t1[0].rstrip()
lineas = cadena.extrae(t1[1])
print("Obtengo los enlaces:", lineas)
for linea in lineas:
t2 = beautifuler.arregla(linea, serv)
dire = t2[0].strip()
tipo = t2[1]
if dire != '0':
niv = cadena.contarCaracter(dire, '/')
num = sqlfile.consultaCount2(dire)
print("Si existe actualizo contador, si no inserto", num, dire)
if num > 0:
num = num + 1
sqlfile.actualizaCount2(dire, num)
else:
if tipo == 'link' or tipo == 'linx':
if niv <= nivel:
sqlfile.insertaCount(dire, tipo,1,1)
else:
sqlfile.insertaCount(dire, tipo,0,1)
print("Inserto en la lista de enlaces pendientes")
print("Si el tipo del enlace es enlace y el nivel menor que el nivel")
print(".. entonces guardalo para leer")
else:
sqlfile.insertaCount(dire, tipo,0,1)
print("Marco como leido el registro en la lista de pendientes con un caracter especial al final")
sqlfile.actualizaCount1(reg, 0)
# bajo en una unidad la profundidad
n = n + 1
esc = input("Finalizar (S/N) \n")
if esc == 'S':
break
# Salidas despues de finalizar
print(sqlfile.consultaTodos())
