Tengo un directorio apkmirror-scraper-composecon la siguiente estructura:
.
├── docker-compose.yml
├── privoxy
│ ├── config
│ └── Dockerfile
├── scraper
│ ├── Dockerfile
│ ├── newnym.py
│ └── requirements.txt
└── tor
└── DockerfileEstoy tratando de ejecutar lo siguiente docker-compose.yml:
version: '3'
services:
privoxy:
build: ./privoxy
ports:
- "8118:8118"
links:
- tor
tor:
build:
context: ./tor
args:
password: ""
ports:
- "9050:9050"
- "9051:9051"
scraper:
build: ./scraper
links:
- tor
- privoxydonde el Dockerfilede tores
FROM alpine:latest
EXPOSE 9050 9051
ARG password
RUN apk --update add tor
RUN echo "ControlPort 9051" >> /etc/tor/torrc
RUN echo "HashedControlPassword $(tor --quiet --hash-password $password)" >> /etc/tor/torrc
CMD ["tor"]eso para privoxyes
FROM alpine:latest
EXPOSE 8118
RUN apk --update add privoxy
COPY config /etc/privoxy/config
CMD ["privoxy", "--no-daemon"]donde configconsiste en las dos líneas
listen-address 0.0.0.0:8118
forward-socks5 / tor:9050 .y el Dockerfilepara scraperes
FROM python:2.7-alpine
ADD . /scraper
WORKDIR /scraper
RUN pip install -r requirements.txt
CMD ["python", "newnym.py"]donde requirements.txtcontiene la única línea requests. Finalmente, el programa newnym.pyestá diseñado para simplemente probar si está funcionando el cambio de la dirección IP usando Tor:
from time import sleep, time
import requests as req
import telnetlib
def get_ip():
IPECHO_ENDPOINT = 'http://ipecho.net/plain'
HTTP_PROXY = 'http://privoxy:8118'
return req.get(IPECHO_ENDPOINT, proxies={'http': HTTP_PROXY}).text
def request_ip_change():
tn = telnetlib.Telnet('tor', 9051)
tn.read_until("Escape character is '^]'.", 2)
tn.write('AUTHENTICATE ""\r\n')
tn.read_until("250 OK", 2)
tn.write("signal NEWNYM\r\n")
tn.read_until("250 OK", 2)
tn.write("quit\r\n")
tn.close()
if __name__ == '__main__':
dts = []
try:
while True:
ip = get_ip()
t0 = time()
request_ip_change()
while True:
new_ip = get_ip()
if new_ip == ip:
sleep(1)
else:
break
dt = time() - t0
dts.append(dt)
print("{} -> {} in ~{}s".format(ip, new_ip, int(dt)))
except KeyboardInterrupt:
print("Stopping...")
print("Average: {}".format(sum(dts) / len(dts)))Las docker-compose buildcompilaciones se docker-compose uprealizan correctamente, pero si lo intento , aparece el siguiente mensaje de error:
Creating network "apkmirrorscrapercompose_default" with the default driver
ERROR: could not find an available, non-overlapping IPv4 address pool among the defaults to assign to the networkIntenté buscar ayuda para este mensaje de error, pero no pude encontrar ninguna. Que esta causando este error?
¿Tienes una VPN conectada? Además, ¿ha intentado reiniciar su computadora? (Estoy buscando en
—
Robert
¿Puede intentar
—
Peter Hauge
docker network lsconfirmar si las redes ya se crearon en su host?
Gracias @Robert Tenía VPN PIA ejecutándose, una vez que me desconecté y salí, funcionó.
—
xx1xx
docker network prune. Esto resolverá su problema
docker psno muestra ningún contenedor en ejecución.