Crawler под действиями github не доходит до указанного c сайта - PullRequest
Новая
       4

Crawler под действиями github не доходит до указанного c сайта

0 голосов
/ 19 января 2020

Я сделал сканер, используя действия puppeteer и github.

Когда процесс, выполняющий заданный c сайт, не подключен (журнал ошибок: net :: ERR_CONNECTION_TIMED_OUT at [site_url])

Я изменил действия среды github на ec2 instance с двумя регионами (США и моя страна)

Результат - успех.

В чем проблема?

PS. Я уже использовал прокси, но не работал с действиями github.

Редактировать для добавления k8s.yaml 

name: Check Url Every 1 hour

on:
  schedule:
    - cron: '*/30 * * * *'

jobs:
  crawl:
    runs-on: ubuntu-18.04
    steps:
      - name: Checkout
        uses: actions/checkout@v1
        with:
          fetch-depth: 1
      - name: Running Cron Job
        uses: ./.github/actions/url-status-check
        env:
          SOME_ENVs

name: 'Check Url'
description: 'Check external url with puppeteer'
runs:
  using: 'docker'
  image: '../../../Dockerfile'

FROM node:12.14.0-stretch

RUN wget -q -O - https://dl-ssl.google.com/linux/linux_signing_key.pub | apt-key add - \
  && sh -c 'echo "deb [arch=amd64] http://dl.google.com/linux/chrome/deb/ stable main" >> /etc/apt/sources.list.d/google.list' \
  && apt-get update \
  && apt-get install -y google-chrome-unstable fonts-ipafont-gothic fonts-wqy-zenhei fonts-thai-tlwg fonts-kacst ttf-freefont \
  --no-install-recommends \
  && rm -rf /var/lib/apt/lists/*

# Install puppeteer so it's available in the container.
RUN apt-get -y update
RUN apt-get -y install gconf-service libasound2 libatk1.0-0 libatk-bridge2.0-0 libc6 libcairo2 libcups2 libdbus-1-3 libexpat1 libfontconfig1 libgcc1 libgconf-2-4 libgdk-pixbuf2.0-0 libglib2.0-0 libgtk-3-0 libnspr4 libpango-1.0-0 libpangocairo-1.0-0 libstdc++6 libx11-6 libx11-xcb1 libxcb1 libxcomposite1 libxcursor1 libxdamage1 libxext6 libxfixes3 libxi6 libxrandr2 libxrender1 libxss1 libxtst6 ca-certificates fonts-liberation libappindicator1 libnss3 lsb-release xdg-utils wget

COPY package*.json .babelrc tsconfig.json ./
COPY src src
COPY entrypoint.sh /entrypoint.sh
RUN npm install && npm run build

RUN chmod +x /entrypoint.sh
ENTRYPOINT ["/entrypoint.sh"]
...