Piano.cat
    • Categories
    • Recent
    • Tags
    • Popular
    • World
    • Users
    • Groups
    • Register
    • Login
    1. Principal
    2. Uncategorized
    3. Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.
    This topic has been deleted. Only users with topic management privileges can see it.
    • spla@mastodont.catS spla@mastodont.cat

      Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

      spla@mastodont.catS spla@mastodont.cat

      Al bot de #Amazon no li preocupa gens que l'estigui bloquejant en cada intent que fa, ell segueix al mateix ritme.

      Edito: necessitava temps per veure que era a la llista de robots.txt, ja fa un parell de dies que no xafardeja res.

      #scraping #BotsXafarders

      Link Preview Image
        0
        Offline spla@mastodont.cat •
        , last edited by spla@mastodont.cat
      • lapesanta@mastodont.catL lapesanta@mastodont.cat
        lapesanta@mastodont.catL lapesanta@mastodont.cat

        @spla És una situació insostenible, on es malbaraten recursos a tort i a dret.

          0
          Offline lapesanta@mastodont.cat •
          , last edited by
        • jolupa@misskey.canpavon.catJ jolupa@misskey.canpavon.cat
          jolupa@misskey.canpavon.catJ jolupa@misskey.canpavon.cat

          @spla@mastodont.cat potser la zipbomb que deien no fa gaire és l'única manera de parar aquest sense sentit...

            0
            Offline jolupa@misskey.canpavon.cat •
            , last edited by
          • spla@mastodont.catS spla@mastodont.cat
            spla@mastodont.catS spla@mastodont.cat

            @jolupa és millor impedir que agafin res amb un 444, no consumeixes recursos de màquina.

              0
              Offline spla@mastodont.cat •
              , last edited by
            • jolupa@misskey.canpavon.catJ jolupa@misskey.canpavon.cat
              jolupa@misskey.canpavon.catJ jolupa@misskey.canpavon.cat

              @spla@mastodont.cat Merda! ara he mirat els meus logs i aquests d'Amazon volen escanejar tot el Fediverse!!

                0
                Offline jolupa@misskey.canpavon.cat •
                , last edited by
              • spla@mastodont.catS spla@mastodont.cat
                spla@mastodont.catS spla@mastodont.cat

                @jolupa sí, sembla que tenen indexat tot el fedivers ☹️

                  0
                  Offline spla@mastodont.cat •
                  , last edited by
                • xorsch@mastodont.catX xorsch@mastodont.cat
                  xorsch@mastodont.catX xorsch@mastodont.cat
                  This post is deleted!
                    0
                    Offline xorsch@mastodont.cat •
                    , last edited by
                  • spla@mastodont.catS spla@mastodont.cat
                    spla@mastodont.catS spla@mastodont.cat

                    @xorsch intento llegir el necessari per a que el servidor funcioni bé per a tots vosaltres. També és cert que m'agrada força la informàtica, diria que des de sempre.
                    Parlant amb altres admins no tothom pensa igual, hi ha qui diu que és una guerra perduda, que Amazon té milers de IPs, que poden canviar els user_agent dels seus bots, etc. Jo no puc estar sense fer res, no m'agrada deixar que agafin el que vulguin.
                    Sí que estaria bé fer un paper però imagino que en deuen haver per internet...

                      0
                      Offline spla@mastodont.cat •
                      , last edited by spla@mastodont.cat
                    • mestretites@mastodont.catM mestretites@mastodont.cat
                      mestretites@mastodont.catM mestretites@mastodont.cat

                      @spla tens alguna documentació de com muntat el sistema? M'agrada entendre com parar al Mal (no parlo de tu 😉)

                        0
                        Offline mestretites@mastodont.cat •
                        , last edited by
                      • spla@mastodont.catS spla@mastodont.cat
                        spla@mastodont.catS spla@mastodont.cat

                        @mestretites no l'ha he fet, hauria de publicar-ho. En resum, es basa en afegir una configuració a nginx on es llisten els user_agent dels robots coneguts i retornar-lis el codi d'estat 444.
                        Un cop tens això actiu, amb l'ajut de Loki, Promtail i Grafana obtens del log els robots rebutjats amb 444 i generes el gràfic.

                        Link Preview ImageLink Preview Image
                          0
                          Offline spla@mastodont.cat •
                          , last edited by
                        • xorsch@mastodont.catX xorsch@mastodont.cat
                          xorsch@mastodont.catX xorsch@mastodont.cat
                          This post is deleted!
                            0
                            Offline xorsch@mastodont.cat •
                            , last edited by
                          • spla@mastodont.catS spla@mastodont.cat
                            spla@mastodont.catS spla@mastodont.cat

                            @xorsch tristament cert, a la immensa majoria de la gent no els interessa gens, si és que en tenen coneixement.

                              0
                              Offline spla@mastodont.cat •
                              , last edited by
                            • xorsch@mastodont.catX xorsch@mastodont.cat
                              xorsch@mastodont.catX xorsch@mastodont.cat

                              @spla

                              Sols no podrem fer-hi front, però els que ens agrada la informàtica haurem de buscar tècniques per defensar-nos.

                              Jo ho dic en serio: entre el Intel Me, o PSP d'AMD, el control de las claus UEFI per part de microsoft, etc ... No vull saber que faràn ara que disposen de hardware dedicats a poder perfilar l'usuari amb les npu ..

                              Ja veurem quines salvatjades fan.

                                0
                                Offline xorsch@mastodont.cat •
                                , last edited by
                              • spla@mastodont.catS spla@mastodont.cat
                                spla@mastodont.catS spla@mastodont.cat

                                @xorsch a saber, el que sigui per a fer diners.

                                  0
                                  Offline spla@mastodont.cat •
                                  , last edited by
                                Loading More Posts
                                • Oldest to Newest
                                • Newest to Oldest
                                • Most Votes
                                Reply
                                • Reply as topic
                                Log in to reply
                                • First post
                                  Last post