Import RSS feedu cez Cloudflare DDOS ochranu (5 sekund)

Smazaný účet KvotlhHqXE

verified

(39 hodnocení)

4. 3. 2022 07:30:44

Zdar.

Riesil niekto stahovanie RSS na ftp zo zdroja, ktory ma Cloudflare tzv (under attack) DDOS ochranu?

Mam v php jednoduchy kod:

set_time_limit(0);

$fp = fopen ('./news.xml', 'w+');

$ch = curl_init('https://demosite.com/feed/');

curl_setopt($ch, CURLOPT_FILE, $fp);

curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);

curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 120);

curl_setopt($ch, CURLOPT_TIMEOUT, 120);

curl_exec($ch);

curl_close($ch);

fclose($fp);

Klasika, otvorit subor, nahrat feed, ulozit.

Lenze dany web ma Cloudflare ochranu 5 sekund s naslednym redirectom na feed.

Teraz mi to ulozi len stranku s info od Cloudflare.

Skusal som viac veci zo stackoverflow + google + rozne WP rss importery, ale bez uspechu.

Je to vobec v PHP realizovatelne?

Diky moc.

4. 3. 2022 07:30:44

https://webtrh.cz/diskuse/import-rss-feedu-cez-cloudflare-ddos-ochranu-5-sekund#reply1499083

verified

4. 3. 2022 08:51:27

to přesměrování probíhá přes js, je těžké obejít CF obranu, která se ještě mění v čase. Požádej druhou stranu, aby pro tuhle adresu vypnula ochranu a aby využila CF CDN pro distribuci těhle souborů (nebo aspoň cachování). Je chyba provozovatele, že má zapnutou JS bránu i pro adresy, které se mají strojově zpracovávat.

4. 3. 2022 08:51:27

https://webtrh.cz/diskuse/import-rss-feedu-cez-cloudflare-ddos-ochranu-5-sekund#reply1499082

Smazaný účet KvotlhHqXE

verified

(39 hodnocení)

4. 3. 2022 09:14:02

@TomášX

Dík.

Ono to bude trosku problem asi. Ide o Ukrajinsky dennik, resp. 3 denniky s touto ochranou feedu (I'm under attack).

Tak sa poobzeram ci nie je nejake JS riesiene s header.

4. 3. 2022 09:14:02

https://webtrh.cz/diskuse/import-rss-feedu-cez-cloudflare-ddos-ochranu-5-sekund#reply1499081

verified

4. 3. 2022 09:21:12

v tom případě můžeš využít ty různé headless prohlížeče ala phantomjs a jiné, ty přes to procházejí dobře.

4. 3. 2022 09:21:12

https://webtrh.cz/diskuse/import-rss-feedu-cez-cloudflare-ddos-ochranu-5-sekund#reply1499080

Pro odpověď se přihlašte.

Prodej Více

Prodej eshopu Maxitools.cz

60 000 Kč

0 příhozů

Metaverze.cz – doména s DR 33 na prodej

5 000 Kč

0 příhozů

Marketplace na systéme Dokan Pro ( Lifetime – doživotná licencia )

1 990 €

0 příhozů

INTELLIGENT FOOD | JIDLO ZE SUPERPOTRAVIN | E-SHOP Inteligentního jídla

10 000 Kč

0 příhozů

OVLADACE-BRANYAVRATA.CZ

49 000 Kč

0 příhozů

Poptávky Více

Hledám firmu nebo dodavatele pro výrobu PVC karet s NFC čipem a QR kódem

🎯 Hledáme PPC specialistu pro akviziční kampaně na Slovensku (ideálně Slovák)

Hľadáme kolegu programátora ktorý ovláda scraping alebo WP elementor

Kódování firemního webu

Osobní Asistentka pro Realitního Investora

Pracovní nabídky Více

90 000 - 100 000 Kč

.NET Developer (Razor Pages a Blazor) – full remote

80 000 - 96 000 Kč

Práce z domu, Praha

AI talent/specialista pro e-commerce

Nabídky Více

PPC specialista (7 let praxe)

⚙️ Webové stránky | Webové aplikace | OpenCart specialista | Workflow automatizace

🎥Natáčení a střih videa na zakázku🎬

Tvorba webových stránek a e-shopů, které opravdu fungují a osloví vaše zákazníky!

🎨 Grafický designér – Tvorba designu webů, bannerů ale i tiskovin ⚡