<?xml version="1.0" encoding="utf-8"?>
<feed xmlns="http://www.w3.org/2005/Atom">
	<title type="html"><![CDATA[Неофициальный форум DLNA Home Media Server &mdash; защита от парсинга]]></title>
	<link rel="self" href="https://hms.lostcut.net/extern.php?action=feed&amp;tid=734&amp;type=atom" />
	<updated>2020-06-19T10:54:55Z</updated>
	<generator>PunBB</generator>
	<id>https://hms.lostcut.net/viewtopic.php?id=734</id>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=17002#p17002" />
			<content type="html"><![CDATA[<div class="quotebox"><cite>smsbox3 пишет:</cite><blockquote><p>Cloudflare на сайте <a href="http://f3.kinoxa.fun/">http://f3.kinoxa.fun/</a><br />Кукисы получаю, подставляю но все равно не читает,&nbsp; что-то еще надо. Не могу найти что же?</p></blockquote></div><p>Уточните, по какому url уходит post /?__cf_chl_jschl_tk__<br />всю инфу можно в личку,у меня сразу на сайт в браузере пускает,проверки нет. и отследить не могу как генерируются запросы</p>]]></content>
			<author>
				<name><![CDATA[Spell]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=625</uri>
			</author>
			<updated>2020-06-19T10:54:55Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=17002#p17002</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=17001#p17001" />
			<content type="html"><![CDATA[<div class="quotebox"><cite>smsbox3 пишет:</cite><blockquote><p>Cloudflare на сайте <a href="http://f3.kinoxa.fun/">http://f3.kinoxa.fun/</a><br />Кукисы получаю, подставляю но все равно не читает,&nbsp; что-то еще надо. Не могу найти что же?</p></blockquote></div><p>Попрубуйте так.<br /><strong>&#039;User-Agent=Android&#039;</strong></p>]]></content>
			<author>
				<name><![CDATA[matkin]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=984</uri>
			</author>
			<updated>2020-06-19T05:18:07Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=17001#p17001</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16994#p16994" />
			<content type="html"><![CDATA[<p>Cloudflare на сайте <a href="http://f3.kinoxa.fun/">http://f3.kinoxa.fun/</a><br />Кукисы получаю, подставляю но все равно не читает,&nbsp; что-то еще надо. Не могу найти что же?</p>]]></content>
			<author>
				<name><![CDATA[smsbox3]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=1305</uri>
			</author>
			<updated>2020-06-18T12:05:38Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16994#p16994</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16296#p16296" />
			<content type="html"><![CDATA[<p>Еще один сайт с защитой от парсинга&nbsp; <a href="https://kinozayci.ru/">https://kinozayci.ru/</a> На этот раз от <a href="https://webhost1.ru/">https://webhost1.ru/</a> отвечает кучей текста и опять же 5 секунд ожидания.</p>]]></content>
			<author>
				<name><![CDATA[smsbox3]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=1305</uri>
			</author>
			<updated>2020-01-30T12:43:00Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16296#p16296</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16294#p16294" />
			<content type="html"><![CDATA[<p>Там стоит cloudflare. Он может выводить страницу с подтверждением для подозрительных или новых запросов.<br />Может какие-то заголовки при парсинге не указаны (User-Agent или Referer)?</p>]]></content>
			<author>
				<name><![CDATA[Defrl]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=1483</uri>
			</author>
			<updated>2020-01-30T05:03:58Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16294#p16294</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16282#p16282" />
			<content type="html"><![CDATA[<div class="quotebox"><cite>Spell пишет:</cite><blockquote><p>А в функции ssl&nbsp; у вас равно 0 или 1; Это связано с отправкой данных, если http должно быть 0, а если https тогда равно 1</p></blockquote></div><p>На эти грабли я уже наступал <img src="https://hms.lostcut.net/extensions/k_smiles/img/ab.gif" alt=":)" /> 0 и 1 меняется в зависимости от протокола.</p>]]></content>
			<author>
				<name><![CDATA[smsbox3]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=1305</uri>
			</author>
			<updated>2020-01-29T11:23:50Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16282#p16282</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16281#p16281" />
			<content type="html"><![CDATA[<div class="quotebox"><cite>smsbox3 пишет:</cite><blockquote><p>Точно та самая.<br />Кстати вот еще один сайт, что защищается&nbsp; <a href="http://s4.kinokard.ru/">http://s4.kinokard.ru/</a><br />Уточнее, читаете этот сайт, но выдает<br /></p><div class="codebox"><pre><code>&lt;!DOCTYPE html&gt;&lt;html lang=&quot;en&quot;&gt;&lt;head&gt;&lt;title&gt;s4.kinokard.ru&lt;/title&gt;&lt;/head&gt;&lt;body&gt;&lt;script type=&quot;cfd3de664315617c4ed18e4a-text/javascript&quot;&gt;(function(d,w,n){var cs;if(&quot;&quot;!==(cs=d.cookie)){cs=cs.split(&quot;; &quot;);for(var i=0,l=cs.length,c;i&lt;l;++i){c=cs[i].split(&quot;=&quot;,2);if(n===c[0]&amp;&amp;&quot;0&quot;===c[1]){d.cookie=n+&quot;=KBYfEg4CXlpMQQNYHRJURQQcUl5MQ0lTE1QeSBRBQwQUWVldVQlbSFAMLw; expires=Fri, 28 Feb 2020 11:26:19 GMT; domain=s4.kinokard.ru; path=/;&quot;;w.location.replace(&quot;/&quot;);break;}}}})(document,window,&quot;bi&quot;);&lt;/script&gt;&lt;script src=&quot;https://ajax.cloudflare.com/cdn-cgi/scripts/7089c43e/cloudflare-static/rocket-loader.min.js&quot; data-cf-settings=&quot;cfd3de664315617c4ed18e4a-|49&quot; defer=&quot;&quot;&gt;&lt;/script&gt;&lt;/body&gt;&lt;/html&gt;</code></pre></div></blockquote></div><p>А в функции ssl&nbsp; у вас равно 0 или 1; Это связано с отправкой данных, если http должно быть 0, а если https тогда равно 1</p>]]></content>
			<author>
				<name><![CDATA[Spell]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=625</uri>
			</author>
			<updated>2020-01-29T10:31:46Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16281#p16281</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16278#p16278" />
			<content type="html"><![CDATA[<div class="quotebox"><cite>Spell пишет:</cite><blockquote><p>А случаем, функция curl, не тa, что я вам давал?</p></blockquote></div><p>Точно та самая.<br />Кстати вот еще один сайт, что защищается&nbsp; <a href="http://s4.kinokard.ru/">http://s4.kinokard.ru/</a><br />Уточнее, читаете этот сайт, но выдает<br /></p><div class="codebox"><pre><code>&lt;!DOCTYPE html&gt;&lt;html lang=&quot;en&quot;&gt;&lt;head&gt;&lt;title&gt;s4.kinokard.ru&lt;/title&gt;&lt;/head&gt;&lt;body&gt;&lt;script type=&quot;cfd3de664315617c4ed18e4a-text/javascript&quot;&gt;(function(d,w,n){var cs;if(&quot;&quot;!==(cs=d.cookie)){cs=cs.split(&quot;; &quot;);for(var i=0,l=cs.length,c;i&lt;l;++i){c=cs[i].split(&quot;=&quot;,2);if(n===c[0]&amp;&amp;&quot;0&quot;===c[1]){d.cookie=n+&quot;=KBYfEg4CXlpMQQNYHRJURQQcUl5MQ0lTE1QeSBRBQwQUWVldVQlbSFAMLw; expires=Fri, 28 Feb 2020 11:26:19 GMT; domain=s4.kinokard.ru; path=/;&quot;;w.location.replace(&quot;/&quot;);break;}}}})(document,window,&quot;bi&quot;);&lt;/script&gt;&lt;script src=&quot;https://ajax.cloudflare.com/cdn-cgi/scripts/7089c43e/cloudflare-static/rocket-loader.min.js&quot; data-cf-settings=&quot;cfd3de664315617c4ed18e4a-|49&quot; defer=&quot;&quot;&gt;&lt;/script&gt;&lt;/body&gt;&lt;/html&gt;</code></pre></div>]]></content>
			<author>
				<name><![CDATA[smsbox3]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=1305</uri>
			</author>
			<updated>2020-01-29T08:24:38Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16278#p16278</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16277#p16277" />
			<content type="html"><![CDATA[<div class="quotebox"><cite>smsbox3 пишет:</cite><blockquote><p>Curl-ом. Сейчас, кстати, этот сайт перестал данную защиту мне отдавать. Вероятно, там ее включают время от времени. Посмотрю, что будет вечером и попробую записать в файл все, что отдается.</p></blockquote></div><p>А случаем, функция curl, не тa, что я вам давал?</p>]]></content>
			<author>
				<name><![CDATA[Spell]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=625</uri>
			</author>
			<updated>2020-01-29T08:06:28Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16277#p16277</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16276#p16276" />
			<content type="html"><![CDATA[<div class="quotebox"><cite>Spell пишет:</cite><blockquote><p>Через file_get_contents() загружаете страницу?<br />Или как-то по другому?</p></blockquote></div><p>Curl-ом. Сейчас, кстати, этот сайт перестал данную защиту мне отдавать. Вероятно, там ее включают время от времени. Посмотрю, что будет вечером и попробую записать в файл все, что отдается.</p>]]></content>
			<author>
				<name><![CDATA[smsbox3]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=1305</uri>
			</author>
			<updated>2020-01-29T08:04:08Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16276#p16276</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[Re: защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16274#p16274" />
			<content type="html"><![CDATA[<div class="quotebox"><cite>smsbox3 пишет:</cite><blockquote><p>Попался сайт. Там защита</p></blockquote></div><p>Через file_get_contents() загружаете страницу?<br />Или как-то по другому?</p>]]></content>
			<author>
				<name><![CDATA[Spell]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=625</uri>
			</author>
			<updated>2020-01-29T05:13:29Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16274#p16274</id>
		</entry>
		<entry>
			<title type="html"><![CDATA[защита от парсинга]]></title>
			<link rel="alternate" href="https://hms.lostcut.net/viewtopic.php?pid=16273#p16273" />
			<content type="html"><![CDATA[<p>Попался сайт <a href="https://ofxmo.xyz">https://ofxmo.xyz</a> Там защита от считывания php стоит. Если пытаться прочитать и вывести, что отвечает сервер приходит сообщение что проверку не прошел и вызывает на моем сервере phpinfo(); Чтобы посмотреть что он там присылает вероятно надо в файл писать, а не браузером смотреть. Раньше этот сайт такими вещами не занимался. Возможно это временно и скоро отменят.</p>]]></content>
			<author>
				<name><![CDATA[smsbox3]]></name>
				<uri>https://hms.lostcut.net/profile.php?id=1305</uri>
			</author>
			<updated>2020-01-28T21:28:57Z</updated>
			<id>https://hms.lostcut.net/viewtopic.php?pid=16273#p16273</id>
		</entry>
</feed>
