Лекции по интернет технологиям (стр. 9 )

2) индекс цитирования сайта, или количество ресурсов, ссылающихся на данный сайт; многими поисковиками не учитываются обратные ссылки (друг на друга), также важно, чтобы ссылки были с сайтов той же тематики, что и раскручиваемый сайт.

Методы оптимизации можно разделить на три класса:

«Белая» оптимизация – работа над ресурсом без применения официально запрещённых поисковиками методов раскрутки ресурса, без прямых попыток влияния на поисковые алгоритмы сайтов, или проще говоря естественным путем. Это включает в себя работу над самим сайтом, а именно над внутренней навигацией и контентом, и работу с внешней средой сайта, т. е. продвижением оптимизируемого сайта путем обзоров, регистрации в социальных закладках, партнерских программ и т. п. с указанием ссылок на сайт.

«Серая» оптимизация – продвижение ресурса с помощью методов так или иначе, запрещенных поисковыми системами, например, используются линкаторы, взаимный обмен ссылками, покупаются ссылки с других ресурсов, и т. п. Также к серым методам относится перенасыщение текста ключевыми словами в ущерб его читабельности, агрегация стороннего контента.

«Чёрная» оптимизация

Чёрная оптимизация обычно представляется как использование дорвеев — страниц и ресурсов, созданных (зачастую автоматически) специально для роботов поисковых систем. В теории человек не должен читать текст, который размещен на дорвее, так как он представляет собой бессмысленный набор из ключевых слов и популярных запросов. Также к чёрным методам SEO можно отнести использование так называемого скрытого текста на страницах сайта. Для пользователей данный текст не виден, однако поисковые роботы легко его индексируют. Обычно в скрытом тексте содержатся ключевые слова для придания «веса» оптимизируемой странице.

«Оранжевая» оптимизация – оптимизация, отличная от трех классических методов. Основной смысл состоит в том, что к сайту прикрепляются некоторые интересные материалы, не имеющие прямого отношения к тематике сайта, и проводится привлечение публики с упором на эти материалы. Часто используются методы, такие, как хамбаги и прочие. Применяется в условиях ограниченности материальных ресурсов. Относительно трудоемка. Основной недостаток - небольшой процент посетителей, заинтересованных в основной тематике сайта.

Поисковой спам

Поиско́вый спам (спамдексинг) — сайты и страницы в интернете, созданные с целью манипуляций результатами поиска в поисковых машинах — в конечном счете, для обмана пользователя.

Виды поискового спама:

Не имеющие отношения к содержимому страницы, но популярные в поисковых запросах слова в тегах meta keywords, description.

«Невидимый текст» – текст, невидимый для посетителя страницы, но индексируемый поисковой машиной. Применяется цвет текста, соответствующий цвету фона, текст размером в 1 пиксель, блоки текста, со стилем «display:none».

3) Ссылочный спам — ссылки, «накручивающие» link popularity и PageRank сайта.

Поисковые машины борются с этим, создавая фильтры, в которые добавляют сайты, ссылки с которых не учитываются при ранжировании.

AJAX

AJAX (ˈeɪdʒæks, от англ. Asynchronous Javascript and XML — «асинхронный JavaScript и XML») — подход к построению интерактивных пользовательских интерфейсов веб‑приложений, заключающийся в «фоновом» обмене данными браузера с веб-сервером. В результате, при обновлении данных веб-страница не перезагружается полностью и веб-приложения становятся более быстрыми и удобными.

По-английски AJAX произносится как эй-джэкс, по-русски довольно распространено ая́кс.

AJAX — не самостоятельная технология, а концепция использования нескольких смежных технологий. AJAX базируется на двух основных принципах:

использование технологии динамического обращения к серверу «на лету», без перезагрузки всей страницы полностью, например:

с использованием XMLHttpRequest (основной объект);

через динамическое создание дочерних фреймов;

через динамическое создание тега <script>.

использование DHTML для динамического изменения содержания страницы;

В качестве формата передачи данных обычно используются JSON или XML.

Впервые термин AJAX был публично использован 18 февраля 2005 года в статье Джесси Джеймса Гарретта (Jesse James Garrett) «Новый подход к веб-приложениям». Гарретт придумал термин, когда ему пришлось как-то назвать новый набор технологий, предлагаемый им клиенту.

Однако в той или иной форме многие технологии были доступны и использовались гораздо раньше, например в подходе «Remote Scripting», предложенным компанией Microsoft в 1998 году, или с использованием HTML элемента IFRAME, появившегося в Internet Explorer 3 в 1996 году.

AJAX стал особенно популярен после использования его компанией Google в сервисах Gmail, Google Maps и Google Suggest.

Преимущества

Экономия трафика

Использование AJAX позволяет значительно сократить трафик при работе с веб-приложением благодаря тому, что часто вместо загрузки всей страницы достаточно загрузить только изменившуюся часть, часто довольно небольшую.

Уменьшение нагрузки на сервер

AJAX позволяет несколько снизить нагрузку на сервер. К примеру, на странице работы с почтой, когда вы отмечаете прочитанные письма, серверу достаточно внести изменения в базу данных и отправить клиентскому скрипту сообщение об успешном выполнении операции без необходимости повторно создавать страницу и передавать её клиенту.

Ускорение реакции интерфейса

Поскольку нужно загрузить только изменившуюся часть, то пользователь видит результат своих действий быстрее.

Недостатки

Отсутствие интеграции со стандартными инструментами браузера

Динамически создаваемые страницы не регистрируются браузером в истории посещения страниц, поэтому не работает кнопка «Назад», предоставляющая пользователям возможность вернуться к просмотренным ранее страницам, но существуют скрипты, которые могут решить эту проблему.

Другой недостаток изменения содержимого страницы при постоянном URL заключается в невозможности сохранения закладки на желаемый материал. Частично решить эти проблемы можно с помощью динамического изменения идентификатора фрагмента (части URL после #), что позволяют многие браузеры.

Динамически загружаемое содержимое недоступно поисковикам (если не проверять запрос, обычный он или XMLHttpRequest)

Поисковые машины не могут выполнять JavaScript, поэтому разработчики должны позаботиться об альтернативных способах доступа к содержимому сайта.

Старые методы учёта статистики сайтов становятся неактуальными

Многие сервисы статистики ведут учёт просмотров новых страниц сайта. Для сайтов, страницы которых широко используют AJAX, такая статистика теряет актуальность.

XMLHTTP (XMLHttpRequest, XHR) — набор API, используемый в языках JavaScript, JScript, VBScript и им подобных для пересылки различных данных (XML, XHTML, JSON и т. д.) по HTTP-протоколу между браузером и веб-сервером. Позволяет осуществлять HTTP-запросы к удаленному серверу без необходимости перезагружать страницу.

Методы класса XMLHttpRequest

Метод	Описание
abort()	Отменяет текущий запрос, удаляет все заголовки, ставит текст ответа сервера в null.
getAllResponseHeaders()	Возвращает полный список HTTP-заголовков в виде строки. Заголовки разделяются знаками переноса (CR+LF). Если флаг ошибки равен true, возвращает пустую строку. Если статус 0 или 1, вызывает ошибку INVALID_STATE_ERR.
getResponseHeader(headerName)	Возвращает значение указанного заголовка. Если флаг ошибки равен true, возвращает null. Если заголовок не найден, возвращает null. Если статус 0 или 1, вызывает ошибку INVALID_STATE_ERR.
open(method, URL, async, userName, password)	Определяет метод, URL и другие опциональные параметры запроса; параметр async определяет, происходит ли работа в асинхронном режиме. Последние три параметра необязательны.
send(content)	Отправляет запрос на сервер.
setRequestHeader(label, value)	Добавляет HTTP-заголовок к запросу.
overrideMimeType(mimeType)	Позволяет указать mime-type документа, если сервер его не передал или передал неправильно. Внимание: метод отсутствует в Internet Explorer!

Свойства класса XMLHttpRequest

Свойство	Тип	Описание
onreadystatechange	EventListener	Обработчик события, которое происходит при каждой смене состояния объекта. Имя должно быть записано в нижнем регистре.
readyState	unsigned short	Текущее состояние объекта (0 — не инициализирован, 1 — открыт, 2 — отправка данных, 3 — получение данных и 4 — данные загружены)
responseText	DOMString	Текст ответа на запрос. Если статус не 3 или 4, возвращает пустую строку.
responseXML	Document	Текст ответа на запрос в виде XML, который затем может быть обработан посредством DOM. Если статус не 4, возвращает null.
status	unsigned short	HTTP-статус в виде числа (404 — «Not Found», 200 — «OK» и т. д.)
statusText	DOMString	Статус в виде строки («Not Found», «OK» и т. д.). Если статус не распознан, браузер пользователя должен вызвать ошибку INVALID_STATE_ERR.

Ошибки, вызываемые классом XMLHttpRequest

Название	Код	Описание
SECURITY_ERR	18	Вызывается при попытке совершить запрос, запрещённый настройками безопасности в браузере пользователя.
NETWORK_ERR	101	Вызывается при ошибке сети (во время синхронного запроса).
ABORT_ERR	102	Вызывается при прерывании пользователем запроса (во время синхронного запроса).

Создание экземпляра объекта XMLHttpRequest.

function createRequestObject()

{

if (XMLHttpRequest == undefined) {

XMLHttpRequest = function() {

try { return new ActiveXObject("Msxml2.XMLHTTP.6.0"); }

catch(e) {}

try { return new ActiveXObject("Msxml2.XMLHTTP.3.0"); }

catch(e) {}

try { return new ActiveXObject("Msxml2.XMLHTTP"); }

catch(e) {}

try { return new ActiveXObject("Microsoft. XMLHTTP"); }

catch(e) {}

throw new Error("This browser does not support XMLHttpRequest.");

};

}

return null;

}

Установка обработчика событий, открытие соединения и отправка запросов

Эти вызовы выглядят так:

req. open(<"GET"|"POST"|...>, <url>, <asyncFlag>);

req. onreadystatechange = processReqChange;

После определения всех параметров запроса его остается только отправить. Делается это функцией send(). Если необходимо передать на сервер POST-данные, их надо подставить в качестве параметра для этой функции. POST-данные должны быть свернуты в URL-escaped строку (кодировка UTF-8) и добавлен заголовок req. setRequestHeader ("Content-Type", "application/x-www-form-urlencoded");. Другими словами эта строка будет иметь вид, который мы привыкли видеть в командной строке браузера, при передаче данных методом GET. При отправке GET-запроса для версии без ActiveX необходимо указать параметр null, в остальных случаях можно не указывать никаких параметров. Не будет ошибкой, если для GET всегда будет указан параметр null:

req. send(null);

После этого начинает работать вышеуказанный обработчик событий. Он — фактически основная часть программы. В обработчике обычно происходит перехват всех возможных кодов состояния запроса и вызов соответствующих действий, а также перехват возможных ошибок.

function processReqChange()

{

try { // Важно!

// только при состоянии "complete"

if (req. readyState == 4) {

// для статуса "OK"

if (req. status == 200) {

// обработка ответа

} else {

alert("Не удалось получить данные:\n" +

req. statusText);

}

}

}

catch( e ) {

// alert('Caught Exception: ' + e. description);

}

}

Одноранговая сеть P2P

Однора́нговые, децентрализо́ванные или пи́ринговые (от англ. peer-to-peer, P2P — точка-точка) сети — это компьютерные сети, основанные на равноправии участников. В таких сетях отсутствуют выделенные серверы, а каждый узел (peer) является как клиентом, так и сервером. В отличие от архитектуры клиент-сервера, такая организация позволяет сохранять работоспособность сети при любом количестве и любом сочетании доступных узлов. Так сказать «С глазу на глаз».

Впервые фраза «peer-to-peer» была использована в 1984 году Парбауэллом Йохнухуйтсманом (Parbawell Yohnuhuitsman) при разработке архитектуры Advanced Peer to Peer Networking фирмы IBM.

Устройство одноранговой сети

Например, в сети есть 12 машин, при этом любая может связаться с любой. В качестве клиента (потребителя ресурсов) каждая из этих машин может посылать запросы на предоставление каких-либо ресурсов другим машинам в пределах этой сети и получать их. Как сервер, каждая машина должна обрабатывать запросы от других машин в сети, отсылать то, что было запрошено, а также выполнять некоторые вспомогательные и административные функции.

Любой член данной сети не гарантирует никому своего присутствия на постоянной основе. Он может появляться и исчезать в любой момент времени. Но при достижении определённого критического размера сети наступает такой момент, что в сети одновременно существует множество серверов с одинаковыми функциями.

Частично децентрализованные (гибридные) сети

Помимо чистых P2P-сетей, существуют так называемые гибридные сети, в которых существуют сервера, используемые для координации работы, поиска или предоставления информации о существующих машинах сети и их статусе (on-line, off-line и т. д.). Гибридные сети сочетают скорость централизованных сетей и надёжность децентрализованных благодаря гибридным схемам с независимыми индексационными серверами, синхронизирующими информацию между собой. При выходе из строя одного или нескольких серверов, сеть продолжает функционировать. К частично децентрализованным файлообменным сетям относятся например EDonkey, BitTorrent.

Пиринговая файлообменная сеть

Одна из областей применения технологии одноранговых сетей — это обмен файлами. Пользователи файлообменной сети выкладывают какие-либо файлы в т. н. «расшаренную» (англ. share — делиться) директорию, содержимое которой доступно для скачивания другим пользователям. Какой-нибудь другой пользователь сети посылает запрос на поиск какого-либо файла. Программа ищет у клиентов сети файлы, соответствующие запросу, и показывает результат. После этого пользователь может скачать файлы у найденных источников. В современных файлообменных сетях информация загружается сразу с нескольких источников. Ее целостность проверяется по контрольным суммам.

Обычно в таких сетях обмениваются фильмами и музыкой, что является извечной головной болью видеоиздательских и звукозаписывающих компаний, которым такое положение дел очень не по душе. Проблем им добавляет тот факт, что пресечь распространение файла в децентрализованной пиринговой сети технически невозможно — для этого потребуется физически отключить от сети все машины, на которых лежит этот файл, а таких машин (см. выше) может быть очень и очень много — в зависимости от популярности файла их число может достигать сотен тысяч. В последнее время видеоиздатели и звукозаписывающие компании начали подавать в суд на отдельных пользователей таких сетей, обвиняя их в незаконном распространении музыки и видео.

Такие организации, как RIAA, дискредитируют пиринговые сети, публикуя в них фальшивые файлы (содержание которых не соответствует названию, часто носит порнографический характер). Это привело к потере популярности сети KaZaA в пользу eDonkey, имеющей более совершенную архитектуру.

Несмотря на то, что в феврале 2006 прекратил работу самый популярный сервер сети eD2k — Razorback, и была прекращена разработка коммерческого клиента EDonkey2000, сама сеть ED2K продолжает функционировать, т. к. не завязана на конкретные сервера и существует большое количество свободно распространяемых клиентских программ типа eMule и mlDonkey.

Пиринговые сети распределенных вычислений

Технология пиринговых сетей (не подвергающихся квазисинхронному исчислению) применяется также для распределённых вычислений. Они позволяют в сравнительно очень короткие сроки выполнять поистине огромный объём вычислений, который даже на суперкомпьютерах потребовал бы, в зависимости от сложности задачи, многих лет и даже столетий работы. Такая производительность достигается благодаря тому, что некоторая глобальная задача разбивается на большое количество блоков, которые одновременно выполняются сотнями тысяч компьютеров, принимающими участие в проекте.

Индустрия развлечений против файлообменных сетей

Пародийная реклама Американской ассоциации звукозаписывающих компаний

голливудские студии уже много лет ведут борьбу против свободного обмена файлами. Если судить по количеству возбужденных дел, они ее выигрывают. Рост же популярности файлообменников говорит о том, что битва будет проиграна.

Знаете, кто враг № 1 индустрии развлечений? Правильно, пираты. Но не те мрачные персонажи за лотками, продающие болванки с четырьмя, а то и с восемью фильмами на одной. Главные враги развлекательной индустрии — мы с вами. Те, кто смотрят кино, слушают музыку, играют в компьютерные игры.

То, что мы скачиваем, — это еще полбеды. Самое ужасное, что мы этим делимся и обмениваемся. В принципе в этом нет ничего нового. Помните, как в начале 1990-х дети менялись картриджами для «денди»? И переписывали друг другу аудиокассеты? Просто сегодня все происходит в невиданных доселе планетарных масштабах. Надо заметить, впрочем, что индустрия развлечений впадает в истерику после каждого технологического витка: те же аудио - и видеомагнитофоны с функцией записи в 1980-х совершенно безуспешно пытались запретить, как и сегодня пытаются запретить файлообмен. Тот ужас, который испытывают голливудские студии перед интернет-пиратством, не идет ни в какое сравнение с опасениями конца XX века.

Все началось с Napster. Эта небольшая программка стала первой популярной файлообменной системой. И внезапно у людей появился доступ ко всей музыке в мире — от популярных в то время Бритни Спирс и Рики Мартина до полузабытых записей 1970-х годов и народных песен. Следует уточнить — доступ ко всему, что уже выложено кем-то для обмена. В любом случае это была революция. Несмотря на то что ребят, делавших Napster, в конце концов засудили по самое не балуйся за предоставление доступа к защищенному копирайтом контенту (в США для тюрьмы и ссылки достаточно) и вынудили прикрыть проект (перейдя несколько раз из рук в руки, Napster теперь предлагает тот же файлообмен, но за деньги и с выплатой отчислений студиям), сама идея файлообменных сетей взбудоражила массы интернет-пользователей. Пусть в США были приняты забавные законы, ограничивающие свободу распространения информации в Сети, а компании-разработчики этих проектов закрывались, но на их место приходили новые энтузиасты, а сами файлообменные сети, оставшись без внешней поддержки, продолжали жить своей собственной жизнью. Вслед за Napster пришла WinMX, а потом Gnutella, которую закрыть оказалось уже невозможно, потому что в ее основу был положен принцип децентрализации.

Самой опасной с точки зрения нарушения копирайта технологией файлового обмена можно считать протокол BitTorrent. Правообладатели исходят слюной, даже правительство США посылает гневные запросы в Швецию, где разместился самый большой и «наглый» торрент-трекер в мире Pirate Bay. Что мешает шведам просто взять и закрыть этот «пиратский сайт»? Мешает, как ни странно, именно закон. Все дело в архитектуре системы. Файлы, которые вы качаете по торрент-протоколу из Интернета, не лежат на каком-то конкретном сервере, который может быть легко закрыт по первому письму от правообладателя. Файлы располагаются на компьютерах других пользователей. На сайте-трекере в торрент-файлах хранится информация о местоположении этих файлов. По сути, на трекере нет никакой защищенной копирайтом информации, есть только ссылка на место хранения этой информации, а по закону большинства стран (США в число этих стран не входят) за одну только ссылку никого засудить нельзя.

Поскольку прикрыть рассадники пиратства оказалось невозможно, кинокомпании решили действовать на средневековый манер. Взять парочку-другую пользователей-нарушителей и показательно отрубить им головы, выставив их на обозрение всей деревни, то есть засудить на астрономические суммы и распиарить в СМИ. В результате под карающий меч блюстителей интеллектуальной собственности попали совсем уж нелепые категории граждан вроде бедных студентов, матерей-одиночек и 12-летних школьниц. Неудивительно, что подобные прецеденты не добавили симпатий сторонникам копирайта, но лишь обозлили общественность. Очевидно, что подобные меры неэффективны. Торрентам все возрасты покорны. Кроме того, кроме публичных трекеров, есть еще и приватные, куда вы не попадете без приглашения его членов. Как однажды заметил крупнейший исследователь Интернета профессор Мануэль Кастельс, «треть населения страны не может быть преступниками». Впрочем, уже сейчас есть разработки анонимных файлообменных сетей вроде I2P или Mute, пользователям которых вообще ничего не угрожает. Что будут делать правообладатели после того, как эти файлообменники наберут популярность, совершенно непонятно. Мир меняется, и вместе с ним меняются привычные модели бизнеса, так что рано или поздно издателям придется или измениться, или отойти в сторону и остаться в истории.

[1] SGML (англ. Standard Generalized Markup Language — стандартный общий язык разметки; произносится [эс-джи-эм-эль]) — метаязык, на котором можно определять язык разметки для документов. SGML — наследник разработанного в 1960 году в IBM языка GML (Generalized Markup Language), который не стоит путать с Geography Markup Language, разрабатываемым GIS Consortium. Изначально SGML был разработан для совместного использования машинно-читаемых документов в больших правительственных и аэрокосмических проектах. Он широко использовался в печатной и издательской сфере, но его сложность затруднила его широкое распространения для повседневного использования.

[2] Международная организация по стандартизации (International Organization for Standardization, ISO) — международная организация, занимающаяся выпуском стандартов.

[3] Сэр Тимоти Джон Бернерс-Ли (англ. Sir Timothy John «Tim» Berners-Lee; род. 8 июня 1955) — знаменитый британский учёный, изобретатель URI, URL, HTTP, HTML, изобретатель Всемирной паутины (совместно с Робером Кайо) и действующий глава Консорциума Всемирной паутины. Автор концепции семантической паутины. Автор множества других разработок в области информационных технологий.

[4] Те́ги (англ. tag) в SGML (в HTML, WML, языках семейства XML) — набор специально оформленного текста, который сообщает информацию о некотором куске текста в документе. Например с помощью тегов HTML сообщается, какими свойствами должен обладать тот или иной фрагмент текста на странице.

[5] Мультимедиа (лат. Multum + Medium) — одновременное использование различных форм представления информации и ее обработки в едином носителе.

[6] ASCII (англ. American Standard Code for Information Interchange — американский стандартный код для обмена информацией; по-американски произносится [э́ски], тогда как в Великобритании чаще произносится [а́ски]; по-русски также произносится [а́ски], и слово ASCII чаще употребляется в женском роде) — 7-битная компьютерная кодировка для представления латинского алфавита, десятичных цифр, некоторых знаков препинания, арифметических операций и управляющих символов.

[7] Консо́рциум Всеми́рной паути́ны (англ. World Wide Web Consortium, W3C) — организация, разрабатывающая и внедряющая технологические стандарты для Всемирной паутины.