source: wikipedia

text: Литерату́рные жа́нры (, от — род, вид) — исторически складывающиеся группы литературных произведений, объединённых совокупностью формальных и содержательных свойств (в отличие от литературных форм, выделение которых основано только на формальных признаках). Термин зачастую неправомерно отождествляют с термином «вид литературы». История Если на фольклорной стадии жанр определялся из внелитературной (культовой) ситуации, то в литературе жанр получает характеристику своей сущности из собственных литературных норм, кодифицируемых риторикой. Вся номенклатура античных жанров, сложившаяся до этого поворота, была затем энергично переосмыслена под его воздействием. Со времён Аристотеля, давшего в своей «Поэтике» первую систематизацию литературных жанров, укрепилось представление о том, что литературные жанры представляют собой закономерную, раз и навсегда закреплённую систему, а задачей автора является всего лишь добиться наиболее полного соответствия своего произведения сущностным свойствам избранного жанра. Понимание жанра как предлежащей автору готовой структуры привело к появлению целого ряда нормативных поэтик, содержащих указания для авторов относительно того, как именно должны быть написаны ода или трагедия. Вершиной такого типа сочинений является поэма-трактат Буало «Поэтическое искусство» 1674 года. Это не означает, разумеется, что система жанров в целом и особенности отдельных жанров действительно оставались неизменными на протяжении двух тысяч лет, — однако перемены (и очень существенные) либо не замечались теоретиками, либо осмыслялись ими как порча, отклонение от необходимых образцов. И лишь к концу XVIII века разложение традиционной жанровой системы, связанное, в соответствии с общими принципами литературной эволюции, как с внутрилитературными процессами, так и с воздействием совершенно новых социальных и культурных обстоятельств, зашло настолько далеко, что нормативные поэтики уже никак не могли описать и обуздать литературную реальность. В этих условиях одни традиционные жанры стали стремительно отмирать или маргинализироваться, другие, напротив, перемещаться с литературной периферии в самый центр литературного процесса. И если, к примеру, взлёт баллады на рубеже XVIII—XIX веков, связанный в России с именем Жуковского, оказался довольно кратковременным (хотя в русской поэзии и дал затем неожиданный новый всплеск в первой половине XX века — например, у Багрицкого и Николая Тихонова, — а затем и в начале XXI века у Марии Степановой, Фёдора Сваровского и Андрея Родионова), то гегемония романа — жанра, который нормативные поэтики веками не желали замечать как нечто низкое и несущественное, — затянулась в европейских литературах по меньшей мере на столетие. Особенно активно стали развиваться произведения гибридной или неопределённой жанровой природы: пьесы, о которых затруднительно сказать, комедия это или трагедия, стихотворения, которым невозможно дать никакого жанрового определения, кроме того, что это лирическое стихотворение. Падение ясных жанровых идентификаций проявилось и в умышленных авторских жестах, нацеленных на разрушение жанровых ожиданий: от обрывающегося на полуслове романа Лоренса Стерна «Жизнь и мнения Тристрама Шенди, джентльмена» до «Мёртвых душ» Н. В. Гоголя, где парадоксальный для прозаического текста подзаголовок поэма вряд ли может вполне подготовить читателя к тому, что из достаточно привычной колеи плутовского романа его то и дело будут выбивать лирическими (а порой — и эпическими) отступлениями. В XX веке на литературные жанры оказало особенно сильное влияние обособление массовой литературы от литературы, ориентированной на художественный поиск. Массовая литература заново ощутила острую нужду в чётких жанровых предписаниях, значительно повышающих для читателя предсказуемость текста, позволяющих легко в нём сориентироваться. Разумеется, прежние жанры для массовой литературы не годились, и она довольно быстро сформировала новую систему, в основу которой лёг весьма пластичный и накопивший немало разнообразного опыта жанр романа. На исходе XIX и в первой половине XX веков оформляются детектив и полицейский роман, научная фантастика и дамский («розовый») роман. Неудивительно, что актуальная литература, нацеленная на художественный поиск, стремилась как можно дальше отклониться от массовой и потому уходила от жанровой определённости вполне сознательно. Но поскольку крайности сходятся, постольку стремление быть дальше от жанровой предзаданности подчас приводило к новому жанрообразованию: так, французский антироман настолько не хотел быть романом, что у основных произведений этого литературного течения, представленного такими самобытными авторами, как Мишель Бютор и Натали Саррот, явственно наблюдаются признаки нового жанра. Таким образом, современные литературные жанры (и такое предположение мы встречаем уже в размышлениях М. М. Бахтина) не являются элементами какой-либо предзаданной системы: наоборот, они возникают как точки сгущения напряжённости в том или ином месте литературного пространства в соответствии с художественными задачами, здесь и сейчас ставящимися данным кругом авторов, и могут быть определены как «устойчивый тематически, композиционно и стилистически тип высказывания». Специальное изучение таких новых жанров остаётся делом завтрашнего дня Типология литературных жанров Литературное произведение может быть причислено к тому или иному жанру по различным критериям. Ниже приведены некоторые из этих критериев и приведены примеры жанров. По форме: видения новелла ода опус очерк поэма повесть пьеса рассказ роман скетч эпопея эпос эссе По содержанию: комедия фарс водевиль интермедия скетч пародия комедия положений комедия характеров трагедия драма ужасы По родам: эпические басня аполог былина баллада миф новелла повесть рассказ роман роман-эпопея сказка эпопея лирические ода послание элегия эпиграмма лиро-эпические стансы баллада поэма драматические драма комедия трагедия Иерархия жанров в классицизме Классицизм, например, также устанавливает и строгую иерархию жанров, которые делятся на высокие (ода, трагедия, эпопея) и низкие (комедия, сатира, басня). Каждый жанр имеет строго определённые признаки, смешивание которых не допускается. См. также Жанр Жанровая литература Жанровая система Жанры фантастики Классификации литературных жанров Память жанра Примечания Литература Ссылки Теоретическая поэтика: понятия и определения Хрестоматия для студентов филологических факультетов. Автор-составитель Н. Д. Тамарченко Георгий Левинтон. Жанровое пространство русского фольклора (видеозапись лекции)


text: Интерне́т () — коммуникационная сеть и всемирная система объединённых компьютерных сетей для и передачи информации. Раньше упоминался как Всемирная сеть и Глобальная сеть, а также просто Сеть. Построена на базе стека протоколов TCP/IP. На основе Интернета работает Всемирная паутина (World Wide Web, WWW) и множество других систем передачи данных. К началу 2023 года число пользователей достигло 5,16 млрд человек, что составляет более 50 % от всех жителей планеты Земля. Во многом это было обусловлено широким распространением сотовых сетей с доступом в Интернет стандартов 3G, 4G и 5G, развитием социальных сетей и удешевлением стоимости интернет-трафика. Суперуспешное развитие Интернета во многом объясняется также тем, что во второй половине 2010-х годов мировая Сеть фактически стала полномасштабной заменой всем классическим инструментам получения информации, связи и коммуникации. Все «классические» СМИ — телевидение, радио и печатные издания — имеют полноценные онлайн-версии, кроме того, существует безграничное множество интернет-СМИ и блог-платформ, соединяющих все признаки различных форм коммуникации, делая контент более «живым» и менее зависимым от штампов. На сегодняшний день самыми популярными интернет-ресурсами являются социальные сети (Facebook, Instagram, Twitter), мессенджеры (WhatsApp, Viber, Telegram), а также энциклопедия Википедия и видеохостинг YouTube, который часто называют «новым телевидением», «заменой телевидению» и т. д. Написание С заглавной или строчной буквы В 4-м издании «Русского орфографического словаря» РАН (2012) в соответствии с практикой письма и решением Орфографической комиссии РАН предложены два варианта написания — со строчной и заглавной буквы. Склонение Слово «интернет» склоняется по правилам русской грамматики как существительное мужского рода, ничем не отличаясь от таких слов, как интернат и интерфейс, и имеет второй тип склонения. Поэтому писать следует: в И/интернете, структура И/интернета. История Принципы, по которым строится Интернет, впервые были применены в сети ARPANET, созданной в 1969 году по заказу американского агентства DARPA. Используя наработки ARPANET, в 1984 году Национальный научный фонд США создал сеть NSFNET для связи между университетами и вычислительными центрами. В отличие от закрытой ARPANET, подключение к NSFNET было достаточно свободным и к 1992 году к ней подключились более 7500 мелких сетей, включая 2500 за пределами США. С передачей опорной сети NSFNET в коммерческое использование появился современный Интернет. Разработка концепции Первой исследовательской программой в направлении быстрой передачи сообщений руководил Джозеф Ликлайдер, опубликовавший в 1962 году работу «Galactic Network». Благодаря Ликлайдеру появилась первая детально разработанная концепция компьютерной сети. Она была подкреплена работами Леонарда Клейнрока в области теории коммутации пакетов для передачи данных (1961—1964). В 1962 году Пол Бэран из RAND Corporation подготовил доклад «On Distributed Communication Networks». Он предложил использовать децентрализованную систему связанных между собой компьютеров (все компьютеры в сети равноправны), которая даже при разрушении её части будет работоспособна. Этим решались две важные задачи — обеспечение работоспособности системы и неуничтожимость данных, которые оказываются сохранёнными на разнесённых друг от друга компьютерах. Предлагалось передавать сообщения в цифровом, а не в аналоговом виде. Само сообщение предлагалось разбивать на небольшие порции — «пакеты», и передавать по распределённой сети все пакеты одновременно. Из принятых в месте назначения дискретных пакетов сообщение заново «собиралось». В 1967 году Ларри Робертс предложил связать между собой компьютеры ARPA. Начинается работа над созданием первой интернет-сети ARPANet. Параллельно в Англии разработал концепцию Сети и добавил в неё существенную деталь — компьютерные узлы должны не только передавать данные, но и стать переводчиками для различных компьютерных систем и языков. Именно Дэвису принадлежит термин «пакет» для обозначения фрагментов файлов, пересылаемых раздельно. Между Калифорнийским университетом в Лос-Анджелесе, , Калифорнийским университетом в Санта-Барбаре и университетом штата Юта прокладывается специальный кабель связи. Группа специалистов Фрэнка Харта из BBN приступила к решению технических проблем по организации сети ARPANET. ARPANET Разработка такой сети была поручена Калифорнийскому университету в Лос-Анджелесе, Стэнфордскому исследовательскому центру, Университету Юты и Университету штата Калифорния в Санта-Барбаре. Компьютерная сеть была названа ARPANET (), и в 1969 году в рамках проекта сеть объединила четыре указанных научных учреждения. Все работы финансировались Министерством обороны США. Затем сеть ARPANET начала активно расти и развиваться, её начали использовать учёные из разных областей науки. Первый сервер ARPANET был установлен 2 сентября 1969 года в Калифорнийском университете (Лос-Анджелес). Компьютер Honeywell DDP-516 имел 24 Кб оперативной памяти. 29 октября 1969 года в 21:00 между двумя первыми узлами сети ARPANET, находившимися на расстоянии в 640 км — в Калифорнийском университете Лос-Анджелеса (UCLA) и в Стэнфордском исследовательском институте (SRI) — провели сеанс связи. Чарли Клайн (Charley Kline) пытался выполнить удалённое подключение из Лос-Анджелеса к компьютеру в Стэнфорде. Успешную передачу каждого введённого символа его коллега Билл Дювалль (Bill Duvall) из Стэнфорда подтверждал по телефону. В первый раз удалось отправить всего два символа «LO» (изначально предполагалось передать «LOG») после чего сеть перестала функционировать. LOG должно было быть словом LOGIN (команда входа в систему). В рабочее состояние систему вернули уже к 22:30, и следующая попытка оказалась успешной. Именно эту дату можно считать днём рождения интернета. К 1971 году была разработана первая программа для отправки электронной почты по сети. Эта программа сразу стала популярна среди пользователей сети. В 1973 году к сети были подключены через трансатлантический телефонный кабель первые иностранные организации из Великобритании и Норвегии, сеть стала международной. В 1970-х годах сеть в основном использовалась для пересылки электронной почты, тогда же появились первые списки почтовой рассылки, новостные группы и доски объявлений. Однако в то время сеть ещё не могла легко взаимодействовать с другими сетями, построенными на других технических стандартах. К концу 1970-х годов начали бурно развиваться протоколы передачи данных, которые были стандартизированы в 1982—1983 годах. Активную роль в разработке и стандартизации сетевых протоколов играл Джон Постел. 1 января 1983 года сеть ARPANET перешла с протокола NCP на TCP/IP, который успешно применяется до сих пор для объединения («наслоения») сетей. Именно в 1983 году термин «интернет» закрепился за сетью ARPANET. В 1984 году была разработана система доменных имён (). NSFNet В 1984 году у сети ARPANET появился серьёзный соперник: Национальный научный фонд США (NSF) основал обширную межуниверситетскую сеть NSFNet (), которая была составлена из более мелких сетей (включая известные тогда сети Usenet и Bitnet) и имела гораздо бо́льшую пропускную способность, чем ARPANET. К этой сети за год подключились около 10 тыс. компьютеров, название «интернет» начало плавно переходить к NSFNet. В 1988 году был разработан протокол Internet Relay Chat (IRC), благодаря чему в интернете стало возможно общение в реальном времени (чат). В 1989 году в Европе, в стенах Европейского совета по ядерным исследованиям (ЦЕРН) родилась концепция Всемирной паутины. Её предложил знаменитый британский учёный Тим Бернерс-Ли. Он же в течение двух лет разработал протокол HTTP, язык HTML и идентификаторы URI. Соавтор Тима Бернерса-Ли по формулировке целей и задач проекта World Wide Web в ЦЕРН, бельгийский исследователь Роберт Кайо, разъяснял позднее его понимание истоков этого проекта: История всех великих изобретений, как это давно и хорошо известно, базируется на большом числе им предшествующих. В случае Всемирной паутины (WWW) следовало бы в этом контексте, видимо, отметить по крайней мере два важнейших для успеха проекта пути развития и накопления знаний и технологий: 1) история развития систем типа гипертекста ...; 2) Интернет-протокол, который, собственно, и сделал всемирную сеть компьютеров наблюдаемой реальностью. В 1990 году сеть ARPANET прекратила своё существование, полностью проиграв конкуренцию NSFNet. В том же году было зафиксировано первое подключение к интернету по телефонной линии (т. н. «дозво́н», ). Всемирная паутина В 1991 году Всемирная паутина стала общедоступна в интернете, а в 1993 году появился знаменитый веб-браузер NCSA Mosaic. Всемирная паутина набирала популярность. Можно считать, что существуют две ясно различимые эры в истории Web: [до браузера Mosaic] Марка Андриссена и после. Именно сочетание веб-протокола от Тима Бернерс-Ли, который обеспечивал коммуникацию, и браузера (Mosaic) от Марка Андриссена, который предоставил функционально совершенный пользовательский интерфейс, создало условия для наблюдаемого взрыва (интереса к Веб). За первые 24 месяца, истекшие после появления браузера Мosaic, Web прошёл стадию от полной неизвестности (за пределами считанного числа людей внутри узкой группы учёных и специалистов лишь одного мало кому известного профиля деятельности) до полной и абсолютно везде в мире его распространённости. В 1995 году NSFNet вернулась к роли исследовательской сети, маршрутизацией всего трафика интернета теперь занимались сетевые провайдеры, а не суперкомпьютеры Национального научного фонда. В том же 1995 году Всемирная паутина стала основным поставщиком информации в интернете, обогнав по трафику протокол пересылки файлов FTP. Был образован Консорциум Всемирной паутины (W3C). Можно сказать, что Всемирная паутина преобразила интернет и создала его современный облик. С 1996 года Всемирная паутина почти полностью подменяет собой понятие «интернет». В 1990-е годы интернет объединил в себе большинство существовавших тогда сетей (хотя некоторые, как Фидонет, остались обособленными). Объединение выглядело привлекательным благодаря отсутствию единого руководства, а также благодаря открытости технических стандартов интернета, что делало сети независимыми от бизнеса и конкретных компаний. К 1997 году в интернете насчитывалось уже около 10 млн компьютеров, было зарегистрировано более 1 млн доменных имён. Интернет стал очень популярным средством для обмена информацией. В настоящее время подключиться к интернету можно через спутники связи, радиоканалы, кабельное телевидение, телефон, сотовую связь, специальные оптико-волоконные линии или электропровода. Всемирная сеть стала неотъемлемой частью жизни в развитых и развивающихся странах. В течение пяти лет Интернет достиг аудитории свыше 50 миллионов пользователей. Другим средствам коммуникации требовалось гораздо больше времени для достижения такой популярности: С 22 января 2010 года прямой доступ в интернет получил экипаж Международной космической станции. В сентябре 2017 года ООН сообщила о том, что доступ к интернету имеют около половины (48 %) населения Земли. При этом с 2010 года количество интернет-пользователей увеличилось на 1,5 млрд человек. Согласно ежегодному исследованию цифрового качества жизни в разных странах, проводимому специалистами компании Surfshark, наиболее доступным в 2022 году оказался интернет в Израиле и Армении. Россия также вошла в десятку лучших, расположившись на шестой строчке рейтинга. Основным фактором при оценке стало соотношение самых дешёвых тарифов для широкополосного фиксированного и мобильного интернета и средней почасовой зарплаты в стране. Предсказания появления Русский писатель, философ и общественный деятель XIX века Владимир Одоевский в незаконченном утопическом романе «4338-й год», написанном в 1837 году, похоже, первым предсказал появление современных блогов и интернета: в тексте романа есть строки: «между знакомыми домами устроены магнетические телеграфы, посредством которых живущие на далёком расстоянии общаются друг с другом». Идею применения электрической информационной связи для целей бизнеса упоминал в 1908 году Никола Тесла: Английский писатель Эдвард Морган Форстер в фантастической повести-антиутопии «Машина останавливается» (1909) изобразил всемирную автоматическую систему, обслуживающую человечество. Люди становятся полностью зависимы от неё, постепенно деградируют физически и живут почти безвылазно и одиноко в своих квартирах-сотах, общаясь только виртуально. Система даёт сбой и останавливается, все погибают. Предсказана будущая для тогдашнего времени проблема, связанная с интернетом — далеко зашедшая интернет-зависимость. В рассказе Мюррея Лейнстера «Логический компьютер по имени Джо» (1946) описана мировая сеть, объединяющая «логиков» (компьютеры), которые подключаются и получают информацию от всех сервисов (банковских, авиарейсы, рецепты и пр.), показывают видео (в том числе и на заказ) и многое другое. Главный герой — бракованный логик Джо — в итоге становится ИИ. Многие писатели-фантасты описывали большие общенациональные или общепланетные компьютеры, которые можно назвать прообразом современных интернет-серверов. Среди них Мультивак (1955—1979), придуманный Айзеком Азимовым, Большой Всепланетный Информаторий (1970—80-е годы) братьев Стругацких, Большая Академическая Машина в романе «Люди как боги» (1966) Сергея Снегова. В этих случаях писатели-фантасты отталкивались от современных им мэйнфреймов, увеличивая их масштабы. В 1974 году Андрей Сахаров писал в своей работе «Мир через полвека»: Перспективы Подобно тому, как коммерческие интернет-провайдеры соединяются посредством точек обмена трафиком, исследовательские сети объединяются в свои подсети, такие как: National LambdaRail; Abilene Network; GEANT; GLORIAD. В России наиболее известен проект «А́билин» () — высокоскоростная экспериментальная сеть, созданная и поддерживаемая американским консорциумом «Интернет 2» (). Сам консорциум является некоммерческой организацией и занимается разработкой передовых приложений и сетевых технологий. Его сеть Абилин уже объединяет более 230 американских университетов, научных центров и других учреждений. Особенностью сети Абилин является высокая скорость передачи данных, теоретически она может достигать 200 Гбит/с. Дальнейшее совершенствование общедоступной сети интернет многие связывают со внедрением концепции семантической паутины, что позволило бы людям и компьютерам более эффективно взаимодействовать в процессе создания, классификации и обработки информации. Ключевые принципы См. также: Маршрутизация в сети Интернет Интернет состоит из многих тысяч корпоративных, научных, правительственных и домашних компьютерных сетей. Объединение сетей разной архитектуры и топологии стало возможно благодаря протоколу IP () и принципу маршрутизации пакетов данных. Сам протокол IP был рождён в дискуссиях внутри организации IETF (; Task force — группа специалистов для решения конкретной задачи), чьё название можно вольно перевести как «Группа по решению задач проектирования интернета». IETF и её рабочие группы по сей день занимаются развитием протоколов Всемирной сети. IETF открыта для публичного участия и обсуждения. Комитеты организации публикуют так называемые документы RFC. В этих документах даются технические спецификации и точные объяснения по многим вопросам. Некоторые документы RFC возводятся организацией IAB ( — Совет по архитектуре интернета) в статус стандартов интернета (). С 1992 года IETF, IAB и ряд других интернет-организаций входят в Общество интернета (). Общество интернета предоставляет организационную основу для разных исследовательских и консультативных групп, занимающихся развитием интернета. Протоколы Протокол, в данном случае, — это, образно говоря, «язык», используемый компьютерами для обмена данными при работе в сети. Чтобы различные компьютеры сети могли взаимодействовать, они должны «разговаривать» на одном «языке», то есть использовать один и тот же протокол. Проще говоря, протокол — это правила передачи данных между узлами компьютерной сети. Систему протоколов интернета называют «стеком протоколов TCP/IP». Наиболее распространённые в интернете протоколы (в алфавитном порядке, сгруппированные в примерном соответствии модели OSI): Есть ещё целый ряд протоколов, ещё не стандартизированных, но уже очень популярных в интернете: OSCAR CDDB MFTP (сеть eDonkey2000) BitTorrent Gnutella Эти протоколы в большинстве своём нужны для обмена файлами и текстовыми сообщениями, на некоторых из них построены целые файлообменные сети. Структура (службы и услуги) В настоящее время в интернете существует достаточно большое количество служб, обеспечивающих работу со всем спектром ресурсов. Наиболее известными среди них являются: служба DNS, или система доменных имён, обеспечивающая возможность использования для адресации узлов сети мнемонических имён вместо числовых адресов; электронная почта (E-mail), обеспечивающая возможность обмена сообщениями одного человека с одним или несколькими абонентами; служба IRC, предназначенная для поддержки текстового общения в реальном времени (chat); телеконференции, или группы новостей (Usenet), обеспечивающие возможность коллективного обмена сообщениями; служба FTP — система файловых архивов, обеспечивающая хранение и пересылку файлов различных типов; служба Telnet, предназначенная для управления удалёнными компьютерами в терминальном режиме; World Wide Web (WWW, W3, «Всемирная паутина») — гипертекстовая (гипермедиа) система, предназначенная для интеграции различных сетевых ресурсов в единое информационное пространство; Потоковое мультимедиа. Перечисленные выше службы относятся к стандартным. Это означает, что принципы построения клиентского и серверного программного обеспечения, а также протоколы взаимодействия сформулированы в виде международных стандартов. Следовательно, разработчики программного обеспечения при практической реализации обязаны выдерживать общие технические требования. Наряду со стандартными службами существуют и нестандартные, представляющие собой оригинальную разработку той или иной компании. В качестве примера можно привести различные системы типа Instant Messenger (своеобразные интернет-пейджеры — ICQ, AOL и т. п.), системы интернет-телефонии, трансляции радио и видео и т. д. Важной особенностью таких систем является отсутствие международных стандартов, что может привести к возникновению технических конфликтов с другими подобными сервисами. Для стандартных служб также стандартизируется и интерфейс взаимодействия с протоколами транспортного уровня. В частности, за каждым программным сервером резервируются стандартные номера TCP- и UDP-портов, которые остаются неизменными независимо от особенностей той или иной фирменной реализации как компонентов сервиса, так и транспортных протоколов. Номера портов клиентского программного обеспечения так жёстко не регламентируются. Это объясняется следующими факторами: во-первых, на пользовательском узле может функционировать несколько копий клиентской программы, и каждая из них должна однозначно идентифицироваться транспортным протоколом, то есть за каждой копией должен быть закреплён свой уникальный номер порта; во-вторых, клиенту важна регламентация портов сервера, чтобы знать, куда направлять запрос, а сервер сможет ответить клиенту, узнав адрес из поступившего запроса. Услуги В настоящее время наиболее популярные услуги интернета — это: Всемирная паутина Веб-форумы Блоги Вики-проекты (в частности, Википедия) Интернет-магазины Интернет-аукционы Социальные сети Электронная почта и списки рассылки Группы новостей (в основном Usenet) Файлообменные сети Электронные платёжные системы Интернет-радио Интернет-телевидение IPTV IP-телефония Мессенджеры FTP-серверы IRC (реализовано также как веб-чаты) Поисковые системы Интернет-реклама Удалённые терминалы Удалённое управление Многопользовательские игры Веб 2.0 Интернет-трейдинг Браузеры Браузер — компьютерная программа для просмотра веб-страниц. Существует довольно много браузеров. Одни из самых популярных: Google Chrome, Internet Explorer, Microsoft Edge, Mozilla Firefox, Safari и Opera. Языки Свобода доступа пользователей Интернета к информационным ресурсам не ограничивается государственными границами и/или национальными доменами, но языковые границы сохраняются. Преобладающим языком Интернета является английский язык. Русский язык занимает 2 место. Язык является одним из часто используемых признаков деления Интернета, наряду с делением по государствам, регионам и доменам первого уровня. Название языковых сфер Интернета даётся по названию используемого языка. Русскоязычная сфера Интернета получила название «Русский интернет», сокращённо Рунет. Рунет Рунет (с прописной буквы, читается [рунэ́т]) — русскоязычная часть всемирной сети Интернет. Более узкое определение гласит, что Рунет — это часть Всемирной паутины, принадлежащая к национальным доменам .su, .ru и .рф. 1987—1994 годы стали ключевыми в зарождении русскоязычного Интернета. 28 августа 1990 года профессиональная научная сеть, выросшая в недрах Института атомной энергии им. И. В. Курчатова и Минавтопрома и объединившая учёных-физиков и программистов, соединилась с мировой сетью Интернет, положив начало современным российским сетям. 19 сентября 1990 года был зарегистрирован домен первого уровня .su в базе данных Международного информационного центра InterNIC. В результате этого Советский Союз стал доступен через Интернет. 7 апреля 1994 года в InterNIC был зарегистрирован российский домен .ru. Домен «.рф» (punycode: xn--p1ai; Российская Федерация), позволяющий использовать в адресе URL кириллические символы, делегирован в корневой зоне DNS 12 мая 2010 года около 17:20 по московскому времени. По статистике Технического центра «Интернет», на конец 2010 года в зоне .рф зарегистрировано около 700 тыс. доменов, около 350 тыс. из них делегировано. По данным Координационного центра национального домена сети Интернет, из доменных имён в зоне .рф, зарегистрированных к настоящему времени, только 8 % представляют собой общеупотребительные слова русского языка. Ещё 30 % образованы несколькими словами, все остальные домены представляют собой имена людей, литературных персонажей, названий компаний. Подавляющее большинство имён принадлежит владельцам товарных знаков. Почти половина имён была зарегистрирована в Москве, ещё 9 % — в Московской области, 8 % — в Санкт-Петербурге. Юридические аспекты 3 июня 2011 года была принята резолюция ООН, признающая доступ в Интернет базовым правом человека. Таким образом, отключение тех или иных регионов от Интернета является нарушением прав человека. Основные области использования Электронный бизнес По результатам исследований, большинство ресурсов Интернета так или иначе связаны с коммерческой деятельностью. Интернет используется для рекламы и непосредственной продажи товаров и услуг, для маркетинговых исследований, электронных платежей и управления банковскими счетами. Согласно докладу Oxford Economics, общий объём электронной торговли товарами и услугами, а также рынок цифровых продуктов и услуг в совокупности оценивается во всемирном масштабе в 20,4 триллионов долларов США, что составляет примерно 13,8 % всемирного объёма продаж. Средства массовой информации По жанрам интернет-издания не отличаются от офлайновых — есть новостные сайты, литературные, научно-популярные, детские, женские и т. п. Однако, если офлайновые издания выпускаются периодически (раз в день, неделю, месяц), то интернет-издания обновляются по мере появления нового материала. Также существует интернет-радио и интернет-телевидение. Благодаря развитию интернет-СМИ, количество людей, предпочитающих читать бумажную прессу, с каждым годом сокращается. Так, опросы общественного мнения в 2009 г. показывали, что только 19 % жителей США в возрасте от 18 до 35 лет просматривают бумажную прессу. Средний возраст читателей бумажных газет в США равен 55 годам. Общий тираж выпускаемых в США газет с 1989 по 2009 годы сократился с 62 млн до 49 млн экземпляров в день. Литература, музыка, кино Электронные библиотеки, доступные через Интернет, содержат огромное число произведений. При этом многие книги, доступные в сети, давно стали библиографической редкостью, а некоторые и вообще не издавались. Как начинающие писатели и поэты, так и некоторые известные авторы выкладывают в Интернет свои творения. Распространение музыки в Интернете началось с появления формата MP3, сжимающего звуковые файлы до размеров, пригодных для передачи в Интернете при сохранении качества записи. Появление в Интернете отдельных песен с нового диска исполнителя служит для него хорошей рекламой и существенно повышает уровень продаж записей. В Интернет также выложено множество кинофильмов, большей частью нелегально. Для доступа к ним широко используются файлообменные сети (в частности, с применением технологии BitTorrent). В последнее время также стало распространённым потоковое мультимедиа. В связи с лёгкостью копирования и выкладывания в Интернет литературы, музыки и кинофильмов проблема защиты авторских прав приобрела особую актуальность. Связь Электронная почта в настоящее время является одним из наиболее используемых средств связи. Также популярны IP-телефония и использование таких программ, как Skype (бесплатное проприетарное программное обеспечение с закрытым кодом, обеспечивающее шифрованную голосовую связь и видеосвязь через Интернет между компьютерами (VoIP), используя технологии пиринговых сетей, а также платные услуги для звонков на мобильные и стационарные телефоны). В последние годы популярность обрели мессенджеры, передающие сообщения через Интернет, они стали вытеснять из повседневной жизни людей сотовую связь, которая в сравнении с ними чаще всего уступает в функциональности, скорости, а также стоимости. Развитие Интернета, используемого как средство связи, приводит ко всё большему распространению такой формы занятости как удалённая работа. Общение Интернет является способом массового общения людей, объединённых различными интересами. Для этого используются интернет-форумы, блоги и социальные сети. Социальные сети стали своего рода Интернет-пристанищем, где каждый может найти техническую и социальную базу для создания своего виртуального «Я». При этом каждый пользователь получил возможность не просто общаться и творить, но и делиться плодами своего творчества с многомиллионной аудиторией той или иной социальной сети. Краудсорсинг Интернет оказался хорошим средством для решения общественно значимых задач силами множества добровольцев, координирующих при этом свою деятельность. Википедия — онлайн-энциклопедия, создаваемая силами добровольцев, является одним из наиболее крупных проектов такого рода. Примерами программ так называемой гражданской науки являются Всемирный день Исследования воды, Stardust@Home и Clickworkers под эгидой НАСА, проект по классификации галактик Galaxy Zoo. Проекты распределённых вычислений, такие как Folding@Home, World Community Grid, Einstein@Home и другие, можно также рассматривать как гражданскую науку, хотя главная задача вычисления осуществляется с помощью компьютеров добровольцев. Использование энергии В 2011 году исследователи оценивали энергопотребление Интернета на уровне 170—307 гигаватт, менее двух процентов электроэнергии, используемой человечеством. При оценке учитывались затраты энергии на создание, эксплуатацию и периодическое обновление около 750 миллионов ноутбуков, миллиарда смартфонов, 100 миллионов серверов по всему миру, а также энергопотребление маршрутизаторов, станций сотовой связи, коммутаторов, радиопередатчиков, систем облачного хранения. Цензура Во многих странах существуют серьёзные ограничения на функционирование сети, то есть на государственном уровне осуществляется запрет на доступ к отдельным сайтам (СМИ, аналитическим, порнографическим) или ко всей сети. Одним из примеров может служить реализованный в КНР проект «Золотой щит» — система фильтрации трафика на интернет-канале между провайдерами и международными сетями передачи информации. Поскольку в Интернете присутствуют информационные ресурсы, которые бывают неудобны для некоторых правительств, то последние пытаются декларировать Интернет как средство массовой информации, со всеми вытекающими ограничениями. Но на самом деле, Интернет — это только носитель, информационная среда, как и телефонная сеть или просто бумага. В мире встречается и государственная монополия на само подключение к сети Интернет. Поскольку Интернет сначала развивался стихийно, то только на этапе превращения его в глобальную сеть государства стали проявлять интерес к его функционированию. Пока возможности цензуры ограничены, так как ещё ни одно государство в мире не решилось полностью отключить внутренние сети от внешних. По признанию Тима Бернерса-Ли, «мы не смогли бы сделать ничего подобного, если бы это с самого начала находилось под контролем государства». В то же время многие информационные ресурсы официально подвергают цензуре (модерации) публикуемую ими информацию в зависимости от проводимой политики и собственных внутренних правил. Это не противоречит демократическим принципам свободы слова. Россия два года подряд (2013 г., 2014 г.) лидировала по числу обращений юных пользователей к нежелательному контенту, под которым подразумеваются сайты, содержащие информацию об оружии, ресурсы порнографического содержания, онлайн-казино. Из всех детей мира, обратившихся к источникам негативного содержания, 16 % проживают в России. На втором месте по этому показателю следует Индия, на третьем — Китай. От нежелательного контента можно защититься установкой фильтров на компьютере пользователя. Для преодоления цензуры в Интернете пользователи используют возможность доступа к заблокированным ресурсам через другие, разрешённые ресурсы. Таковыми могут выступать веб-прокси и прокси-серверы, анонимайзеры и анонимные сети, RSS-агрегаторы, веб-сервисы перевода содержимого веб-страниц по указанию адреса страницы (например, Google Translate), VPN. Субкультуры Современный Интернет имеет также очень много социальных и культурных граней. Он является универсальной глобальной информационной средой. Интернет-сообщества Интернет предоставляет широчайшие технические возможности для общения. Кроме того, в Интернете сравнительно легко найти людей со схожими интересами и взглядами на мир, или найти прошлых знакомых, которые в силу жизненных обстоятельств были разбросаны по всей Земле. Вдобавок общение в Сети начать психологически проще, чем при личной встрече. Эти причины обусловливают создание и активное развитие веб-сообществ — групп людей, имеющих общие интересы и общающихся преимущественно через Интернет. Подобные интернет-сообщества постепенно начинают играть ощутимую роль в жизни всего общества. Интернет-зависимость Киберпанк Интернет, киберпространство и виртуальная реальность нашли своё отражение и в современном искусстве. Ещё в середине 1980-х годов сформировался особый поджанр научной фантастики, фокусирующийся на компьютерах, высоких технологиях и проблемах, возникающих в обществе в связи с губительным применением плодов технического прогресса. Сюжетом произведений этого жанра часто становится борьба хакеров с могущественными корпорациями. Жанр получил широкое распространение в литературе, кинематографе, альтернативной музыке, графических произведениях (особенно аниме) и в компьютерных играх. Сам термин киберпанк придуман и введён в употребление писателем Брюсом Бетке, который в 1983 году опубликовал одноимённый рассказ. Меньшее распространение имеют такие ответвления жанра, как кибертрэш и нанопанк. Троллинг Троллинг — психологическое и социальное явление, развившееся в Интернете в 1990-х годах и часто мешающее нормальному общению в Сети. Интернет-троллями или просто троллями () во Всемирной сети называют людей, которые намеренно публикуют провокационные сообщения и статьи (на Форумах, в группах новостей Usenet, в вики-проектах), т. н. «вброс», призванные разжечь конфликты между их участниками, вызвать флейм, оскорбления и так далее. Сами подобные статьи и сообщения также иногда называют троллями. Процесс написания таких сообщений и называется троллингом. Другое В конце 1960-х годов в США существовала компания «Internet Radio Product Ltd», выпускавшая транзисторные радиоприёмники «Internet». См. также Управление интернетом Широкополосный доступ в Интернет Интернет-провайдер Видимая сеть Глубокая сеть Даркнет Киберпространство Сетевой нейтралитет Хостинг Каталог ресурсов в Интернете Глобальная компьютерная сеть Одноранговая сеть Дотком Список стран по скорости интернета Примечания Литература First Monday, a peer-reviewed journal on the Internet established in 1996 as a Great Cities Initiative of the University Library of the University of Illinois at Chicago, Rise of the Network Society, Manual Castells, Wiley-Blackwell, 1996 (1st ed) and 2009 (2nd ed), «The Internet: Changing the Way We Communicate» in America’s Investment in the Future, National Science Foundation, Arlington, Va. USA, 2000 «Lessons from the History of the Internet», Manuel Castells, in The Internet Galaxy, Ch. 1, pp 9-35, Oxford University Press, 2001, «Media Freedom Internet Cookbook» by the OSCE Representative on Freedom of the Media Vienna, 2004 The Internet Explained, Vincent Zegna & Mike Pepper, Sonet Digital, November 2005, Pages 1 — 7. «How Much Does The Internet Weigh?», by Stephen Cass, Discover, 2007 «The Internet spreads its tentacles», Julie Rehmeyer, Science News, Vol. 171, No. 25, pp. 387—388, 23 June 2007 Internet, Lorenzo Cantoni & Stefano Tardini, Routledge, 2006, Ссылки Интерактивная карта интернета Научно-популярное объяснение инфраструктуры Интернета How Stuff Works Тим Бернерс-Ли. Плетя паутину: истоки и будущее Всемирной сети Интернет как СМИ Алгоритмы для Интернета Курс лекций Интернет научится мыслить Berkman Center for Internet and Society European Commission Information Society История Первый в мире веб-сайт (архив) История Интернета от ISOC Living Internet, Internet history and related information, including information from many creators of the Internet. Глобальные компьютерные сети


text: Поиско́вая систе́ма () — алгоритмы и реализующая их совокупность компьютерных программ (в широком смысле этого понятия, включая аналоговые системы автоматизированной обработки информации первого поколения), предоставляющая пользователю возможность быстрого доступа к необходимой ему информации при помощи поиска в обширной коллекции доступных данных. Одно из наиболее известных применений поисковых систем — веб-сервисы для поиска текстовой или графической информации во Всемирной паутине. Существуют также системы, способные искать файлы на FTP-серверах, товары в интернет-магазинах, информацию в группах новостей Usenet. Для поиска информации с помощью поисковой системы пользователь формулирует поисковый запрос. Работа поисковой системы заключается в том, чтобы по запросу пользователя найти документы, содержащие либо указанные ключевые слова, либо слова, как-либо связанные с ключевыми словами. При этом поисковая система генерирует страницу результатов поиска. Такая поисковая выдача может содержать различные типы результатов, например: веб-страницы, изображения, аудиофайлы. Некоторые поисковые системы также извлекают информацию из подходящих баз данных и каталогов ресурсов в Интернете. Для поиска нужных сведений удобнее всего воспользоваться современными поисковыми машинами, которые позволяют быстро обнаружить необходимые сведения и обеспечивают точность и полноту поиска. При работе с этими машинами достаточно задать ключевые слова, наиболее точно отражающие искомую информацию, или составить более сложный запрос из ключевых слов для уточнения области поиска. После ввода запроса на поиск вы получите список ссылок на документы в Интернете, обычно называемые web-страницами или просто страницами, в которых содержатся указанные ключевые слова. Обычно ссылки дополняются фрагментами текста из обнаруженного документа, которые часто помогают сразу определить тематику найденной страницы. Щёлкнув мышью на ссылке, можно перейти к выбранному документу. Поисковая система тем лучше, чем больше документов, релевантных запросу пользователя, она будет возвращать. Результаты поиска могут становиться менее релевантными из-за особенностей алгоритмов или вследствие человеческого фактора. По состоянию на 2020 год самой популярной поисковой системой в мире и, в частности, России является Google. По методам поиска и обслуживания разделяют четыре типа поисковых систем: системы, использующие поисковых роботов, системы, управляемые человеком, гибридные системы и мета-системы. В архитектуру поисковой системы обычно входят: поисковый робот, собирающий информацию с сайтов сети Интернет или из других документов; индексатор, обеспечивающий быстрый поиск по накопленной информации; поисковик — графический интерфейс для работы пользователя. История На раннем этапе развития сети Интернет Тим Бернерс-Ли поддерживал список веб-серверов, размещённый на сайте ЦЕРН. Сайтов становилось всё больше, и поддерживать вручную такой список становилось всё сложнее. На сайте NCSA был специальный раздел «Что нового!» (), где публиковали ссылки на новые сайты. Первой компьютерной программой для поиска в Интернете была программа ( — архив без буквы «в»). Она была создана в 1990 году Аланом Эмтэджем (Alan Emtage), Биллом Хиланом (Bill Heelan) и Дж. Питером Дойчем (J. Peter Deutsch), студентами, изучающими информатику в университете Макгилла в Монреале. Программа скачивала списки всех файлов со всех доступных анонимных FTP-серверов и строила базу данных, в которой можно было выполнять поиск по именам файлов. Однако, программа Арчи не индексировала содержимое этих файлов, так как объём данных был настолько мал, что всё можно было легко найти вручную. Развитие и распространение сетевого протокола Gopher, придуманного в 1991 году Марком Маккэхилом (Mark McCahill) в университете Миннесоты, привело к созданию двух новых поисковых программ, и . Как и Арчи, они искали имена файлов и заголовки, сохранённые в индексных системах Gopher. Veronica () позволяла выполнять поиск по ключевым словам большинства заголовков меню Gopher во всех списках Gopher. Программа Jughead () извлекала информацию о меню от определённых Gopher-серверов. Хотя название поисковика Арчи не имело отношения к циклу комиксов , тем не менее Veronica и Jughead — персонажи этих комиксов. К лету 1993 года ещё не было ни одной системы для поиска в вебе, хотя вручную поддерживались многочисленные специализированные каталоги. Оскар Нирштрасс (Oscar Nierstrasz) в Женевском университете написал ряд сценариев на Perl, которые периодически копировали эти страницы и переписывали их в стандартный формат. Это стало основой для W3Catalog, первой примитивной поисковой системы сети, запущенной 2 сентября 1993 года. Вероятно, первым поисковым роботом, написанным на языке Perl, был «World Wide Web Wanderer» — бот Мэтью Грэя (Matthew Gray) из Массачусетского технологического института в июне 1993 года. Этот робот создавал поисковый индекс «Wandex». Цель робота Wanderer состояла в том, чтобы измерить размер всемирной паутины и найти все веб-страницы, содержащие слова из запроса. В 1993 году появилась и вторая поисковая система «Aliweb». Aliweb не использовала поискового робота, но вместо этого ожидала уведомлений от администраторов веб-сайтов о наличии на их сайтах индексного файла в определённом формате. , созданный в декабре 1993 года Джонатаном Флетчером, искал веб-страницы и строил их индексы с помощью поискового робота, и использовал веб-форму в качестве интерфейса для формулирования поисковых запросов. Это был первый инструмент поиска в Интернете, который сочетал три важнейших функции поисковой системы (проверка, индексация и собственно поиск). Из-за ограниченности ресурсов компьютеров того времени индексация и, следовательно, поиск были ограничены только названиями и заголовками веб-страниц, найденных поисковым роботом. Первой полнотекстовой индексирующей ресурсы при помощи робота («craweler-based») поисковой системой, стала система , запущенная в 1994 году. В отличие от своих предшественниц, она позволяла пользователям искать по любым словам, расположенным на любой веб-странице — с тех пор это стало стандартом для большинства поисковых систем. Кроме того, это был первый поисковик, получивший широкое распространение. В 1994 году была запущена система «Lycos», разработанная в Университете Карнеги — Меллон и ставшая серьёзным коммерческим предприятием. Вскоре появилось множество других конкурирующих поисковых машин, таких как: , «Excite», , , и «AltaVista». В некотором смысле они конкурировали с популярными интернет-каталогами, такими как «Yahoo!». Но поисковые возможности каталогов ограничивались поиском по самим каталогам, а не по текстам веб-страниц. Позже каталоги объединялись или снабжались поисковыми роботами с целью улучшения поиска. В 1996 году компания Netscape хотела заключить эксклюзивную сделку с одной из поисковых систем, сделав её поисковой системой по умолчанию на веб-браузере Netscape. Это вызвало настолько большой интерес, что Netscape заключила контракт сразу с пятью крупнейшими поисковыми системами (Yahoo!, Magellan, Lycos, Infoseek и Excite). За 5 млн долларов США в год они предлагались по очереди на поисковой странице Netscape. Поисковые системы участвовали в «Пузыре доткомов» конца 1990-х. Несколько компаний эффектно вышли на рынок, получив рекордную прибыль во время их первичного публичного предложения. Некоторые отказались от рынка общедоступных поисковых движков и стали работать только с корпоративным сектором, например, . Google взял на вооружение идею продажи ключевых слов в 1998 году, тогда это была маленькая компания, обеспечивавшая работу поисковой системы по адресу . Этот шаг ознаменовал для поисковых систем переход от соревнований друг с другом к одному из самых выгодных коммерческих предприятий в Интернете. Поисковые системы стали продавать первые места в результатах поиска отдельным компаниям. Поисковая система Google занимает видное положение с начала 2000-х. Компания добилась высокого положения благодаря хорошим результатам поиска с помощью алгоритма PageRank. Алгоритм был представлен общественности в статье «The Anatomy of Search Engine», написанной Сергеем Брином и Ларри Пейджем, основателями Google. Этот итеративный алгоритм ранжирует веб-страницы, основываясь на оценке количества гиперссылок на веб-страницу в предположении, что на «хорошие» и «важные» страницы ссылаются больше, чем на другие. Интерфейс Google выдержан в спартанском стиле, где нет ничего лишнего, в отличие от многих своих конкурентов, которые встраивали поисковую систему в веб-портал. Поисковая система Google стала настолько популярной, что появились подражающие ей системы, например, (тайный поисковик). К 2000 году Yahoo! осуществлял поиск на основе системы Inktomi. Yahoo! в 2002 году купил Inktomi, а в 2003 году купил Overture, которому принадлежали и AltaVista. Затем Yahoo! работал на основе поисковой системы Google вплоть до 2004 года, пока не запустил, наконец, свой собственный поисковик на основе всех купленных ранее технологий. Фирма Microsoft впервые запустила поисковую систему Microsoft Network Search (MSN Search) осенью 1998 года, используя результаты поиска от Inktomi. Совсем скоро в начале 1999 года сайт начал отображать выдачу , смешанную с результатами Inktomi. Недолго (в 1999 году) MSN search использовал результаты поиска от AltaVista. В 2004 году фирма Microsoft начала переход к собственной поисковой технологии с использованием собственного поискового робота — . После проведения ребрендинга компанией Microsoft 1 июня 2009 года была запущена поисковая система Bing. 29 июля 2009 Yahoo! и Microsoft подписали соглашение, согласно которому Yahoo! Search работал на основе технологии Microsoft Bing. На момент 2015 года союз Bing и Yahoo! дал первые настоящие плоды. Теперь Bing занимает 20,1 % рынка, а Yahoo! 12,7 %, что в общем занимает 32,60 % от общего рынка поисковых систем в США по данным из разных источников. Поиск информации на русском языке В 1996 году был реализован поиск с учётом русской морфологии на поисковой машине Altavista и запущены оригинальные российские поисковые машины Рамблер и Апорт. 23 сентября 1997 года была открыта поисковая машина Яндекс. 22 мая 2014 года компанией Ростелеком была открыта национальная поисковая машина Спутник, которая на момент 2015 года находится в стадии бета-тестировании. 22 апреля 2015 года был открыт новый сервис Спутник. Дети специально для детей с повышенной безопасностью. В 2017 году весь проект “Спутник” признали неудачным и таким, что существует исключительно благодаря государственной поддержке. С 2007 года в России также существует визуальный детский поисковик Agakids.ru, который при выдаче результатов показывает скриншоты сайтов, с тематикой неподходящей для детского глаза и психики, кроме того он имеет выдачу поисковых запросов на белорусском и казахском языках, соответственно в зоне этих доменов .by и .kz Большую популярность получили методы кластерного анализа и поиска по метаданным. Из международных машин такого плана наибольшую известность получила компании . В 2005 году в России при поддержке МГУ запущен поисковик «Нигма», поддерживающий автоматическую кластеризацию. В 2006 году открылась российская метамашина Quintura, предлагающая визуальную кластеризацию в виде облака тегов. «Нигма» тоже экспериментировала с визуальной кластеризацией. Как работает поисковая система Основные составляющие поисковой системы: поисковый робот, индексатор, поисковик. Как правило, системы работают поэтапно. Сначала поисковый робот получает контент, затем индексатор генерирует доступный для поиска индекс, и наконец, поисковик обеспечивает функциональность для поиска индексируемых данных. Чтобы обновить поисковую систему, этот цикл индексации выполняется повторно. Поисковые системы работают, храня информацию о многих веб-страницах, которые они получают из HTML-страниц. Поисковый робот () — программа, которая автоматически проходит по всем ссылкам, найденным на странице, и выделяет их. Поисковый робот, основываясь на ссылках или исходя из заранее заданного списка адресов, осуществляет поиск новых документов, ещё не известных поисковой системе. Владелец сайта может исключить определённые страницы при помощи robots.txt, используя который можно запретить индексацию файлов, страниц или каталогов сайта. Поисковая система анализирует содержание каждой страницы для дальнейшего индексирования. Слова могут быть извлечены из заголовков, текста страницы или специальных полей — метатегов. Индексатор — это модуль, который анализирует страницу, предварительно разбив её на части, применяя собственные лексические и морфологические алгоритмы. Все элементы веб-страницы вычленяются и анализируются отдельно. Данные о веб-страницах хранятся в индексной базе данных для использования в последующих запросах. Индекс позволяет быстро находить информацию по запросу пользователя. Ряд поисковых систем, подобных Google, хранят исходную страницу целиком или её часть, так называемый кэш, а также различную информацию о веб-странице. Другие системы, подобные системе AltaVista, хранят каждое слово каждой найденной страницы. Использование кэша помогает ускорить извлечение информации с уже посещённых страниц. Кэшированные страницы всегда содержат тот текст, который пользователь задал в поисковом запросе. Это может быть полезно в том случае, когда веб-страница обновилась, то есть уже не содержит текст запроса пользователя, а страница в кэше ещё старая. Эта ситуация связана с потерей ссылок () и дружественным по отношению к пользователю (юзабилити) подходом Google. Это предполагает выдачу из кэша коротких фрагментов текста, содержащих текст запроса. Действует принцип наименьшего удивления, пользователь обычно ожидает увидеть искомые слова в текстах полученных страниц (). Кроме того, что использование кэшированных страниц ускоряет поиск, страницы в кэше могут содержать такую информацию, которая уже нигде более не доступна. Поисковик работает с выходными файлами, полученными от индексатора. Поисковик принимает пользовательские запросы, обрабатывает их при помощи индекса и возвращает результаты поиска. Когда пользователь вводит запрос в поисковую систему (обычно при помощи ключевых слов), система проверяет свой индекс и выдаёт список наиболее подходящих веб-страниц (отсортированный по какому-либо критерию), обычно с краткой аннотацией, содержащей заголовок документа и иногда части текста. Поисковый индекс строится по специальной методике на основе информации, извлечённой из веб-страниц. С 2007 года поисковик Google позволяет искать с учётом времени создания искомых документов (вызов меню «Инструменты поиска» и указание временного диапазона). Большинство поисковых систем поддерживает использование в запросах булевых операторов И, ИЛИ, НЕ, что позволяет уточнить или расширить список искомых ключевых слов. При этом система будет искать слова или фразы точно так, как было введено. В некоторых поисковых системах есть возможность , в этом случае пользователи расширяют область поиска, указывая расстояние до ключевых слов. Есть также , при котором используется статистический анализ употребления искомых слов и фраз в текстах веб-страниц. Эти системы позволяют составлять запросы на естественном языке. Полезность поисковой системы зависит от релевантности найденных ею страниц. Хоть миллионы веб-страниц и могут включать некое слово или фразу, но одни из них могут быть более релевантны, популярны или авторитетны, чем другие. Большинство поисковых систем использует методы ранжирования, чтобы вывести в начало списка «лучшие» результаты. Поисковые системы решают, какие страницы более релевантны, и в каком порядке должны быть показаны результаты, по-разному. Методы поиска, как и сам Интернет со временем меняются. Так появились два основных типа поисковых систем: системы предопределённых и иерархически упорядоченных ключевых слов и системы, в которых генерируется инвертированный индекс на основе анализа текста. Большинство поисковых систем являются коммерческими предприятиями, которые получают прибыль за счёт рекламы, в некоторых поисковиках можно купить за отдельную плату первые места в выдаче для заданных ключевых слов. Те поисковые системы, которые не берут денег за порядок выдачи результатов, зарабатывают на контекстной рекламе, при этом рекламные сообщения соответствуют запросу пользователя. Такая реклама выводится на странице со списком результатов поиска, и поисковики зарабатывают при каждом клике пользователя на рекламные сообщения. Типы поисковых систем Существует четыре типа поисковых систем: с поисковыми роботами, управляемые человеком, гибридные и мета-системы. системы, использующие поисковые роботы. Состоят из трёх частей: краулер («бот», «робот» или «паук»), индекс и программное обеспечение поисковой системы. Краулер нужен для обхода сети и создания списков веб-страниц. Индекс — большой архив копий веб-страниц. Цель программного обеспечения — оценивать результаты поиска. Благодаря тому, что поисковый робот в этом механизме постоянно исследует сеть, информация в большей степени актуальна. Большинство современных поисковых систем являются системами данного типа. системы, управляемые человеком (каталоги ресурсов). Эти поисковые системы получают списки веб-страниц. Каталог содержит адрес, заголовок и краткое описание сайта. Каталог ресурсов ищет результаты только из описаний страницы, представленных ему веб-мастерами. Достоинство каталогов в том, что все ресурсы проверяются вручную, следовательно, и качество контента будет лучше по сравнению с результатами, полученными системой первого типа автоматически. Но есть и недостаток — обновление данных каталогов выполняется вручную и может существенно отставать от реального положения дел. Ранжирование страниц не может мгновенно меняться. В качестве примеров таких систем можно привести каталог Yahoo, dmoz и Galaxy. гибридные системы. Такие поисковые системы, как Yahoo, Google, MSN, сочетают в себе функции систем, использующие поисковых роботов, и систем, управляемых человеком. мета-системы. Метапоисковые системы объединяют и ранжируют результаты сразу нескольких поисковиков. Эти поисковые системы были полезны, когда у каждой поисковой системы был уникальный индекс, и поисковые системы были менее «умными». Поскольку сейчас поиск намного улучшился, потребность в них уменьшилась. Примеры: и MSN Search. Рынок поисковых систем Google — самая популярная поисковая система в мире с долей на рынке 92,16 %. Bing занимает вторую позицию, его доля 2,88 %. Самые популярные поисковые системы в мире: Азия В восточноазиатских странах и в России Google — не самая популярная поисковая система. В Китае, например, более популярна поисковая система Soso. В Южной Корее поисковым порталом собственной разработки Naver пользуется около 70 % жителей Yahoo! Japan и Yahoo! Taiwan — самые популярные системы для поиска в Японии и Тайване соответственно. Россия и русскоязычные поисковые системы Поисковой системой Google пользуются 50,3 % пользователей в России, Яндексом — 47,9 %. Согласно данным LiveInternet в декабре 2017 года об охвате русскоязычных поисковых запросов: Всеязычные: Google (42,9 %) Bing (0,3 %) Yahoo! (0,0 %) и принадлежащие этой компании поисковые машины: , AltaVista, Англоязычные и международные: (механизм Teoma) Русскоязычные — большинство «русскоязычных» поисковых систем индексируют и ищут тексты на многих языках — украинском, белорусском, английском, татарском и других. Отличаются же они от «всеязычных» систем, индексирующих все документы подряд, тем, что, в основном, индексируют ресурсы, расположенные в доменных зонах, где доминирует русский язык, или другими способами ограничивают своих роботов русскоязычными сайтами. Яндекс (60,4 %) Mail.ru (3,5 %) Рамблер (0,2 %) Некоторые из поисковых систем используют внешние алгоритмы поиска. Количественные данные поисковой системы Google Число пользователей Интернета и поисковых систем и требований пользователей к этим системам постоянно растёт. Для увеличений скорости поиска нужной информации крупные поисковые системы содержат большое количество серверов. Сервера обычно группируют в серверные центры (дата-центры). У популярных поисковых систем серверные центры разбросаны по всему миру. В октябре 2012 года Google запустила проект «Где живёт Интернет», где пользователям предоставляется возможность познакомиться с центрами обработки данных этой компании. О работе дата-центров поисковой системе Google известно следующее: Суммарная мощность всех дата-центров Google, по состоянию на 2011 год, оценивалась в 220 МВт. Когда в 2008 году Google планировала открыть в Орегоне новый комплекс, состоящий из трёх зданий общей площадью 6,5 млн м2, в журнале Harper’s Magazine подсчитали, что такой большой комплекс потребляет свыше 100 МВт электроэнергии, что сравнимо с потреблением энергии города с населением 300 000 человек. Ориентировочное число серверов Google в 2012 году — 1 млн. Расходы Google на дата-центры составили в 2006 году — $1,9 млрд, а в 2007 году — $2,4 млрд. Размер всемирной паутины, проиндексированной Google на декабрь 2014 года, составляет примерно 4,36 миллиарда страниц. Поисковые системы, учитывающие религиозные запреты Глобальное распространение Интернета и увеличение популярности электронных устройств в арабском и мусульманском мире, в частности, в странах Ближнего Востока и Индийского субконтинента, способствовало развитию локальных поисковых систем, учитывающих исламские традиции. Такие поисковые системы содержат специальные фильтры, которые помогают пользователям не попадать на запрещённые сайты, например, сайты с порнографией, и позволяют им пользоваться только теми сайтами, содержимое которых не противоречит исламской вере. Незадолго до мусульманского месяца Рамадан, в июле 2013 года, миру был представлен — система, выдающая пользователям только халяльные «правильные» ссылки, фильтруя результаты поиска, полученные от других поисковых систем, таких как Google и Bing. Двумя годами ранее, в сентябре 2011 года, был запущен поисковый движок I’mHalal, предназначенный для обслуживания пользователей Ближнего Востока. Однако этот поисковый сервис пришлось вскоре закрыть, по сообщению владельца, из-за отсутствия финансирования. Отсутствие инвестиций и медленный темп распространения технологий в мусульманском мире препятствовали прогрессу и мешали успеху серьёзного исламского поисковика. Очевиден провал огромных инвестиций в веб-проекты мусульманского образа жизни, одним из которых был . Он получил миллионы долларов от инвесторов, таких как Rite Internet Ventures, и теперь — в соответствии с последним сообщением от I’mHalal перед его закрытием — выступает с сомнительной идеей о том, что «следующий Facebook или Google могут появиться только в странах Ближнего Востока, если вы поддержите нашу блестящую молодёжь». Тем не менее исламские эксперты в области Интернета в течение многих лет занимаются определением того, что соответствует или не соответствует шариату, и классифицируют веб-сайты как «халяль» или «харам». Все бывшие и настоящие исламские поисковые системы представляют собой просто специальным образом проиндексированный набор данных либо это главные поисковые системы, такие как Google, Yahoo и Bing, с определённой системой фильтрации, использующейся для того, чтобы пользователи не могли получить доступ к харам-сайтам, таким как сайты о наготе, ЛГБТ, азартных играх и каким-либо другим, тематика которых считается антиисламской. Среди других религиозно-ориентированных поисковых систем распространёнными являются Jewogle — еврейская версия Google и SeekFind.org — христианский сайт, включающий в себя фильтры, оберегающие пользователей от контента, который может подорвать или ослабить их веру. Персональные результаты и пузыри фильтров Многие поисковые системы, такие как Google и Bing, используют алгоритмы выборочного угадывания того, какую информацию пользователь хотел бы увидеть, основываясь на его прошлых действиях в системе. В результате, веб-сайты показывают только ту информацию, которая согласуется с прошлыми интересами пользователя. Этот эффект получил название «пузырь фильтров». Всё это ведёт к тому, что пользователи получают намного меньше противоречащей своей точке зрения информации и становятся интеллектуально изолированными в своём собственном «информационном пузыре». Таким образом, «эффект пузыря» может иметь негативные последствия для формирования гражданского мнения. Предвзятость поисковых систем Несмотря на то, что поисковые системы запрограммированы, чтобы оценивать веб-сайты на основе некоторой комбинации их популярности и релевантности, в реальности экспериментальные исследования указывают на то, что различные политические, экономические и социальные факторы оказывают влияние на поисковую выдачу. Такая предвзятость может быть прямым результатом экономических и коммерческих процессов: компании, которые рекламируются в поисковой системе, могут стать более популярными в результатах обычного поиска в ней. Удаление результатов поиска, не соответствующих местным законам, является примером влияния политических процессов. Например, Google не будет отображать некоторые неонацистские веб-сайты во Франции и Германии, где отрицание Холокоста незаконно. Предвзятость может также быть следствием социальных процессов, поскольку алгоритмы поисковых систем часто разрабатываются, чтобы исключить неформатные точки зрения в пользу более «популярных» результатов. Алгоритмы индексации главных поисковых систем отдают приоритет американским сайтам. Поисковая бомба — один из примеров попытки управления результатами поиска по политическим, социальным или коммерческим причинам. См. также Информационный поиск Статистика запросов Поисковый спам DataparkSearch Электронная библиотека#Списки библиотек и поисковые системы Семантическая паутина Система проверки правописания Примечания Литература Ссылки Информационные системы