Лекция 1. Примеры применения анализа данных, стандартные задачи и методы


Группа ВК: vk.com/data_mining_in_action
Репозиторий курса на гитхабе: github.com/vkantor/MIPT_Data_Mining_In_Action_2016
Слайды первой лекции выложены в репозиторий в папку lectures и на SlideShare: www.slideshare.net/xeadwl/lecture-1-introduction-66914456

Cassandra для хранения метаданных: успехи и провалы / Андрей Смирнов (Virtustream)


HighLoad 2017

Тезисы:
www.highload.ru/2017/abstracts/2917.html

Мы разработали и поддерживаем экзабайтное облачное объектное хранилище (S3-совместимое), и нам необходимо сохранять метаданные объектов. Работа с метаданными сложнее работы с данными, т.к. необходимо поддерживать конкурентные операции по записи/удалению одного и того же объекта, версионирование и т.п. Наше хранилище поддерживает работу в режиме active-active через два дата-центра (eventual consistency), что дополнительно усложняет слой метаданных.


Нашли ошибку в видео? Пишите нам на support@ontico.ru

Мой бывший фанат - история хейтараса


Наш Telegram канал — t.me/overlamer1
Второй канал — www.youtube.com/c/igorover
Паблик — overpublic1 — vk.com/over_view

Заказать рекламу вы можете здесь:
bit.ly/2nChGY8

Инстаграмчик здесь:
www.instagram.com/overbafer1

AliExpress в рамках закона [Bad AliExpress]:
vk.com/public137607137

Некультурный AliExpress:
vk.com/public146011210

КАК ВЗЛОМАТЬ СИСТЕМУ? — ТОПЛЕС


ДОСМОТРИТЕ ДО КОНЦА! В ЭТОМ ВЫПУСКЕ Я РАССКАЖУ КАК ХАКЕРЫ ВЗЛАМЫВАЮТ ЛЮБЫЕ СИСТЕМЫ.
Новые вещи по человеческим ценам на Avito ► goo.gl/Ky1dhL

Группа Avito ВКонтакте ► vk.com/avitoclub

▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰­▰▰

ОТДЫХАЕМ ОТ НАУКИ ТУТ ► goo.gl/LFf4Dj

▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰­▰▰
Я В VK ► vk.com/yanlapotkov
INSTAGRAM ► www.instagram.com/yan_lapotkov/
ГРУППА VK ► vk.com/toples_show
TWITTER ► twitter.com/drunish
▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰­▰▰
Смотрите больше видео:
КОСМОС ► goo.gl/uCkfD3
ТЕХНОЛОГИИ ► goo.gl/vLdH2H
ИГРЫ ► goo.gl/17LhoN
КИНО ► goo.gl/ZUgWGD
VLOG ► goo.gl/z88cuS
СТРАХ ► goo.gl/b6fu5K
ЖИВОТНЫЕ ► goo.gl/jn93tz
ОЧЕНЬ ИНТЕРЕСНЫЕ ► goo.gl/Prcrtj

▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰­▰▰

Реклама, сотрудничество: toples.show@gmail.com

▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰▰­▰▰

ИСТОЧНИКИ:

История Чарльза Пейса:
en.wikipedia.org/wiki/Charles_Peace
Репортаж о том, как хакеры получают отпечатки по фотографиям:
money.cnn.com/2014/12/30/technology/security/fingerprint-hack/
Обман Face ID с помощью маски:
nplus1.ru/news/2017/11/13/Face-ID?utm_source=politech

Обзор Parrot Security и встроенных утилит


t.me/Pulsechanel — канал Telegram, только там дополнительные и эксклюзивные материалы, а также текстовые материалы к видео. (https://tlgg.ru/Pulsechanel — альтернативная ссылка)
hacker-basement.ru/ — наш сайт. Можно почитать статьи, скачать программы из видео и различную обучающую литературу.

Текстовая версия здесь — hacker-basement.ru/2019/06/18/overview-parrot-security/

В этом видео мы поговорим об операционной системе Parrot Security. Это дистрибутив Linux основанный Debian, разработанный командой Frozenbox, специально для тестирования безопасности компьютерных систем и поиска и оценки уязвимостей.

Поддержать канал материально, для улучшения качества и количества контента, можно здесь:
www.donationalerts.com/r/pulse_ds
или (альтернативная ссылка) www.donationalerts.com/c/pulse_ds

Шифрование в TLS/SSL | Защищенные сетевые протоколы


Лекция по шифрованию в семействе протоколов TLS/SSL. Страница учебного курса — www.asozykin.ru/courses/networks_online

00:00 — Приватность данных
02:45 — Симметричное шифрование
03:59 — Ассиметричное шифрование
05:15 — Гибридное шифрование в TLS/SSL
06:42 — Алгоритм обмена ключами RSA
08:20 — Совершенная прямая секретность (perfect forward secrecy)
09:55 — Алгоритм обмена ключами Диффи-Хеллмана
15:37 — Итоги

Добавляйтесь в друзья в социальных сетях:
вКонтакте — vk.com/avsozykin
Instagram — www.instagram.com/sozykin_andr/
Facebook — www.facebook.com/asozykin
Twitter — twitter.com/AndreySozykin

Мой сайт — www.asozykin.ru

Мой канал с краткими и понятными объяснениями сложных тем в ИТ и компьютерных науках — www.youtube.com/c/AndreySozykinCS

Канальный уровень | Курс "Компьютерные сети"


Лекция по канальному уровню модели OSI. Курс «Компьютерные сети» — www.asozykin.ru/courses/networks_online.

Как можно поддержать курс:
1. Яндекс Кошелек — money.yandex.ru/to/410014298228017
2. PayPal — www.paypal.me/asozykin
Заранее спасибо за помощь!

Добавляйтесь в друзья в социальных сетях:
вКонтакте — vk.com/avsozykin
Facebook — www.facebook.com/asozykin
Twitter — twitter.com/AndreySozykin

Основные задачи канального уровня:
1. Передача сообщений по каналам связи – кадров (frame). Определение начала/конца кадра в потоке бит
2. Обнаружение и коррекция ошибок
3. Множественный доступ к каналу связи:
— Адресация
— Согласованный доступ к каналу связи

Методы выделения кадров:
— Указатель количества байт
— Вставка байтов (byte stuffing)
— Вставка битов (bit stuffing)
— Средства физического уровня

Обнаружение и исправление ошибок:
1. Обнаружение ошибок
— Контрольная сумма
2. Исправление ошибок
— Коды исправляющие ошибки (с избыточной информацией)
— Позволяют обнаруживать и исправлять ошибки
3. Повторная отправка данных
— Если в кадре обнаружена ошибка, его можно отправить заново.
— Повторная отправка кадра, который не дошел до получателя

Типы повторной отправки:
1. Остановка и ожидание.
2. Скользящее окно.

Канальный уровень в модели OSI состоит из двух подуровней:
1. Подуровень управления логическим каналом (LLC)
— Отвечает за передачу данных (создание кадров, обработка ошибок и т.д.)
— Общий для разных технологий
2. Подуровень управления доступом к среде (MAC):
— Совместное использование разделяемой среды
— Адресация
— Специфичный для разных технологий
— Не является обязательным

Технологии канального уровня:
— Ethernet, Wi-Fi (современные)
— Token Ring, FDDI, ATM, 100VG-AnyLAN (устаревшие)

Мой канал с краткими и понятными объяснениями сложных тем в ИТ и компьютерных науках —
goo.gl/kW93MA

Протокол IP: маршрутизация | Курс "Компьютерные сети"


Лекция по маршрутизации в компьютерных сетях. Курс «Компьютерные сети» — www.asozykin.ru/courses/networks_online.

Маршрутизация – поиск маршрута доставки пакета между сетями через транзитные узлы – маршрутизаторы

Этапы маршрутизации:
— Изучение сети
— Продвижение пакетов на маршрутизаторе

Столбцы таблицы маршрутизации:
— Адрес сети
— Маска подсети
— Шлюз
— Интерфейс
— Метрика.

Маршрутизатор по умолчанию — маршрутизатор, на который отправляются пакеты, для которых неизвестен маршрут доставки.

Мой канал с краткими и понятными объяснениями сложных тем в ИТ и компьютерных науках —
goo.gl/kW93MA