Cassandra для хранения метаданных: успехи и провалы / Андрей Смирнов (Virtustream)


HighLoad 2017

Тезисы:
www.highload.ru/2017/abstracts/2917.html

Мы разработали и поддерживаем экзабайтное облачное объектное хранилище (S3-совместимое), и нам необходимо сохранять метаданные объектов. Работа с метаданными сложнее работы с данными, т.к. необходимо поддерживать конкурентные операции по записи/удалению одного и того же объекта, версионирование и т.п. Наше хранилище поддерживает работу в режиме active-active через два дата-центра (eventual consistency), что дополнительно усложняет слой метаданных.


Нашли ошибку в видео? Пишите нам на support@ontico.ru

Канальный уровень | Курс "Компьютерные сети"


Лекция по канальному уровню модели OSI. Курс «Компьютерные сети» — www.asozykin.ru/courses/networks_online.

Как можно поддержать курс:
1. Яндекс Кошелек — money.yandex.ru/to/410014298228017
2. PayPal — www.paypal.me/asozykin
Заранее спасибо за помощь!

Добавляйтесь в друзья в социальных сетях:
вКонтакте — vk.com/avsozykin
Facebook — www.facebook.com/asozykin
Twitter — twitter.com/AndreySozykin

Основные задачи канального уровня:
1. Передача сообщений по каналам связи – кадров (frame). Определение начала/конца кадра в потоке бит
2. Обнаружение и коррекция ошибок
3. Множественный доступ к каналу связи:
— Адресация
— Согласованный доступ к каналу связи

Методы выделения кадров:
— Указатель количества байт
— Вставка байтов (byte stuffing)
— Вставка битов (bit stuffing)
— Средства физического уровня

Обнаружение и исправление ошибок:
1. Обнаружение ошибок
— Контрольная сумма
2. Исправление ошибок
— Коды исправляющие ошибки (с избыточной информацией)
— Позволяют обнаруживать и исправлять ошибки
3. Повторная отправка данных
— Если в кадре обнаружена ошибка, его можно отправить заново.
— Повторная отправка кадра, который не дошел до получателя

Типы повторной отправки:
1. Остановка и ожидание.
2. Скользящее окно.

Канальный уровень в модели OSI состоит из двух подуровней:
1. Подуровень управления логическим каналом (LLC)
— Отвечает за передачу данных (создание кадров, обработка ошибок и т.д.)
— Общий для разных технологий
2. Подуровень управления доступом к среде (MAC):
— Совместное использование разделяемой среды
— Адресация
— Специфичный для разных технологий
— Не является обязательным

Технологии канального уровня:
— Ethernet, Wi-Fi (современные)
— Token Ring, FDDI, ATM, 100VG-AnyLAN (устаревшие)

Мой канал с краткими и понятными объяснениями сложных тем в ИТ и компьютерных науках —
goo.gl/kW93MA

Модель и стек протоколов TCP/IP | Курс "Компьютерные сети"


Стек протоколов TCP/IP и эталонная модель организации сетей на его основе. Лекции по курсу «Компьютерные сети» — goo.gl/0aIOuf
Страница курса — www.asozykin.ru/courses/networks_online

Модель TCP/IP – одна из двух эталонных моделей организации сетей, которые популярны в настоящее время. Это фактический (de facto) стандарт на основе стека протоколов TCP/IP. Модель TCP/IP описывает, как нужно строить сети на основе разных технологий, чтобы в них работал стек TCP/IP.

Модель содержит 4 уровня:
— Сетевых интерфейсов
— Интернет
— Транспортный
— Прикладной

По назначению уровни похожи на уровни модели взаимодействия открытых систем ISO OSI.
Уровень сетевых интерфейсов обеспечивает интеграцию стека TCP/IP с существующими сетевыми технологиями Ethernet, Wi-Fi и др. Уровень интернет (аналог сетевого уровня OSI) нужен для объединения сетей, построенных на основе разных сетевых технологий, и поиска маршрута в крупной составной сети. Транспортный уровень, как и в модели OSI, обеспечивает связь между процессами на разных компьютерах сети.

В прикладном уровне модели TCP/IP сочетаются функции уровней сеансового, представления и прикладного модели OSI. Считается, что если приложению TCP/IP нужны возможности сеансового уровня, или уровня представления, то оно должно самостоятельно их реализовать.

Стек протоколов TCP/IP – наиболее популярный набор сетевых протоколов в настоящее время. Он является основой интернет и широко используется.

Лекция «Основы организации компьютерных сетей» youtu.be/EPvxn9KvBvs
Лекция «Модель взаимодействия открытых систем (ISO OSI)»
youtu.be/1eiBNM6MpqM

Практические занятия по курсу «Компьютерные сети»
goo.gl/YP3l83

Мой канал с краткими и понятными объяснениями сложных тем в ИТ и компьютерных науках:
goo.gl/kW93MA

Алгоритмы на Python 3. Лекция №5


Практика: judge.mipt.ru/mipt_cs_on_python3/
Telegram-группа: t.me/tkhirianov_mipt_cs_on_python3
Спонсировать: www.patreon.com/tkhirianov или www.paypal.me/tkhirianov

курс: Информатика. Алгоритмы и структуры данных на Python 3.
лектор: Хирьянов Тимофей Фёдорович
03.10.2017

Темы, рассмотренные на лекции №5:
— Список как массив данных.
— Линейный поиск в массиве.
— Копирование массива. Копирование задом-наперёд.
— Алгоритм обращения массива.
— Алгоритм циклического сдвига в массиве.
— Добавление элемента в конец и в начало массива.
— Удаление элемента из конца и начала массива.
— Ссылочная модель данных в Python. Изменяемость списка.
— Решето Эратосфена.

MAC адреса | Курс "Компьютерные сети"


Лекция по адресам канального уровня — MAC-адресам. Курс «Компьютерные сети» — www.asozykin.ru/courses/networks_online

Служат для идентификации сетевых интерфейсов узлов сети.

MAC-адреса применются в технологиях канального уровня:
— Ethernet (IEEE 802.3)
— Wi-Fi (IEEE 802.11)

Регламентированы стандартом IEEE 802. Длина 6 байт (48 бит)
Форма записи – шесть шестнадцатеричных чисел:
1C-75-08-D2-49-45
1C:75:08:D2:49:45

Лекция «Канальный уровень» — youtu.be/zYiKcbmBfgU
Лекция «Технология Ethernet» — youtu.be/5hllhU_5vtY

Поддержать курсы деньгами можно через Яндекс Кошелек — money.yandex.ru/to/410014298228017
Заранее спасибо за помощь!

Мой канал с краткими и понятными объяснениями сложных тем в ИТ и компьютерных науках —
goo.gl/kW93MA

UFI Box - ISP подключение, обзор


►Тепловизоры:
♥ HT-02 самый дешевый тепловизор с матрицей 60*60 (ниже — это дно)
ali.pub/3rof8t за 11 т
♥ HT-A1 с матрицей 220*160 (22 т. цена на момент опубликования видео)
ali.pub/308nrh
ali.pub/3hcg5w
♥ HT-a2 с матрицей 320*240:
ali.pub/3n47gi
ali.pub/3q41ln
♥ HT-201 тепловизор для телефона с матрицей 320*240 за 24 т
ali.pub/3rodyx
♥ Seek Thermal
ali.pub/3rq62s
►Линзы ZnSe
ali.pub/308nus
ali.pub/308nxp
►Держатели
ali.pub/308o1s
ali.pub/308od2

►Лабораторные блоки питания:
♥ ЛБП Yihua 3005D (из видео)
ali.pub/3hcfeh
♥ ЛБП PS-305 на 30 v 5 A за 2600 из россии
ali.pub/3ro719
♥ ЛБП R-SPS3010 на 30 v 10 A за 2800
ali.pub/3ro3ll
♥ЛБП WANPTEK с любыми параметрами на выбор от 3 т
ali.pub/3ro8e2
♥ЛБП WANPTEK в черном исполнении с индикатором мощности
ali.pub/3roahi
♥ ЛБП LW-K3010D на 30 v 10 A за 3200 из россии
ali.pub/3ro4tx
♥ ЛБП KORAD KA3005D за 5200 с доставкой из россии
ali.pub/3ro9l1
♥ ЛБП для телефонов
ali.pub/3roc9o

►Осциллографы
В разделе до 4 т
♥ Мини Осциллограф DSO-112A 2 мгц
ali.pub/3039c9
♥ Осциллограф приставка на 20 мгц
ali.pub/3039r1
♥ Портативный осциллограф на 30 мгц
ali.pub/3039tr
Более 4 т
♥ Самый дешевый портативный осциллограф на 100 мгц за 5 т:
ali.pub/3q3xup
♥ Самый дешевый осциллограф (стационарный 13 т) 100 мгц:
ali.pub/3kipdy
♥ Самый дешевый осциллограф (стационарный 17.5 т) 200 мгц:
ali.pub/3q40n1
ali.pub/3q40zo
♥ На 70 мгц:
ali.pub/2b0vly

►Мультиметры
RM 301 302 303
ali.pub/3se6fx
RM 101 102 109 111
ali.pub/3se6uw
RM409b
ali.pub/3se7l5

►Паяльные станции T12:
ali.pub/3rotwq

►Не дорогой нижний подогрев 853A
ali.pub/3kibzq
ali.pub/3kidi6

Микроскопы:
►Хороший тринокулярный микроскоп ( из видео) для пайки и съемки видео:
ali.pub/32qzuo
ali.pub/3q42ax
►Микроскоп в комплекте с камерой и штативом
ali.pub/3rx8ba
♥ Без камеры
ali.pub/3rxbhf
♥ Самый дешевый комплект
ali.pub/3rxbws
►Диоптрические окуляры 10x/23 с наглазниками
ali.pub/38pb6p
► Штатив для микроскопа крутой
ali.pub/237keb
►Простой штатив
ali.pub/35z5y3
►Штатив с регулировкой по вылету:
ali.pub/3q42iw
►Светодиодная подсветка 56 и 144 диода
ali.pub/33cec6
ali.pub/2m62nn
►Линзы барлоу
ali.pub/358v3s

►Программаторы:
♥ самый дешевый CH341 (200 рублей):
ali.pub/3424px
♥ К нему понадобятся колодки:
♥ на 150 mil
ali.pub/1m9lfh
♥ на 200 mil
ali.pub/1m9lgu
♥ Переходник на 1.8 v:
ali.pub/2fp276
► Недорогой программатор (TL866II) с колодками:
ali.pub/38tnz8
►SVOD 3 программатор универсальный работа с мульт. чтение пост кодов чтение АКБ прошивка матриц тест клавиатур
ali.pub/3rx5fg

►Жаропрочные коврики на любой размер:
♥ коврик 34x23
ali.pub/2foztf
♥ коврик 35x25
ali.pub/2fp01l
♥ коврик 40X30
ali.pub/3rwvvv
♥ коврик 45x30 с отделениями для инструмента и мелочевки
ali.pub/2fp0a5
♥ коврик 49x35 с намагниченными отделениями
ali.pub/3rwwje

►UFI BOX
ali.pub/2wflaq
►E-MATE box
ali.pub/2uzz65
►RFNT2 (тестер батарей)
ali.pub/1sedlm
►RFNT3
ali.pub/3qoekq
►Столик для плат телефонов
ali.pub/3kiccy
►Насадка на фен под 45 градусов
ali.pub/38wxus
►баночки для спирта
ali.pub/2w7ea6
►трафареты DDR
ali.pub/2v1ore
►Переходник DDR3
ali.pub/38paws
► Книга с SMD компонентами
ali.pub/270zp2
►Тонкий хороший пинцет:
ali.pub/333c4w
►Трафарет BGA для samsung htc huawei Android MTK
ali.pub/2v1od7
►Антистатические перчатки:
ali.pub/32i52k
ali.pub/32i51e

Расходники:
►Клей
♥ B-7000
ali.pub/3lfxfx
♥ T-7000
ali.pub/3lfxly
♥ B-7000 T-7000 от Mehanic:
ali.pub/3lfxsd
► китайская зеленка
ali.pub/2fp1d1
►Хорошая флюсованная оплетка:
ali.pub/333br3
►припой механик (свинец, флюсованный)
ali.pub/2w7czi
►паяльная паста XG-Z40
ali.pub/2wg15m
►RMA-218 (флюс для пайки)
ali.pub/3ro2bb
Запись аудио:
►Хороший петличный микрофон (без шумов и хорошим усилением) для записи на телефон
ali.pub/3rntki

Likecoin – крипта за лайки:
likecoin.pro/@freeqwer

UFI BOX
ali.pub/2wflaq

Извлечение пользовательских данных из emmc на плате samsung n8000 с помощью UFI box и ISP подключения.

How Israel Rules The World Of Cyber Security | VICE on HBO


U.S. intelligence agencies accuse Russia of hacking the 2016 presidential election, a Ben Ferguson travels to Tel Aviv to find out how Israel is on its way to becoming the worlds top cyber superpower.

Subscribe to VICE News here: bit.ly/Subscribe-to-VICE-News

Check out VICE News for more: vicenews.com

Follow VICE News here:
Facebook: www.facebook.com/vicenews
Twitter: twitter.com/vicenews
Tumblr: vicenews.tumblr.com/
Instagram: instagram.com/vicenews
More videos from the VICE network: www.fb.com/vicevideo

#VICEonHBO

№311 - Какие книги надо обязательно прочитать, чтобы был успех в бизнесе? Спойлер - никакие... :)


Собственно — не читайте книг и будет вам счастье. Забыл — надо просто что-то делать :)

Наш канал в Telegram tlgg.ru/bezsmuzi — там еще больше информации о том, как мы строим бизнес…

Наши проекты:
Защита от скликивания рекламы clickfraud.ru
Разработка мобильных приложений notissimus.com
Мониторинг цен конкурентов xmldatafeed.com
Конструктор мобильных приложений appropio.com
Бесплатная CRM offlinecrm.ru

Я в социальных сетях:

youtube.com/c/maximkulgin
www.facebook.com/mkulgin
www.linkedin.com/in/mkulgin

«Реальная безопасность и система защиты информации»


www.mgimo.ru/news/social_news/document230258.phtml
8 ноября 2012 года в МГИМО прошел второй мастер-класс «Реальная безопасность и система собственной защиты информации» в рамках подготовки к студенческой конференции «Виртуальная свобода и реальная безопасность».
Мастер-класс провел советник по защите информации в Администрации президента Владимир Николаевич Алексеенко.