Информационные технологии (ИТ)

Материалы 2021 года, слайды могут быть полезны.

Материалы к лекциям

Язык и среда R

https://www.r-project.org

• Кто за всех решил, что python удобен для «гражданской» аналитики?
• Важно ли DS аналитику знать про software development?
• Как R облегчает мою жизнь разработчика

Форматы данных

• «Абсолютный минимум, который каждый разработчик программного обеспечения обязательно должен знать о Unicode и наборах символов» (оригинал, перевод).

• Текстовые форматы:

  • CSV, TSV (Comma/Tab-Separated Values)
  • JSON (JavaScript Object Notation)
  • XML (eXtensible Markup Language)

• Языки описания интерфейсов (interface description language, IDL):

  • ASN.1
  • Protocol Buffers (язык)
  • Kaitai Struct

• Бинарные форматы:

  • ASN.1 BER (цикл статей на «Хабре»)
  • Protocol Buffers (кодировка)
  • HDF5

• Случай из практики: описание проприетарного формата в Kaitai Struct (см. объяснение в документации проекта по ссылке).

• Случай из практики: предложения по оптимизации модели данных (со слайда 16). Существующая структура сообщений Protocol Buffers создавала значительные накладные расходы. Переход к передаче данных, сгруппированных по атрибутам вместо сущностей, резко снизил их.

Сети

• Материалы дисциплины по сетям и сетевому программированию, там же — еще ссылки.

• Сети для самых маленьких (часть 2, разделы «OSI», «Путь пакета»)

• Мир, в котором IPv6 придуман хорошо: статья, в которой простым языком объясняют логику создания сетевых протоколов, и из которой видно, как инертна модернизация в сетях.