Mário M. Freire
         Full Professor (Professor Catedrático)

           Department of Computer Science, University of Beira Interior
           Rua Marquês de Ávila e Bolama, 6201-001 Covilhã, Portugal

           E-mail addresses: mfreire(at)computer.org  or  mfreire(at)acm.org  or  mario(at)di.ubi.pt



Tecnologias Cloud e Data Center / Cloud Technologies and Datacenter 2017/2018
Mestrado em Engenharia Informática / MS in Computer Science and Engineering

"Be. If you can not be a pine on the top of a hill, be a bush in the valley but be the best bush to the stream bank. Be a branch if you can not be a tree. If you can not be a branch, be a little grass and give joy to some way. If you can not be a highway, Be just a path, if you can not be the sun, be a star. It is not by size that you will have success or failure ... But be the best in whatever you are."

Pablo Neruda (1904-1973), Chilean poet-diplomat and politician.

Objetivos Gerais, Avaliação e Bibliografia / Course Description, Evaluation and Grading and Bibliography


Objetivos Gerais e Resultados de Aprendizagem / Course Objectives
O objetivo da unidade curricular consiste em dotar os estudantes de uma perspetiva ampla e integradora das tecnologias de virtualização e de datacenters. No final da unidade curricular o estudante deve ser capaz de sistematizar uma abordagem às diversas tecnologias de virtualização e de datacenters, que ofereça às aplicações e serviços elevada disponibilidade, maior flexibilidade, melhor utilização de recursos, maior escalabilidade e adaptabilidade e redução de custos. O estudante deve ser capaz de avaliar escolhas, soluções e compromissos envolvidos no desenvolvimento, instalação, utilização e gestão de infraestruturas virtualizadas e de datacenters.
The aim of the course is to provide students with a broad and integrative perspective of virtualization and datacenter technologies. At the end of the course, students should be able to systematize an approach to the various virtualization and datacenter technologies that provide applications and services with high availability, greater flexibility, better resource utilization, greater scalability and adaptability, and reduced costs. Students should be able to assess the choices, solutions and commitments involved in the development, deployment, use and management of virtualized infrastructures and datacenters.

Programa / Syllabus
Conceitos e níveis de implementação de virtualização. Estruturas, ferramentas e mecanismos de virtualização ao nível de hardware. Suporte de virtualização ao nível do sistema operativo. Virtualização de recursos. Virtualização de clusters e gestão de recursos. Virtualização para automação de datacenters. Projeto de datacenters. Projeto arquitetónico de clouds. Redes em ambientes cloud. Gestão de recursos interclouds. Aspetos de segurança e gestão da confiança em clouds.
Concepts and implementation levels of virtualization. Hardware-level virtualization structures, tools, and mechanisms. Virtualization support at the operating system level. Resource virtualization. Virtualization of clusters and resource management. Virtualization for datacenter automation. Design of datacenters. Architectural design of clouds. Networks in cloud environments. Inter-cloud resource management. Cloud security and trust management.

Métodos e Critérios de Avaliação / Evaluation and Grading
Teste de avaliação de conhecimentos/Exame: 40%.
Trabalho de síntese: 15%.
Projetos laboratoriais ou de campo: 45% (3x15%).

Teste de avaliação de conhecimentos/Exame: Teste sem consulta com duração de 1 hora; Teste constituído por 20 perguntas com 4 opções das quais apenas uma está correta; Respostas erradas não descontam sobre a pontuação dessas questões.
Trabalho de síntese: Trabalho realizado em grupo, sendo cada grupo constituído por 2 estudantes; Deve ser elaborado um relatório sobre um tema para exploração; O relatório será avaliado com base na qualidade, abrangência, profundidade e valor de síntese no contexto do tema.
Projeto laboratorial ou de campo: Trabalhos realizados em grupo, sendo cada grupo constituído por 2 estudantes; São propostos 3 trabalhos laboratoriais para realização durante as aulas práticas.

Written test/Exam: 40%.
Theorectical work: 15%.
Field or laboratory projects: 45% (3x15%).

Written test/Exam: Test with closed book with duration of 1 hour; The test comprises 20 questions with four options of which only one is correct; Wrong answers do not discount on the score of a given question.
Theorectical work: Work to be carried out in a group, each group consisting of 2 students; A report on a theme for exploration should be drawn up; The report will be evaluated based on the quality, breadth, depth and value of synthesis in the context of the theme.
Field or laboratory project: Works should be carried out in a group, each group consisting of 2 students; Three laboratory projects are proposed to be carried out during practical lectures.

Trabalho de síntese/Theorectical work
Tema 1 – Kubernetes Versus Docker Swarm (Docker Engine running in Swarm mode)
Tema 2 – Network Functions Virtualization
Cada grupo deve escolher um destes dois temas e elaborar um breve relatório, no qual, de forma clara, rigorosa e pedagógica, descreve o objecto de estudo e eventuais perspectivas de desenvolvimento futuro do tema escolhido. O relatório deve ser escrito usando o template do IEEE disponível na parte dos Projetos Laboratoriais e deve ter, no máximo, 12 páginas. O relatório deve ser enviado por email, para o endereço mario@di.ubi.pt e com subject TCDC 2017/2018 – Trabalho de Síntese, até 2018.06.08 23:59.

Projetos Laboratoriais/Lab Projects
Enunciado do Projeto Laboratorial 1 – Instalação, configuração e análise do desempenho de um hypervisor nativo
Enunciado do Projeto Laboratorial 2 – Comparação dos desempenhos de um hypervisor nativo e de um host-based hypervisor
Enunciado do Projeto Laboratorial 3 – Instalação e configuração do Docker (Community Edition (CE))

Template e Estrutura do Relatório do Projeto
Template de Artigos de Conferência do IEEE
Estrutura do Relatório do Projeto em 8 Páginas:
Título (<8 palavras): deve centrar-se no tópico, ser curto, claro e eye-catching; Autores e filiações (em 1-2 linhas após o título).
Abstract (<50 ~ 100 palavras): deve explicitar os objetivos da investigação, resumir os resultados da investigação e destacar as contribuições inovadoras.
Introdução (incluindo o título, abstract) (1 página): deve motivar os leitores para ler o resto do artigo e prepará-los com o background necessário.
Arquitetura, algoritmos, métodos, protocolos, resultados analíticos e exemplo ilustrado, etc. (2 páginas).
Configuração experimental (3 páginas): arquitetura do sistema implementado, detalhes de instalação e configuração, benchmarks e conjunto de dados utilizado.
Resultados experimentais 1 páginas): em figuras ou tabelas e respetivas interpretações e análise de desempenho.
Conclusões e Referências (1 página): Conclusões e lista de artigos relevantes referenciados no texto.

Bibliografia de Apoio à Unidade Curricular / Bibliography
Distributed and Cloud Computing: From Parallel Processing to the Internet of Things, Kai Hwang, Jack Dongarra, Geoffrey C. Fox (Authors), Morgan Kaufmann, 1st edition, 2011, ISBN-13: 978-0123858801, 672 pages.
Guide to Reliable Distributed Systems: Building High-Assurance Applications and Cloud-Hosted Services, Kenneth P. Birman (Author), Springer, 2012, ISBN-13: 978-1447124153, 730 pages.
Cloud Computing: A Hands-On Approach, Arshdeep Bahga, Vijay Madisetti (Authors), Vijay Madisetti, 2014, ISBN-13: 978-0996025508, 456 pages.


Plano das Aulas Teóricas / Schedule

Aula 1 (fevereiro 21, 2018, 09:00-11:00, sala 6.16).

Sumário: Apresentação do professor aos estudantes. Indicação do horário de atendimento e da localização do gabinete do professor. Objectivos da unidade curricular e competências a adquirir. Conteúdos programáticos. Método de avaliação. Bibliografia de apoio à unidade curricular.

Aula 2 (fevereiro 28, 2018, 09:00-11:00, sala 6.16).

Sumário: Conceitos e níveis de implementação de virtualização.
Conceito de virtualização, máquinas virtuais (VM) e middleware de virtualização, níveis de implementação de virtualização e respetivo mérito relativo, requisitos de projeto de Virtual Machine Monitors (VMM)/Hypervisors, comparação de VMMs e Hypervisor Software Packages: VMware Workstation, VMware ESX, Xen e QEMU/KVM.

Aula 3 (março 7, 2018, 09:00-11:00, sala 6.16).

Sumário: Estruturas, ferramentas e mecanismos de virtualização ao nível de hardware.
Tipos de hypervisors (hypervisors nativos ou bare-metal versus hosted hypervisors), arquiteturas de hypervisors (arquiteturas micro-kernel versus arquiteturas monolíticas, a arquitetura Xen), hosted hypervisors, hypervisors nativos com virtualização total e tradução binária, hypervisors nativos com paravirtualização e suporte de compilador.

Aula 4 (março 14, 2018, 09:00-11:00, sala 6.16).

Sumário: Virtualização de CPU, Memória e Dispositivos de I/O.
Suporte de hardware para virtualização; Virtualização de CPU, virtualização de memória, virtualização de entradas/saídas, virtualização de processadores multi-core.

Aula 5 (março 21, 2018, 09:00-11:00, sala 6.16).

Sumário: Suporte de virtualização ao nível do sistema operativo.
Funcionamento, vantagens e desvantagens, virtualização em plataformas Linux ou Windows, Linux containers, suporte de middleware para virtualização.

Aula 6 (abril 4, 2018, 09:00-11:00, sala 6.16).

Sumário: Virtualização de recursos.
Virtualização assistida por hardware, virtualização de CPU, virtualização de memória, virtualização de entradas/saídas, virtualização de processadores multicore.

Aula 7 (abril 11, 2018, 09:00-11:00, sala 6.16).

Sumário: Virtualização de clusters e gestão de recursos.
Clusters físicos versus clusters virtuais, etapas para migração ao vivo de VMs e impacto no desempenho, migração de memória, ficheiros e recursos de rede, instalação dinâmica de clusters virtuais.

Aula 8 (abril 18, 2018, 09:00-11:00, sala 6.16).

Sumário: Virtualização para automação de datacenters
Consolidação de servidores em datacenters, gestão de armazenamento virtual, gestores de infraestruturas virtuais e sistemas operativos para datacenters virtualizados.

Aula 9 (maio 2, 2018, 09:00-11:00, sala 6.16).

Sumário: Projeto de datacenters
Projeto de datacenters à escala de warehouses; redes intradatacenter, datacenters modulares em contentores, aspetos de gestão de datacenters.

Aula 10 (maio 9, 2018, 09:00-11:00, sala 6.16).

Sumário: Projeto arquitetónico de clouds.
Projeto genérico da arquitetura de uma cloud, desenvolvimento arquitetónico de uma cloud em camadas, suporte de virtualização e disaster recovery, desafios do projeto arquitetónico.

Aula Suplementar (maio 22, 2018, 14:30-17:30, PT Datacenter).

Sumário: Visita ao datacenter da Portugal Telecom.

Aula 11 (maio 16, 2018, 09:00-11:00, sala 6.16).

Sumário: Redes em ambientes cloud.
Arquitetura de rede de um datacenter, software defined networks, virtualization of network equipment, network functions virtualization, mobile cloud networking, fog computing and networking, networking-as-a-service.

Aula 12 (maio 23, 2018, 09:00-11:00, sala 6.16).

Sumário: Realização e correção da frequência.

Aula 13 (maio 30, 2018, 09:00-11:00, sala 6.16).

Sumário: Gestão de recursos interclouds.
Serviços de computação em cloud estendidos, fornecimento de recursos e instalação de plataformas, criação e gestão de máquinas virtuais, intercâmbio global de recursos cloud.

Aula 14 (junho 6, 2018, 09:00-11:00, sala 6.16).

Sumário: Aspetos de segurança e gestão da confiança em clouds.
Estratégias de defesa da segurança em clouds, deteção distribuída de intrusos/anomalias, técnicas de proteção de dados e de software, isolamento e sandboxing, problemas de segurança específicos a tecnologias de virtualização, gestão da confiança em datacenters virtualizados, proteção guiada por reputação de datacenters.



“One of the problems of being a pioneer is you always make mistakes and I never, never want to be a pioneer. It’s always best to come second when you can look at the mistakes the pioneers made”.

Seymour Cray (1925-1996), Public Lecture at Lawrence Livermore Laboratories on the introduction of the CRAY-1, 1976.
Last update: 2018/03/14.