Recruiting Process
Os processos seletivos na Evalart são gerenciados utilizando “Processos”. O primeiro passo é criar o processo utilizando a opção “Novo Processo” no menu “Processo”. Depois que um processo for criado, você poderá atribuir a ele os testes que deseja utilizar no processo.
Por exemplo, para um processo no qual você busca contratar um Desenvolvedor Java que fale inglês, você poderia utilizar o teste “Desenvolvedor Java” e o teste de inglês “Inglês Intermediário”. Isso é feito a partir do módulo de configuração do processo.
Neste módulo, você também pode adicionar as pessoas que serão convidadas para o processo (em processos com convite) e obter o link de acesso aos testes do processo (que pode ser enviado automaticamente por e-mail, se desejado).
À medida que os candidatos respondem aos testes, o status dos testes e os relatórios detalhados dos resultados ficam disponíveis. Você também pode registrar em qual fase do processo cada candidato está e qual é o seu status, para ter uma visão clara dos candidatos (por exemplo, saber quais candidatos foram pré-selecionados ou descartados).
Para criar um novo processo, acesse o menu principal, clique no menu “Processo” e, em seguida, selecione “Novo Processo”. Depois de realizar essa ação, um formulário será aberto e você deverá inserir algumas informações:
Nome do Processo: Este é o nome que você deseja atribuir ao processo, como “Desenvolvedor Java Sênior”. Observe que esse texto será visível para os candidatos.
Descrição: Esta é uma descrição mais detalhada do que está sendo buscado no processo. Essas informações não ficam visíveis para os candidatos.
Tipo de Cadastro: Este campo determina como os candidatos acessarão o processo e os testes que ele contém. Existem dois tipos:
Por convite; não requer cadastro: Quando esta opção é selecionada, apenas os candidatos convidados para o processo poderão participar. Você deverá inserir os dados de todos os candidatos que serão incluídos no processo (ou selecionar aqueles que já estão cadastrados no banco de dados). Cada candidato receberá um link pessoal para acessar seus testes. Esta é a opção padrão e a mais utilizada.
Sem convite, requer cadastro: Os processos configurados com esta opção não exigem uma lista de candidatos. Para cada teste, é gerado um único link que pode ser utilizado por qualquer pessoa. Ao clicar no link, a pessoa deverá inserir suas informações. Esta opção geralmente é utilizada quando se deseja criar uma candidatura aberta, na qual as pessoas podem acessar os testes diretamente. Por exemplo, você pode publicar um aviso em uma página de busca de emprego com os links dos testes. As pessoas interessadas poderão clicar no link e realizar as avaliações. Você terá acesso aos dados das pessoas que se cadastraram, assim como aos resultados de suas avaliações.
Observações: Comentários ou anotações que você deseja adicionar ao processo (não ficam visíveis para os candidatos).
Clique em “Salvar” para finalizar.
Para configurar um processo, acesse o menu de processos e selecione “Lista de Processos”. O processo criado mais recentemente aparecerá no início da lista. Para acessar o módulo de configuração do processo, clique no ícone de engrenagem correspondente ao processo que deseja configurar.
Depois de acessar o módulo, as informações do processo selecionado serão exibidas. Você pode definir uma data e um horário limite para o processo (nesse caso, os testes só poderão ser respondidos até essa data), mas essa configuração é opcional.
Na seção de testes, você pode adicionar testes ao processo, que serão utilizados para avaliar os candidatos. Para isso, clique no ícone de pasta ao lado do título do teste. Uma pequena janela será aberta, permitindo navegar pelos testes e selecionar um ou mais deles. Clique em “Selecionar” para adicionar os testes selecionados ao processo.
Se o processo for do tipo “por convite”, haverá uma seção no canto inferior direito para adicionar candidatos ao processo. Você pode adicionar pessoas que já estão no seu banco de dados clicando no botão “Escolher Candidatos” nessa seção ou pode clicar no símbolo “+” para criar novas pessoas que serão adicionadas ao processo. Também é possível criar candidatos carregando-os a partir de um arquivo de texto. Primeiro, clique no botão “Escolher Candidatos” e, em seguida, no botão “Enviar arquivo CSV”.
Para carregar um arquivo CSV, ele deve estar separado por vírgulas e ter a seguinte estrutura: E-mail, Nome, Sobrenome.
Certifique-se de clicar em “Salvar” após adicionar pessoas ou testes ao processo. Basta clicar no botão “Enviar” para enviar um e-mail para cada candidato.
Você pode personalizar o e-mail que será enviado ou utilizar outro modelo clicando no botão de envelope. Isso abrirá um editor onde você poderá modificar o texto ou utilizar um modelo diferente.
(Para inserir conteúdo dinâmico no e-mail, você pode utilizar as etiquetas. Por exemplo, para o link dos testes, a etiqueta é {$links}. Clique em “Inserir Etiqueta” para visualizar as etiquetas disponíveis.)
Por exemplo, para inserir o link dos testes, utilize a etiqueta {$links}.
Se você deseja salvar a mensagem para utilizá-la em outros processos, pode salvá-la como um modelo clicando em “Salvar Modelo”. Para salvá-la apenas no processo atual, clique em “Salvar”. Você pode utilizar a opção de visualização prévia para ver a mensagem da mesma forma que um candidato a visualizaria.
Você também pode enviar manualmente o link aos candidatos. Clique na engrenagem ao lado do candidato para quem deseja enviar o link manualmente. Uma mensagem será exibida perguntando se você deseja criar tentativas e visualizar os links ou enviar. Se clicar em “Enviar”, um e-mail será enviado apenas para esse candidato.
Se você clicar em “Criar Tentativas e visualizar links”, as tentativas de teste desse candidato serão geradas e os links serão exibidos. Para copiar o link, clique com o botão direito sobre ele e selecione a opção de copiar o link (essa opção pode variar de acordo com o navegador). Ao fazer isso, os links permanecerão como “Não enviado”. Você pode clicar no ícone de envelope ao lado do texto “Não enviado” para marcá-los como enviados (isso permitirá lembrar que o link já foi enviado para esse candidato).
Se o processo não exigir convite, a lista de pessoas não será exibida. Nesse tipo de processo, existe um link único para cada teste, que pode ser utilizado por qualquer candidato. Para visualizar os links, clique no ícone de link. Para que os links funcionem nesse tipo de processo, é necessário adicionar testes do seu plano ao processo. Para isso, clique no botão “+”. Por exemplo, se você adicionar 6 testes, apenas 6 testes poderão ser respondidos nesse processo.
Por exemplo, se o seu processo possui 2 testes e você disponibiliza os links desses testes em uma página da web, ao ultrapassar o limite de 6 testes respondidos (por exemplo, se 3 pessoas responderem aos dois testes), qualquer pessoa que clicar no link verá um erro informando que o teste não está disponível no momento. Na seção de testes deste módulo (canto inferior direito), você poderá visualizar quantos testes foram adicionados, quantos já foram utilizados e quantos ainda estão disponíveis.
Depois de enviar os testes aos candidatos, você poderá visualizar o status de cada tentativa e os relatórios de resultados de um processo específico acessando a lista de processos e clicando no ícone de pasta aberta. (Você pode visualizar as informações agrupadas por pessoa ou sem agrupamento, utilizando a opção localizada no canto superior direito).
As tentativas de teste criadas recentemente estarão no status “CRE”. Se o candidato clicar no link e iniciar o teste, ele passará para o status “PRG” (Em andamento). Se você cancelar uma tentativa de teste, ela passará para o status “CAN” (Cancelado). Os testes cancelados (dependendo das condições) terão o crédito utilizado revertido, ou seja, o crédito do teste será adicionado novamente ao seu plano ou ao processo.
Para as tentativas de teste concluídas, você poderá visualizar o relatório de resultados (caso o teste tenha um tipo de relatório atribuído). Para visualizar o relatório, clique no ícone de lupa. Os relatórios concluídos também podem ser cancelados clicando no ícone de lixeira, mas, nesse caso, o crédito não será revertido.
Além disso, existem duas outras operações que você pode realizar a partir dessa lista. Uma delas é recalcular a pontuação (isso é utilizado quando você criou um teste com determinadas condições de pontuação e, posteriormente, alterou essas condições depois que o candidato já concluiu o teste). Para recalcular, clique no ícone de seta circular. Para testes expirados, também é possível forçar o cálculo da pontuação clicando no botão de confirmação.
A outra opção oferecida por essa lista é “redefinir” uma tentativa de teste. Clique no ícone com o raio; isso retornará o teste ao seu estado inicial (como quando foi criado). Essa opção pode ser útil caso um candidato enfrente algum problema. Por exemplo, o candidato perdeu a conexão com a Internet durante o teste e, ao retomá-lo, o tempo havia expirado. Nesse caso, ele pode solicitar a realização do teste novamente.
Existem outras formas de visualizar os resultados. Para ver os últimos testes de qualquer processo, você pode utilizar o relatório Visualizar Testes Enviados no menu principal (em Relatórios). Também é possível visualizar todas as tentativas de teste de um candidato específico acessando a lista de pessoas no menu do processo e clicando no ícone de pasta. A visão geral dos relatórios permite visualizar os resultados por candidato, ordenados por ranking, ou como uma lista completa de todos os testes.
Por fim, a página principal do administrador da Evalart (clique no logotipo da Evalart dentro do módulo de administração) contém gráficos e informações sobre os processos e testes ativos em uma única visualização.
A Evalart permite editar a pontuação de qualquer tentativa de teste (uma tentativa de teste corresponde a um teste respondido por um candidato específico). Esse recurso é útil quando você determina que o candidato deve receber uma pontuação diferente da atribuída automaticamente pelo sistema. Isso pode ocorrer, por exemplo, quando o candidato fornece uma resposta que está, de modo geral, correta, mas apresenta um pequeno erro na forma como foi respondida (diferente do esperado para aquela questão). Nesse caso, o sistema atribuiria nota zero, mas o avaliador pode optar por conceder uma pontuação parcial. Essa opção também é utilizada para a correção manual de questões.
Para editar manualmente uma tentativa de teste, basta clicar no ícone de lápis em qualquer lista de tentativas de teste (como no relatório de testes respondidos). Isso abrirá a tela de edição da tentativa de teste.
Para alterar uma pontuação, selecione a questão e clique no ícone de lápis no campo “Pontuação Manual”. Também é possível editar a descrição do resultado e até mesmo modificar a resposta do candidato (por exemplo, se você considerar que ele cometeu um pequeno erro e quiser verificar isso corrigindo diretamente o código). Nesses casos, a resposta original do candidato é preservada e poderá ser restaurada, se necessário.
Com a Evalart, você pode gerenciar o processo seletivo acompanhando o status e a etapa em que cada candidato se encontra (acompanhamento de candidatos).
Por padrão, os processos utilizam o fluxo genérico da Evalart. Para gerenciar o status e a etapa de cada candidato, acesse o menu Processos Seletivos e, em seguida, selecione a opção Fluxo do Processo. A partir daí, você pode mover os candidatos para a etapa em que se encontram simplesmente arrastando e soltando-os.
Também é possível alterar o status do candidato clicando no campo de status (o campo com pontos azuis sublinhados). Além disso, você pode adicionar ou editar uma avaliação de uma a cinco estrelas para atribuir uma nota aos seus candidatos.
Se desejar, você pode criar seu próprio fluxo, com os status e as etapas de que precisar. Para isso, acesse Configurações e, em seguida, Fluxos de Processo, o que abrirá a tela de configuração dos fluxos de processo. A partir daí, você poderá criar um novo fluxo ou editar um já existente.
Após criar um fluxo, você pode arrastar e soltar as etapas que deseja incluir (ou criar suas próprias etapas). Em seguida, adicione os status que os candidatos poderão ter dentro dessas etapas, arrastando-os para a etapa correspondente ou criando novos status, se necessário.
Para atribuir um fluxo de processo a um processo seletivo, basta selecioná-lo ao criar um novo processo seletivo ou alterá-lo editando o processo que deseja configurar com um fluxo diferente.
Questions
Os testes são compostos por questões. Existem vários tipos de questões no Evalart, como questões de texto aberto, de múltipla escolha ou de programação. O Evalart possui um amplo banco de dados de questões de diversos tipos e categorias, mas o usuário também pode criar suas próprias questões (ou criar versões modificadas das existentes).
Para ver as questões disponíveis, editar ou criar novas questões, acesse o menu “Testes” e selecione a opção “Questões”. Para adicionar questões a um Questionário, utilize o Construtor de Questionários.
Ao acessar o menu “Testes” e selecionar “Questões”, será exibida uma lista com todas as questões disponíveis. A partir dessa tela, você poderá criar novas questões ou visualizar, editar e excluir questões existentes. Para criar uma nova questão, clique no botão correspondente. Clique no ícone de lápis para editar uma questão (as questões que não possuem o ícone de lápis não podem ser editadas; no entanto, elas podem ser clonadas e, posteriormente, editadas).
Em ambos os casos, será aberta a tela de edição de questões de múltipla escolha. O botão de visualização (ícone de olho) permite ver como a questão será exibida para o usuário. Na parte inferior da tela estão os botões “Salvar” e “Clonar”. Quando uma questão é clonada, uma nova questão idêntica à original é criada (isso é útil quando várias questões semelhantes estão sendo criadas ou quando é necessário editar uma questão da biblioteca de questões da Evalart).
Na parte inferior do formulário também existem botões para criar ou editar as opções de resposta da questão (por exemplo, se a questão for “Qual é a capital da Suíça?”, as opções poderiam ser “Berna”, “Viena”, etc.). Essa opção só pode ser utilizada em questões de múltipla escolha. A opção “Avaliação” é utilizada em questões de programação para determinar os cenários de validação. Por exemplo, se a questão solicitar que seja escrito um programa que multiplique um número por ele mesmo, ela poderá ter vários cenários de avaliação, como “X = 0”, “X = 5”, etc., que serão utilizados para verificar o código inserido pelo candidato.
Tipo de Questionário: Indica para qual tipo de teste esta questão é adequada.
Família e Subfamília: Permite classificar as questões em famílias e subfamílias para facilitar o seu gerenciamento. Por exemplo, uma questão pode pertencer à família “Programação” e à subfamília “Java”.
Tipo: Define o tipo de questão e combina várias opções: Questões que utilizam imagens (tanto no cabeçalho da questão quanto nas opções de resposta).
Respostas em texto aberto (uma ou várias linhas) ou múltipla escolha (uma única opção, quando apenas uma resposta pode ser selecionada, ou múltiplas opções, quando várias respostas podem ser selecionadas).
Questões de programação, que podem incluir ou não um código predefinido (o código predefinido é um código incluído no início do programa, que permite definir as variáveis com valores que serão utilizados pelo usuário ao escrever seu próprio código). Por exemplo, uma questão de programação pode solicitar que o usuário escreva um programa que multiplique um número por ele mesmo utilizando a variável X. O código predefinido poderia ser X := 5.
Descrição: Esta é a descrição que ajuda a pessoa que está montando o teste a saber do que se trata a questão (não é o texto que o candidato verá ao visualizar a questão). Por exemplo, uma descrição poderia ser: “Questão de Java para validar conhecimentos sobre múltiplas threads”.
Texto: Este é o texto da questão que será exibido ao usuário, por exemplo: “Qual é a capital da Suíça?”
Pontuação de Referência: Esta é a pontuação padrão da questão (que pode ser modificada para um teste específico a partir do Construtor de Questionários).
Pré-condição: Este é o valor da pré-condição das questões de programação que possuem um código predefinido.
Resposta Correta: Este é o texto que corresponde à resposta correta (para perguntas de texto aberto ou de programação). Para perguntas de múltipla escolha, a resposta correta é determinada na visualização de alternativas.
Tempo de Referência: O tempo máximo recomendado em minutos para a questão. Isso não afeta o teste; é apenas uma referência usada para estimar melhor o tempo total necessário para o teste que contém a questão.
Largura: A largura da questão na tela.
Texto Informativo: data-content = “Indica o registro de informações adicionais a serem utilizadas (que são exibidas durante o teste ao clicar no botão de informação). Se nenhuma for selecionada, será utilizada a da seção da questão no teste.”
Obrigatória: Se esta opção estiver marcada, a questão é obrigatória e, portanto, deve ser respondida para que o usuário conclua o teste.
Categoria: Esta é a categoria associada à questão. Ela é utilizada nos relatórios, pois eles podem exibir a soma das pontuações por categoria (a soma da pontuação obtida em todas as questões do teste pertencentes à mesma categoria).
Módulo: Aplica-se a questões de programação em que a linguagem de programação da questão é selecionada.
Nível: O nível de dificuldade atribuído à questão.
Peso de Desempenho: Em questões de programação que medem o desempenho, isso indica o peso em porcentagem que o desempenho tem na pontuação total da questão.
As questões de programação são criadas da mesma forma que os demais tipos de questões. No entanto, há uma ferramenta específica para a criação de questões de programação.
Para acessar essa ferramenta, vá até o menu “Ferramentas” e selecione “Criador de Questões de Programação”.
Após carregar a questão, as informações correspondentes serão exibidas. No lado direito, há um editor que permite testar como a questão avaliaria uma resposta. No lado esquerdo, encontram-se as condições (cenários de validação) utilizadas para validar a questão, divididas em duas seções. A primeira seção é usada para validar a resposta enquanto o candidato está realizando a prova. A segunda é utilizada para validar a resposta e determinar a pontuação da questão. Essa separação evita que o candidato forneça uma resposta trivial, como “Print 5”, em vez de desenvolver um algoritmo para resolver o problema proposto. Por esse motivo, é comum utilizar conjuntos diferentes de casos de teste: um para validar a resposta durante a prova e outro para atribuir a pontuação (com valores distintos). Dessa forma, o candidato não consegue obter a pontuação máxima apenas fornecendo uma resposta trivial, sem implementar a lógica necessária.
Tanto para a validação durante a prova quanto para a atribuição da pontuação, é necessário informar o valor esperado. Esse valor pode ser inserido manualmente ou você pode escrever um programa para testar a questão e, em seguida, copiar a saída gerada para o campo de resposta esperada. Você pode executar o programa com qualquer um dos cenários de validação clicando no botão Executar. Os cenários utilizados para validar o programa possuem pesos. É possível definir vários cenários diferentes, cada um com um peso específico, que indica sua importância no cálculo da pontuação final obtida pelo candidato na questão.
Por fim, para questões que permitem medir o desempenho do código, você pode indicar os intervalos e o peso do desempenho na pontuação da questão. Os cenários de validação serão utilizados para medir o desempenho que deverá ser considerado na pontuação. Atualmente, apenas as questões que utilizam o módulo TLang permitem realizar a medição de desempenho.
Tests
“Questionário” é o termo genérico utilizado pela Evalart para se referir a um teste ou avaliação. Seja um teste psicométrico, um teste de inteligência, um teste de programação ou uma avaliação de conhecimentos, a Evalart utiliza o termo “Questionário” para se referir a qualquer um desses tipos de avaliação.
Um teste é composto por um conjunto de questões que podem ser agrupadas em seções. As questões normalmente possuem uma pontuação associada, que permite calcular a pontuação do teste. O significado de uma determinada pontuação pode ser definido por meio de um conjunto de faixas de pontuação. Por exemplo, um teste que avalia conhecimentos em Arquitetura de Negócios pode conter 10 questões, cada uma valendo 2 pontos, totalizando uma pontuação máxima de 20 pontos. As faixas de pontuação podem indicar que uma pessoa que obtiver entre 15 e 20 pontos possui conhecimento aprofundado em Arquitetura de Negócios, enquanto alguém que obtiver entre 10 e 15 pontos possui conhecimento intermediário.
As questões também podem ser associadas a uma categoria (assim como as opções de resposta de uma questão). As categorias permitem identificar diferentes áreas que serão avaliadas. No exemplo anterior, uma categoria poderia reunir questões relacionadas à “Arquitetura de Negócios” e outra à “Arquitetura de Aplicações e Dados”, permitindo identificar pontuações independentes por categoria e, assim, avaliar o nível de conhecimento ou habilidade da pessoa em cada uma dessas áreas. Também é possível associar faixas de pontuação às categorias do teste, de forma semelhante às faixas aplicadas à pontuação total do teste.
Tanto os testes quanto as questões são organizados em Famílias e Subfamílias. Isso não afeta a avaliação em si, mas facilita a organização dos testes e das questões. Por exemplo, se você quiser localizar testes relacionados à inteligência, poderá pesquisar pela família correspondente e, dentro dela, por uma área específica, como “Raciocínio Lógico”.
A Evalart conta com uma ampla biblioteca de testes e questões. Eles podem ser utilizados diretamente ou modificados conforme a necessidade. Também é possível que o usuário crie suas próprias questões ou testes.
Todas as opções relacionadas aos testes podem ser encontradas no menu principal, na opção “Testes”.
Para visualizar todos os testes disponíveis, clique em “Lista de Testes” no menu “Testes”. A lista exibe todos os testes aos quais o usuário tem acesso, incluindo os testes da sua conta e os testes oficiais da Evalart. Dependendo das permissões do usuário para cada teste, será possível editá-lo ou apenas visualizá-lo.
Assim como em qualquer lista da Evalart, existem filtros e opções de pesquisa que permitem reduzir a quantidade de resultados exibidos. Por exemplo, é possível visualizar apenas os testes da família “Programação”. Os resultados também podem ser ordenados por qualquer coluna. Basta clicar na coluna pela qual deseja ordenar. Um clique ordena a coluna em ordem crescente; um segundo clique a ordena em ordem decrescente.
Na coluna “Ações”, são exibidos vários ícones que representam as operações que o usuário pode realizar. Eles estão listados abaixo:
Permite visualizar as instâncias do questionário. Uma instância de teste é um teste atribuído ou respondido por uma pessoa específica. Você pode imaginá-la como a prova que um professor entrega aos seus alunos. O questionário seria a prova contendo todas as questões, que o professor imprime e entrega a cada aluno no dia da avaliação. Já a instância do teste corresponde à prova entregue a um aluno específico, contendo (ou que conterá) o nome e as respostas desse aluno. Ao listar as instâncias do teste, serão exibidos todos os testes atribuídos ou respondidos pelos candidatos, permitindo visualizar o nome da pessoa, sua pontuação e outras informações relevantes.
A lupa permite visualizar os detalhes do teste, mas sem a possibilidade de editá-lo.
O ícone de lápis permite editar o teste (ele é exibido apenas para os registros que o usuário tem permissão para editar). Essa opção abre a tela de edição das informações gerais do teste. Se você quiser editar detalhes como as questões que compõem o teste, deverá acessar o Construtor de Testes.
O ícone “X” permite excluir o teste. A exclusão do teste pode variar dependendo de ele já possuir instâncias e do status dessas instâncias.
Esta opção direciona você para o Construtor de Testes. A partir dele, é possível visualizar (e editar, caso você tenha permissão) todas as características do teste, incluindo as questões, seções e faixas de pontuação que o compõem.
Esta opção exibe as versões de um mesmo teste. As versões permitem editar testes que já estão em uso ou criar pequenas variações sem afetar as instâncias que já foram criadas.
O ícone de olho direciona você para a visualização prévia do teste. Essa visualização permite executar o teste e vê-lo exatamente como um candidato o veria. Essa tela é muito útil para verificar se o teste está funcionando e sendo exibido conforme o esperado.
Ao visualizar ou editar um teste a partir da lista de testes, uma série de campos ou atributos é listada. Cada um deles é detalhado abaixo:
Controle de Consistência: Ao visualizar um teste, tanto na exibição de edição quanto no construtor de testes, um indicador de quaisquer problemas de consistência pode aparecer na parte superior do teste (Isso só aparece se houver inconsistências; caso contrário, não é exibido). O indicador pode ser amarelo, representando inconsistências menores, o que significa que o teste pode ser utilizado, mas pode apresentar algumas características indesejadas (como não ter um conjunto de intervalos de pontuação para avaliar o teste). Se o indicador for vermelho, significa que o teste possui uma inconsistência grave e não pode ser utilizado (como não ter questões). Ao clicar nesse indicador, serão listadas as inconsistências detectadas. Existem dois tipos:
- Aviso: Isso corresponde a inconsistências menores que não impedem que o teste seja utilizado. O indicador de consistência ficará amarelo se houver apenas esse tipo de inconsistência.
- Inconsistência: São inconsistências graves que impedem a utilização do teste. Se houver esse tipo de inconsistência, o indicador de consistência ficará vermelho.
ID: Este é o código de identificação do teste. Todas as entidades no Evalart possuem um código numérico único chamado “ID”. Para testes, este identificador corresponde ao ID do teste mestre (Para mais informações, consulte “Versões do Questionário”).
Nome: Este é o nome do teste. Esta é a informação exibida nas listagens ou em qualquer lugar onde os testes sejam listados.
Descrição: Esta é a descrição do teste.
Nível: Corresponde ao nível de dificuldade do teste. Pode haver 3 valores (Fácil, Médio e Difícil) ou “N/A” se não se aplicar a este teste. Por exemplo, um teste que mede conhecimentos de programação pode ser “Fácil” para avaliar iniciantes, enquanto um teste “Difícil” pode ser usado para avaliar programadores com mais experiência ou para trabalhos mais complexos. Um teste de personalidade, no entanto, provavelmente exibiria “N/A”, já que o termo “nível de dificuldade” não se aplica a esse tipo de teste.
Status: Status do teste (Se está ativo ou se foi excluído).
Limite de Tempo: O limite de tempo atribuído ao teste, expresso em minutos. Se o teste não tiver um limite de tempo, o valor para este campo é zero. O tempo começa a contar assim que o candidato inicia o teste. O tempo não para mesmo se o navegador for fechado durante a execução do teste.
Limite de Dias: O limite de dias é semelhante ao limite de tempo, mas medido em dias.
Tipo de Registro: O tipo de registro indica os requisitos que devem ser cumpridos para que uma pessoa responda ao teste. Para a versão correspondente a este guia, apenas um tipo de registro “xxxx” está habilitado, o qual exige que as pessoas que vão responder ao teste tenham recebido um convite por e-mail gerado a partir do módulo de processos.
Exibir Pontuação Final: Indica se a pessoa que responder ao teste poderá ver seus resultados após a conclusão do teste.
Idioma: O idioma do teste. Os botões e outros textos predefinidos do teste serão exibidos no idioma selecionado. Se você editar o teste no editor, todas as questões e quaisquer outros conteúdos serão, por padrão, exibidos neste idioma.
Intervalos de Pontuação: A tabela de intervalos de pontuação que será usada para pontuar o teste. A mesma tabela pode ser associada a vários testes.
Tipo: Uma classificação geral do tipo de teste.
Família e Subfamília: Os testes podem ser classificados dentro de uma família e de uma subfamília (por exemplo, família programação e subfamília Java). No construtor de testes, as questões que correspondem à família e à subfamília serão exibidas por padrão como disponíveis para serem adicionadas ao teste.
Relatório de Resultados: Indica o formato de relatório a ser utilizado para visualizar os resultados dos testes respondidos.
Pontuação total negativa para zero: Converte a pontuação total do teste para zero se ela for negativa. A pontuação total pode ser negativa se, por exemplo, houver questões de múltipla escolha com valores negativos.
Pontuação da categoria negativa para zero: Funciona da mesma forma que na opção anterior, mas aplica-se às pontuações das categorias.
Aumentar Pontuação Total: Valor que é adicionado à pontuação total em todos os casos. Isso é normalmente usado para ajustar os intervalos de pontuação para que não comecem com valores negativos ou zero.
Aumentar Pontuação das Categorias: Valor que é adicionado à pontuação das categorias em todos os casos. Isso é normalmente usado para ajustar os intervalos de pontuação para que não comecem com valores negativos ou zero.
Formato da Pontuação: Define como a pontuação total é exibida nos relatórios e listas. Você pode usar os seguintes marcadores: << Pontuação >>, << Pontuação Máxima >> e << Nome do Resultado >>. O marcador score assumirá o valor da pontuação, maxscore a pontuação máxima possível para o teste e resultname o nome correspondente ao intervalo de pontuação associado à pontuação. Por exemplo: << Pontuação >> de << Pontuação Máxima >> exibiria algo como “12 de 20” para um teste que obteve uma pontuação de 12 de um máximo de 20. Para modificar qualquer atributo do teste, você deve ir para o editor, seja a partir da Lista de Testes ou do Construtor de Questionários.
O construtor de testes é uma ferramenta que permite construir ou modificar um teste (caso você tenha permissão para editar um teste específico), além de visualizar todas as suas informações e itens relacionados em um só lugar. É possível acessar o construtor de testes pelo menu principal clicando em “Testes” e, em seguida, em “Construtor de Questionários”, ou diretamente na lista de testes. Se você acessar pelo menu, o construtor de testes estará vazio e você precisará clicar no ícone de pasta na parte superior para carregar um teste específico. Caso queira criar um novo teste, você deve primeiro ir à opção “Novo Questionário” no menu “Questionário” no menu principal. Depois de criado, você pode ir para o construtor para adicionar as questões, seções e outras configurações do teste.
O nome do teste é exibido na parte superior do Construtor de Questionários, juntamente com sua versão (que é um identificador interno da versão atual do teste) e um alerta caso sejam detectadas inconsistências no teste (como um teste sem questões). Ao lado do ícone de pasta que abre um teste, há um ícone de olho que abrirá uma nova janela com a visualização prévia do teste. Em seguida, são exibidos os atributos do cabeçalho do teste, como nível, descrição, etc.
Um pouco mais abaixo, a tela é dividida em duas partes. À esquerda ficam as questões do teste e, à direita, uma visualização das abas para adicionar e definir os vários elementos de um teste: Questões, Seções, Páginas e Questões (na aba de ferramentas) e Intervalos de Pontuação.
Visualização prévia: Clicar no ícone de olho ao lado do nome do teste abre uma nova janela com a visualização prévia do teste. Essa janela exibirá o teste exatamente como um candidato o veria ao realizá-lo. A visualização prévia gera uma instância do teste; portanto, se ele for respondido, a instância poderá ser vista nos relatórios de resultados. Ao final da visualização prévia do teste, o usuário será perguntado se deseja salvar a instância ou excluí-la. Se for salva, o relatório de resultados poderá ser visto na lista de instâncias do teste, o que pode ser útil para ajudar a compreender melhor as informações que o relatório exibe. Se a janela for fechada antes da conclusão do teste, a instância será salva, mas será excluída automaticamente no dia seguinte (ou você poderá excluí-la manualmente a partir de qualquer relatório de lista de instâncias de teste). Evite abrir mais de uma visualização prévia ao mesmo tempo, pois isso pode gerar resultados inesperados.
Adicionar ou remover questões: Para adicionar questões ao teste, você deve ir para a aba de questões, que listará todas as questões disponíveis. Por padrão, apenas as questões da família e subfamília do teste são exibidas, mas você pode alterar os filtros para ver outros tipos de questões. Para adicionar uma questão, basta clicar na questão que deseja adicionar e arrastá-la para a lista de questões à esquerda. A ordem da lista determina a ordem em que as questões aparecerão no teste (as questões na lista de questões selecionadas podem ser arrastadas para a posição em que você deseja que a questão fique dentro do teste).
Para remover uma questão, você deve arrastá-la de volta para a lista de questões. Para ter uma visualização prévia de uma questão específica, clique no ícone de olho da questão, que mostrará como essa questão em particular será exibida ao executar o teste. Se você tiver privilégios de edição para uma questão específica, verá um ícone de lápis nela, o qual o direcionará para a tela de edição da questão (note que, se você editar uma questão, essa alteração afetará todos os testes que incluem essa questão, não apenas o teste no qual você está trabalhando atualmente).
A pontuação e o tempo de uma questão só podem ser editados para o teste atual. Para fazer isso, clique no ícone de engrenagem. Dois campos aparecerão para editar a pontuação e o tempo. Observe que o tempo não afeta o teste; esse valor é usado apenas como referência para estimar o tempo aproximado necessário para o teste inteiro.
Abaixo da lista de questões selecionadas, existem vários totais que mostram informações resumidas.
Adicionar ou remover seções: Todos os testes devem ter pelo menos uma seção (mas podem ter mais). As seções permitem que as questões sejam agrupadas dentro de um teste, o que pode ser usado para descrever o assunto das questões que o compõem. Por exemplo, um teste de aptidão poderia ter uma seção de raciocínio numérico e uma seção de raciocínio verbal. As informações da seção serão exibidas no início dela enquanto o teste estiver sendo executado. As seções possuem um atributo chamado “Informações Adicionais”.
As informações adicionais são o texto exibido durante a execução do teste ao clicar em um botão localizado no canto superior direito do teste. As questões também podem ter informações adicionais. Se a questão não tiver nenhuma informação adicional, clicar no botão de informação exibirá as informações adicionais da seção (se houver). Para adicionar uma seção, arraste-a para a lista de questões selecionadas a partir da aba de seções (ou o inverso para remover uma seção do teste).
Paginação: Por padrão, todas as questões aparecem como apenas uma por página; no entanto, várias questões podem ser agrupadas na mesma página (o que é recomendado para questões curtas). Para agrupar várias questões em uma única página, acesse a aba “Ferramentas” e clique em “+ Adicionar Página”. Duas faixas aparecerão para marcar o início e o fim de uma página. Arraste a faixa de início e coloque-a acima da questão que você gostaria que fosse a primeira daquela página e, em seguida, arraste a faixa de fim de página para baixo da última questão da página para marcá-la. Todas as questões entre as faixas de início e fim aparecerão em uma única página quando o teste for executado. Para desfazer uma página, você pode arrastar as faixas de volta ou clicar no “x” que aparecerá à direita para eliminá-las. Observe que não é possível colocar seções dentro de uma página.
Questões aleatórias: As questões aleatórias permitem agrupar um conjunto de questões das quais apenas uma será exibida aleatoriamente durante a execução do teste. Isso é ideal para gerar variações do mesmo teste, onde é importante garantir que as questões aleatórias sejam equivalentes em dificuldade e pontuação para manter a consistência do teste. Para usar a função de questões aleatórias, acesse “Ferramentas” e clique em “+ Adicionar Aleatória”. Você pode agrupar um conjunto de questões arrastando as faixas que aparecem, assim como foi feito com a paginação. Arraste essas faixas para a seção de questões para indicar o início e o fim do grupo. Quando o teste for executado, apenas uma das questões do grupo será exibida aleatoriamente.
Intervalos de Pontuação: Os intervalos de pontuação permitem classificar um teste de acordo com a pontuação obtida e determinar uma descrição para cada valor do intervalo. Por exemplo, uma pontuação de 1 a 5 pode ser qualificada como “Conhecimento Baixo” e de 5 a 10 como “Conhecimento Médio”. Para cada intervalo, são fornecidas tanto uma descrição curta quanto uma mais longa, com mais detalhes sobre como interpretar a pontuação. Os intervalos podem ser aplicados em dois níveis: Questionário ou Categoria. Se um intervalo for aplicado ao nível do teste, ele usará a pontuação total do teste para determinar as descrições, enquanto, se for aplicado às categorias, o intervalo será determinado pela pontuação obtida pela categoria à qual o intervalo foi atribuído (geralmente, se você for usar intervalos por categoria, precisará definir um intervalo para cada categoria que o teste utiliza).
Para adicionar ou editar um intervalo no teste, use a aba “Intervalos de Pontuação”. Esta aba permite selecionar um intervalo ou visualizar o intervalo utilizado. O intervalo de pontuação também pode ser editado clicando no link azul “Intervalos de Pontuação”. Lembre-se de que é possível que vários testes compartilhem o mesmo intervalo, portanto, se você modificar um intervalo, isso poderá afetar vários testes.
Para usar intervalos por categoria, você deve ir para a aba “Classificação por Categoria”. Para mais informações sobre o que são as categorias e como elas funcionam, consulte “Categorias”. Existe uma aba para cada categoria para a qual um intervalo foi definido (ou nenhuma aba se o teste não tiver intervalos por categoria). Para selecionar um intervalo para uma categoria que ainda não possui uma aba, clique no link azul “Conjunto de Intervalos de Classificação por Categoria”. Isso abrirá uma janela onde você poderá vincular um intervalo a uma categoria clicando no botão “+ Novo”. O mesmo link pode ser usado para editar as categorias e intervalos já definidos para o teste. Por fim, você também pode editar os valores dos intervalos para uma categoria. Para fazer isso, clique no link azul “Classificações por Pontuação” dentro da aba específica da categoria, e lembre-se de que um intervalo pode ser usado em múltiplos testes ou categorias, e quaisquer alterações afetarão todos os testes que usam esse intervalo.
Clonagem: O botão de clonar permite gerar uma cópia do teste. Isso cria um novo teste idêntico ao original. Essa função permite, por exemplo, clonar um teste público que você não tem permissão para editar, de modo a ter uma cópia que possa modificar (Observe que, se você quiser modificar questões que não pode editar, será necessário clonar as questões individualmente, pois as questões não são clonadas ao clonar o teste; o teste clonado faz referência às mesmas questões do original).
Salvar: O botão salvar armazenará todas as alterações no banco de dados do Evalart. Para que a visualização prévia exiba o teste, você deve primeiro clicar em salvar, pois a visualização prévia só mostra as informações que já foram salvas. Se o teste que você está tentando salvar tiver sido utilizado anteriormente, será perguntado se você deseja gerar uma nova versão. Consulte o ponto a seguir para determinar qual opção escolher.
Versões do questionário: Os testes possuem versões. Uma nova versão pode ser gerada ao salvar um teste. As versões permitem que um teste seja modificado sem afetar as instâncias de teste que já foram geradas. Por exemplo, se você usou um teste por um tempo e quer alterar uma das questões porque ela já é muito conhecida, você pode fazer a alteração no construtor e, ao salvar, selecionar a opção de gerar uma nova versão. Dessa forma, quaisquer instâncias do teste anterior ou pendente não serão afetadas. Tenha em mente que, se a alteração no teste for significativa, por exemplo, se a pontuação máxima ou o número de questões forem modificados, pode ser melhor cloná-lo. O número da versão é um número interno e não sequencial para cada teste, portanto é normal que as versões pulem números.
Evalart User Guide
Embora seja recomendado ler toda a documentação para aproveitar ao máximo todos os recursos da Evalart, esta introdução permitirá que você comece a utilizar a Evalart em apenas alguns minutos.
Quando você quiser iniciar um processo seletivo, o primeiro passo é criar o “Processo” no sistema. Depois de criado, selecione os “Testes” que serão utilizados no processo criado. Os testes são as avaliações, provas e outros tipos de instrumentos que podem ser utilizados para avaliar os candidatos.
Em seguida, são adicionadas ao processo as “Pessoas” (Candidatos) que receberão os testes. Depois que os testes e as pessoas forem adicionados ao processo, será possível enviar automaticamente um e-mail aos candidatos, no qual eles serão convidados a participar do processo e receberão os links para os testes que deverão responder.
Por fim, depois que os testes forem respondidos pelos candidatos, os relatórios de resultados estarão disponíveis para visualização.
Ao acessar o módulo de administração da Evalart, você pode criar um processo acessando o menu “Processos” e selecionando “Novo Processo”. Informe um nome para o processo, como “Desenvolvedor Júnior – Projeto Alpha”, e adicione uma descrição. Clique em “Salvar” para criar o processo.
Após a criação do processo seletivo, você será redirecionado para a tela de configuração do processo seletivo. Essa tela possui duas seções: “Testes” e “Candidatos”. Na seção “Testes”, você pode adicionar os testes que deseja utilizar para avaliar seus candidatos no processo.
Na seção “Candidatos”, você pode adicionar candidatos ao processo. É possível adicionar candidatos que você já possui no banco de dados da Evalart ou cadastrar novos candidatos, seja individualmente ou importando-os de um arquivo. Para adicionar candidatos que já estão no seu banco de dados da Evalart, clique no botão “Escolher Candidatos”. Para adicionar uma nova pessoa, clique no botão “+”. Informe os dados do candidato e o endereço de e-mail para o qual os testes serão enviados.
Para visualizar ou editar a mensagem de e-mail, clique no ícone de envelope. Você pode personalizar o texto conforme desejar ou utilizar diretamente os modelos disponíveis por meio da opção “Substituir por”.
Após concluir essas etapas, clique em “Salvar”. Ao clicar em “Visualizar”, será exibido um exemplo do e-mail que os candidatos receberão.
Por fim, clique em “Enviar” para enviar os e-mails aos candidatos.
Para visualizar os testes disponíveis na Evalart, acesse o menu “Testes” e selecione “Lista de Testes”. No lado direito, você encontrará uma lista com todos os testes disponíveis, organizados em pastas de acordo com o tipo de teste. Você pode navegar por cada pasta para visualizar os testes incluídos ou filtrar os resultados para ver apenas os testes de seu interesse. Por exemplo, pesquise pela família “Programação” para visualizar testes relacionados à programação. Ao clicar em um teste, todas as informações básicas serão exibidas no lado esquerdo: detalhes do teste, questões incluídas, áreas avaliadas, entre outras informações. Você pode clicar no ícone correspondente ao Construtor de Testes para visualizar todas as informações do teste (e também modificá-lo, caso tenha permissão para isso). Por fim, se desejar visualizar o teste exatamente como o candidato o veria, clique no ícone de olho para acessar a pré-visualização. A pré-visualização pode ser respondida da mesma forma que um candidato responderia e, caso queira visualizar o relatório correspondente ao final do teste, clique em “Finalizar, mas manter instância” ao concluir. O relatório ficará disponível na lista de relatórios.
Se você quiser utilizar um teste do catálogo em seu processo seletivo, poderá clicar no botão “Usar Teste”. Isso permite criar rapidamente um novo processo seletivo que incluirá o teste selecionado. Como alternativa, você pode criar novos processos a partir do menu “Processos” e adicionar os testes posteriormente.
À medida que os candidatos respondem aos testes, você pode visualizar os relatórios de resultados. Para visualizar os relatórios específicos de um processo, acesse o menu “Processos” e selecione “Lista de Processos”. Nesse local, você poderá escolher o processo seletivo cujos resultados deseja visualizar. Será exibida uma lista com todas as instâncias do questionário (os testes criados para cada pessoa) e seus respectivos status. Nessa lista, você poderá visualizar as instâncias criadas, as que estão em andamento (iniciadas por um candidato) e as que estão concluídas (já respondidas). Para visualizar um relatório detalhado, clique na pontuação do candidato (ou em “N/A” caso não possua pontuação).
Clique em “Lista de Avaliações” para visualizar uma lista de todos os testes do processo. Clique em “Ranking” para visualizar a classificação dos candidatos.
Os relatórios de resultados apresentam a pontuação, assim como informações adicionais sobre o teste respondido, permitindo que você decida quais candidatos devem continuar no processo. As informações exibidas em cada relatório variam de acordo com o tipo de teste utilizado. Você pode acessar os relatórios a partir das listas de testes, processos ou pessoas (clicando no ícone de pasta ou através do menu de relatórios).
Na tela principal do módulo de administração (clique em “Início”), os testes respondidos mais recentemente serão exibidos na parte superior, permitindo acessar diretamente o relatório detalhado de resultados. Na tela principal, na parte central, também são exibidos os processos seletivos ativos. A partir dessa seção, você pode acessar os relatórios do processo clicando em “Resultados”.