Camilo Jara Emiliano Castellani

TP Proyecto
Matriz de evaluacion: Las matrices son escalas de evaluacin. Establecen una
gradacin con distintos niveles de calidad para cada uno de los criterios con los que se
puede evaluar el cumplimiento de un objetivo, el desarrollo de una competencia, la
asimilacin de un contenido o el desempeo de cualquier tipo de tarea que se lleve a
cabo

Benchmark: es una aplicacin destinada a medir el rendimiento de un ordenador o de

algn elemento del mismo. Para ello se somete a la mquina a una serie de cargas de
trabajo o estmulos de distinto tipo con la intencin de medir su respuesta ante ellos.
De esta forma se puede estimar bajo qu tareas o estmulos un determinado
ordenador se comporta de una manera fiable y efectiva o por el contrario se muestra
ineficiente.

Esta informacin es muy til a la hora de seleccionar una mquina para realizar tareas
determinadas en el proceso de postproduccin y creacin del producto audiovisual,
pudiendo elegir la ms adecuada para un proceso determinado.

El benchmark tambin es til para estimar el nivel de obsolescencia de un sistema o en

qu aspectos tcnicos puede ser mejorado su rendimiento, por medio de
actualizaciones.

Por otro lado el benchmark puede facilitarnos todas las especificaciones tcnicas de un
ordenador junto con su rendimiento ante los diferentes estmulos lo que permite realizar
comparativas entre diferentes sistemas atendiendo a sus especificaciones tcnicas y su
rendimiento. Las comparativas son tiles para determinar que caractersticas tcnicas son las
idneas para conseguir un rendimiento ptimo en una tarea especfica. Una comparativa entre
mltiples ordenadores de diferentes fabricantes (con diferentes especificaciones tcnicas) nos
permite determinar a priori cules son ms adecuados para determinadas aplicaciones y
cules son mejores para otras.

Cualidades

Los benchmark tienen las siguientes funcionalidades:

Comprobar si las especificaciones de los componentes estn dentro del margen

propio del mismo
Maximizar el rendimiento con un presupuesto dado
Minimizar costos manteniendo un nivel mximo de rendimiento
Obtener la mejor relacin costo/beneficio (con un presupuesto o unas
exigencias dadas)

Sintticos vs aplicaciones
 Sintticos: estn especialmente diseadas para medir el rendimiento de un
componente individual de un ordenador, normalmente llevando el
componente escogido a su mxima capacidad.

Ejemplos:

Dhrystone
Whetstone

Aplicaciones: herramientas basadas en aplicaciones reales, simulan una carga

de trabajo para medir el comportamiento global del equipo.

Bajo nivel vs Alto nivel

Test de Bajo nivel:

Miden directamente el rendimiento de los componentes Ejemplo: el reloj de la CPU,

los tiempos de la DRAM y de la cach SRAM, tiempo de acceso medio al disco duro,
latencia, tiempo de cambio de pista, etc.

Test de Alto nivel:

Estn ms enfocados a medir el rendimiento de la combinacin

componente/controlador/SO de un aspecto especfico del sistema, como por ejemplo
el rendimiento de E/S con ficheros, o el rendimiento de una determinada combinacin
de componentes/controlador/SO/aplicacin. Ejemplo: Velocidad de compresin zip.

Otros tipos de benchmark

Consumo de energa
Cumplimiento con estndares ambientales, contenido de materiales y manejo
del final del ciclo de vida del producto
Disipacin de calor
De juguete: detectar y medir componentes bsicos de un computador
Redes
Reduccin de ruido
Trabajo compartido: mide el rendimiento en las modernas tecnologas de
distribucin de procesos
Servidores
Soporte tcnico

Ejemplo matriz de evaluacin en software

EVALUACIN DE SOFTWARE

Las siguientes tablas y matrices estn basadas a la discusin de cmo evaluar un

software y los criterios propuestos en la pgina de Matriz de Evaluacin Parte
I, los productos a evaluar son:
Software 1= Print Manager Plus 6.
Software 2= CZ Print Job Tracker 4.0 Premium

El anlisis comparativo tcnico se har sobre productos finales; es decir

productos ensamblados que vienen en formato de ejecutables. Para lo cual se
apreciaran las caractersticas de cada software y se estimaran, dndoles
ponderacin a cada una, verificando y comparando as que programa es mejor
en cada aspecto y cul es el ms conveniente al momento de su uso.

La siguiente tabla indica lo que se evaluara para ambos software:

La Matriz que se presenta a continuacin presenta la evaluacin de los criterios
de ambos software comparndolos y dndoles puntuacin a cada una. La matriz
indica, ponderacin mxima, tipos de calidad, caractersticas sub-
caractersticas, descripcin de cada caracterstica, si se tuvo evaluacin de dicha
caracterstica y el puntaje correspondiente y el total que obtuvo cada software:
Ahora a continuacin tenemos la misma matriz evaluativa pero sin la descripcin para poder
detallar mejor las caractersticas y sub-caractersticas se evalan junto con su puntuacin
correspondiente para ambos software evaluados:

COMPARACIN GRAFICA DE LOS RESULTADOS OBTENIDOS:

A parte de realizar la evaluacin numrica como se reflejo en la matriz, la parte grfica de este
ejemplo permitir visualizar como de manera ms fcil las comparaciones realizadas:

1. FUNCIONALIDAD:
2. FIABILIDAD:

3. EFICIENCIA:

4. PORTABILIDAD:
5. CALIDAD DE USO:

ANLISIS DE RESULTADOS Y CONCLUSIONES:

As pudimos evaluar el software Print Manager Plus 6 y CZ Print Job Tracker 4.0 Premium,
obteniendo que:

Print Manager Plus 6 segn los criterios evaluados obtuvo mayor puntuacin, ya que permite
la utilizacin de recursos de manera ms efectiva y eficiente, provee ms tolerancia a fallas lo
que lo indica que su tiempo de recuperacin ante amenazas tanto tecnolgicas o por parte de
usuario es mucho menor al obtenido con respecto a CZ Print Job Tracker 4.0, y gran
reemplazabilidad con capacidad de ser utilizado en lugar de otro software en el mismo
entorno.
Efectivamente aunque ambos software estn dirigidas a la misma funcin tras evaluarlos se
hizo notable la gran diferencia entre las fortalezas y debilidades con respecto a varios
aspectos, es decir, que uno de ellos es ms competentes para lograr satisfacer tanto a los
usuarios como a sus vendedores.
 Ejemplo de Benchmark en hardware

Ryzen 1700 vs i7 7700K con GTX 1070

Rendimiento medio en FPS

Juego AMD Ryzen 7 1700 Intel Core i7 7700K

GTA V (DX 11) 167 FPS 190 FPS

Alien: Isolation (DX11) 163 FPS 165 FPS

Battlefield 4 (DX12) 94 FPS 95 FPS

Ashes of the Singularity (DX12) 44 FPS 44 FPS

Civilization VI (DX12) 53 FPS 73 FPS

Doom (Vulkan) 101 FPS 98 FPS

Rendimiento al 99% de FPS

Juego AMD Ryzen 7 1700 Intel Core i7 7700K

GTA V (DX 11) 56 FPS 85 FPS

Alien: Isolation (DX11) 114 FPS 117 FPS

Battlefield 4 (DX12) 67 FPS 65 FPS

Ashes of the Singularity (DX12) 30 FPS 30 FPS

Civilization VI (DX12) 48 FPS 57 FPS

Doom (Vulkan) 78 FPS 77 FPS

En esta comparativa el chip 1700 de AMD mejora notablemente, consiguiendo plantar

cara en algunos juegos al i7 7700K, aunque se ve superado en la mayora. Hay que
tener en cuenta la diferencia de precios entre ambos, y es que los procesadores Intel
ms potentes tambin son ligeramente ms caros que los de la competencia.
10 pasos para hacer benchmarking
1. Identificar qu proceso, rea o producto queremos mejorar en nuestra
organizacin.
2. Identificar las organizaciones que posean las mejores prcticas y ver si
efectivamente la comparacin pudiera servir.
3. Definir qu indicadores voy a medir.
4. Definir el mtodo para recopilar datos.
5. Analizar la discrepancia de lo medido con mi desempeo actual.
6. Proponer los niveles de desempeo futuro de acuerdo a la comparativa, a las
posibilidades y a los agregados de valor.
7. Fijar las metas y tiempos de integracin de la nueva prctica.
8. Ejecutar la integracin. Es importante sealar que las nuevas prcticas deben
ser implantadas dentro de la estructura funcional existente y no convertir todo
en una pesadilla de reingeniera corporativa.
9. Medir los resultados.
10. Fijar la periodicidad con la que se realizar el anlisis de mejores prcticas, ya
que es un proceso de mejora continua.