You are on page 1of 108

UNIVERSIDAD DE CONCEPCIN FACULTAD DE INGENIERA PROGRAMA DE MAGISTER EN CIENCIAS DE LA COMPUTACIN

Mtricas para evaluar sitios Web de PYMES chilenas

Profesor Gua: Ricardo Contreras Arriagada Dpto. de Ingeniera Informtica y Ciencias de la Computacin Facultad de Ingeniera Universidad de Concepcin

Tesis para ser presentada a la Direccin de Postgrado de la Universidad de Concepcin


PAOLA FLORENCIA MORAGA FUENTES CONCEPCIN-CHILE 2010

Profesor Gua: Ricardo Contreras Arriagada Concepcin, Abril 2010

Tesis presentada a la DIRECCIN DE POSTGRADO DE LA UNIVERSIDAD DE CONCEPCIN Para optar al grado de MAGISTER EN CIENCIAS DE LA COMPUTACIN

Agradecimientos A Dios, a mi familia, al profesor Ricardo Contreras, y a todos quienes incondicionalmente confiaron en m y contribuyeron con su granito de arena para hacer posible que este nuevo desafo profesional se hiciera realidad.

Dedicatoria A mis hermosos y adorados hijos Isidora y Renato por soportar mis ausencias y darme la fortaleza para continuar a pesar de mi cansancio.

Indice de Contenidos
Pg.
CAPITULO 1. INTRODUCCION............................................................. 1.1 1.2 1.3 1.4 1.5 1.6 1.7 1.8 Motivacin................................................................................................... Planteamiento del problema Hiptesis..................................................................................................... Objetivos Justificacin de la Investigacin. Limitaciones de la Investigacin. Contexto. Contenido 10 10 11 13 13 14 14 15 17 18 18 25 28

CAPITULO 2. ESTADO DEL ARTE............................................................................. 2.1 2.2 2.3 Mtodos. Herramientas de Software.. Consideraciones sobre el Estado del arte

CAPITULO 3. METODOLOGIA.................................................................................. 3.1 Conceptos bsicos............................................................................... 3.2 Descripcin de la propuesta. 3.3 Metodologa de Trabajo................................................................. 3.4 Resumen de mtricas existentes. 3.5 Definicin de mtricas ms relevantes CAPITULO 4. PROTOTIPO......................................................................................... 4.1 Definicin formal.. 4.2 Clasificacin de mtricas ms relevantes 4.3 Seleccin de mtricas para la propuesta.

30 30 31 33 35 41 51 51 52 56

CAPITULO 5. PRUEBAS. 5.1 Herramienta de evaluacin. 5.2 Escalas y criterios de evaluacin... 5.2.1 Criterios de evaluacin segn las mtricas propuestas... 5.2.2 Criterios de evaluacin segn el grado de importancia

59 59 62 62 63

5.3 Seleccin de sitios Web a evaluar.. 65 5.3.1 Eleccin de Sitios Web segn Criterios 1 y 2.. 67 5.3.2 Eleccin de Sitios Web segn Criterios 3 y 4.. 67 5.3.3 Eleccin de Sitios Web segn Criterio 5.. 68 5.4 Construccin de la matriz de valoracin. 72 5.5 Implementacin de la matriz de valoracin... 77 5.6 Resumen de la metodologa de evaluacin de sitios Web. 79

5.7 Interpretacin de la matriz de valoracin 81

CAPITULO 6. RESULTADOS.. 84 6.1 Evaluacin por mtricas propuestas... 84 6.1.1 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 1 84 6.1.2 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 2 85 6.1.3 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 3 85 6.1.4 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 4 86 6.1.5 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 5 86 6.2 Evaluacin por grado de importancia. 6.3 Punto de vista de evaluadores. 6.4 Punto de vista de desarrollo. CAPITULO 7. CONCLUSIONES Y RECOMENDACIONES........................................ REFERENCIAS BIBLIOGRAFICAS............................................................................ 88 91 92 100 102

ANEXO 1. Descripcin de los sitios Web segn los criterios de evaluacin escogidos ANEXO 2. Matriz de valoracin de cada sitio Web segn mtricas propuestas ANEXO 3. Evaluacin de sitios Web por criterio de evaluacin y perfil de usuario ANEXO 4. Evaluacin de mtricas por grado de importancia segn el criterio por el cual fueron agrupadas ANEXO 5. Apreciaciones de los evaluadores

Indice de Tablas
Tabla 1. Ejemplo Matriz de valoracin para un proyecto multimedia.... 61 Tabla 2. Clasificacin de PYME segn ventas anuales... 65 Tabla 3. Clasificacin de PYME segn nmero de empleados. Tabla 4. Resumen de los sitios Web de empresa a evaluar.. Tabla 5. Plantilla para Matriz de valoracin.. 66 70 72

Tabla 6. Evaluacin de sitios por mtrica evaluada segn perfiles de usuario. 78 Tabla 7. Evaluacin de sitios por grado de importancia 78 Tabla 8. Puntajes totales de la evaluacin de sitios Web segn criterio 1. 84 Tabla 9. Puntajes totales de la evaluacin de sitios Web segn criterio 2 85 Tabla 10. Puntajes totales de la evaluacin de sitios Web segn criterio 385 Tabla 11. Puntajes totales de la evaluacin de sitios Web segn criterio 486 Tabla 12. Puntajes totales de la evaluacin de sitios Web segn criterio 5.. 86 Tabla 13. Identificacin de las mtricas evaluadas.. 88 Tabla 14. Puntajes totales de la evaluacin de sitios Web segn grado de importancia de mtricas evaluadas por usuario 1.. 90 Tabla 15. Sitios Web con mayor puntaje por mtrica evaluada.. 92 Tabla 16. Sitios Web con menor puntaje por mtrica evaluada.. 92 Tabla 17. Sitios Web con mayor y menor grado de cumplimiento de mtricas por grado de importancia................................................................................................................. 93 Tabla 18. Mtricas comunes en sitios Aceptables y Discutibles 99

Indice de Figuras
Figura 1. Proceso de recopilacin, seleccin y evaluacin de mtricas..................... 30 Figura 2. Esquema de la propuesta............................................................................ 32 Figura 3. Esquema metodolgico de la propuesta para la evaluacin de sitios Web Figura 5a. Mtricas segn el dominio............................................. 34 40 Figura 4. Esquema de mtricas encontradas............................................................. 39 Figura 5b. Mtricas segn la orientacin.................................................................... 40 Figura 5c. Mtricas segn la calidad........................................................................... 40 Figura 6. Clasificacin general de atributos de la propuesta. Figura 7. Mtricas del atributo Contenido. Figura 8. Mtricas del atributo Presentacin Figura 9. Mtricas del atributo Comportamiento. Figura 10. Mtricas del atributo Navegacin Figura 11. Mtricas del atributo Rendimiento.. Figura 12. Esquema de mtricas propuesto Figura 13. Esquema de confeccin de una rbrica. Figura 14. Esquema de construccin de la Matriz de valoracin para sitios Web de empresa.. 71 Figura 15. Metodologa de evaluacin de sitios Web.. 83 52 53 53 53 54 55 58 59

Resumen
La Ingeniera Web es un campo de investigacin con el que se crean aplicaciones Web de alta calidad. Al igual que cualquier producto software el desarrollo de Web necesita incluir actividades de garanta de calidad. Para asegurar la calidad se debe planificar la evaluacin y el control de los productos intermedios hasta los productos finales. En general, los expertos dicen que hay cuatro razones para medir: caracterizar, evaluar, predecir y mejorar. En las ltimas dcadas han surgido numerosas propuestas que definen conjuntos de mtricas de calidad para la evaluacin de productos y procesos de software en distintos dominios de aplicacin. Tambin existen en la actualidad algunos trabajos que proponen marcos conceptuales para la documentacin de dichas mtricas que brindan informacin de utilidad en los proyectos de medicin y/o evaluacin de software. A pesar de lo anteriormente expuesto, existen hoy en da muy pocas empresas de software que utilizan procesos de evaluacin y anlisis para estos efectos; ms bien se centran en las actividades relacionadas con proyectos de desarrollo de software. El trabajo de esta tesis plantea el desarrollo de una propuesta de evaluacin y anlisis de los atributos de calidad que debiera cumplir un sistema de informacin Web pensado para una PYME chilena. El principal objetivo es lograr que esta propuesta sirva de modelo para cualquier organizacin que est catalogada como PYME en Chile, que requiera validar atributos de calidad en sus sitios Web.

Abstract
Web Engineering is the research field that creates high-quality Web applications. Like any software product development Web needs to include quality assurance activities. To ensure quality means to plan the assessment and control of intermediate products to produce final products. In general, experts say that there are four reasons to measure; to characterize, assess, predict and improve. In recent decades there have been many proposals that define sets of quality metrics to evaluate software products and processes in different application domains. There are also some works currently conceptual frameworks for documenting metrics to provide useful information on projects for measuring and / or software evaluation. Despite the above, there are now very few companies that use software for assessment and evaluation processes for these effects, rather focus on activities related to software development projects. This thesis presents a proposal for assessment and analysis of quality attributes that should serve a Web information system designed for Chilean PYME. The main goal is to after a model for any organization that is classified as PYME in Chile, which require to validate quality attributes on their Web sites.

10

CAPITULO 1 INTRODUCCION
En este captulo, se realiza la introduccin de los conceptos generales sobre el que se fundamenta el trabajo desarrollado. A continuacin, se definen los objetivos e hiptesis de la tesis, justificacin y limitaciones de la investigacin, as como una descripcin breve del contenido de cada captulo.

1.1 Motivacin
Las Pequeas y Medianas empresas (PYMEs) necesitan incorporar tecnologa a sus estrategias de negocio para poder ser ms productivas y aumentar su grado de eficiencia. Existen diversos obstculos que impiden el desarrollo de proyectos de tecnologa en las empresas, entre los que destacan la resistencia al cambio y la mala definicin de los requerimientos. Las PYMEs presentan diferentes necesidades que las hacen recurrir al uso de las tecnologas de informacin (TI). En general, estas necesidades buscan la mejora de algunos de los procesos de la empresa. Por otro lado estn las empresas de TI, que proveen las soluciones tecnolgicas a las PYMEs. Una de las herramientas de apoyo a la implementacin de soluciones es Internet, que juega un papel importante para las PYMEs y, dada su versatilidad, contribuye de manera satisfactoria en la cobertura de sus necesidades fomentando la innovacin dentro de la empresa. En este contexto, es que nace la idea de investigar si existen y que tan efectivos pueden ser los instrumentos para evaluar sitios Web, y en particular el de las PYMEs chilenas, que principalmente se usan para promocionar una empresa o servicio y darse a conocer en el mundo empresarial nacional e internacional. Evaluacin que tiene que ver con aspectos relacionados al uso del sitio Web, a la cantidad de visitas que pueden rescatar, a la cantidad de transacciones online que puedan generar, en otras palabras, si brinda reales satisfacciones a los usuarios que navegan en l. Lo anterior, con la idea de que contribuyan realmente a ser una herramienta competitiva frente a las empresas que son sus pares, es decir, que permita motivar a la audiencia online para que prefiera un sitio Web en particular en vez de otro de empresas de similares caractersticas. En un futuro cercano slo existirn dos clases de empresas, las que estn en Internet y las que han dejado de existir por no estarlo (Bill Gates).

11

1.2 Planteamiento del Problema


La historia de Internet pasa por un momento en la que los servicios online tienden a ser cada vez ms habituales. Tareas como comprar algn producto, realizar operaciones bancarias, buscar arriendo, o reservar un hotel por Internet son relativamente accesibles para todos y son ofrecidas por una gran variedad de empresas. Es por ello que hoy las marcas online invierten ms recursos en potenciar aquellos aspectos como sencillez e intuicin que las diferencien de sus competidores, para un mejor posicionamiento en el mercado y, con ello, la mejora de la calidad general de servicio. Esta realidad se manifest en el XVI Congreso Chileno de Marketing 2007, en donde se indic que en el ao 2006 en Chile se registraron ventas por Internet por US$ 250 millones. El significativo crecimiento y desarrollo de la Web, en cuanto al nmero de usuarios conectados, cantidad de ventas online, participacin de usuarios haciendo transacciones online, cantidad de sitios o portales Web, cantidad y tipo de herramientas para construir pginas y sitios Web, ha provocado un impacto en distintas reas, e indudablemente est cambiando las vidas personales, el modo de ver y relacionarlos con el mundo en un modelo globalizado. Segn [16], en el ao 2006 los hogares en Chile con computador que tenan conexin a Internet correspondan al 56,7% de los hogares. Particularmente, en estos tiempos se ve un crecimiento exponencial de sitios Web donde se encuentran una amplia gama de aplicaciones distribuidas cada vez ms complejas, lo que hace necesario reflexionar acerca de la forma en la cual las aplicaciones Web deben ser creadas y cmo mantener su calidad e integridad. Segn [17], la usabilidad (facilidad de manejo de una pgina) y la medicin de la misma, o la facilidad de uso de un sistema interactivo, juega un papel clave para que las experiencias de usuario sean positivas y contribuyan al posicionamiento estratgico de la empresa. Y si la usabilidad es importante, en mayor medida lo es la evaluacin de la misma. En [7] se postula, que el indiscutido incremento de popularidad y aceptacin de las aplicaciones centradas en la Web, tienen su origen en sus propias caractersticas y naturaleza tales como: proveer un modelo de informacin que soporta enlazar todo tipo de contenido y medios; permitir a los usuarios un fcil acceso a la informacin. A diferencia de un documento en papel, tiene el valor agregado de la funcionalidad de software; y, entre otros aspectos, permite a cualquier tipo de usuario crear y enlazar fcilmente sus propios documentos por medio de herramientas ampliamente disponibles. En la actualidad, la comunidad de Ingeniera Web reconoce que las aplicaciones de este tipo poseen caractersticas que las diferencian de los softwares tradicionales y sistemas de informacin, entre otras por tamao y complejidad de las aplicaciones, carcter multidisciplinario del equipo de desarrollo, tasa

12

apresurada de entrega del proyecto, entre otros. Estas caractersticas hacen con que los procesos, modelos y mtricas existentes para evaluar la calidad tengan que ser adaptados para considerar los cambios impuestos por las nuevas tecnologas [21]. Mientras ms complejos son los sistemas, ms delicado es el tratamiento de las fallas que se pudieran presentar. Una falla en uno de ellos propagar y amplificar ese error al resto de los sistemas conectados, pudiendo provocar un quiebre irreparable de la confianza de los usuarios en la Web. Realizar peridicamente informes de medicin para el sitio Web de una organizacin, puede significar el xito o el fracaso del proyecto que implica la creacin de una pgina Web, por tanto es necesario tener conciencia que un proceso de medicin es necesario para obtener un buen resultado. De no ser as se deben tomar medidas inmediatamente y corregir lo que no corresponde. Frente a la igualdad de prestacin de los servicios actuales en el mercado por las empresas a travs del uso de sitios Web, gestionar la experiencia del usuario no es slo cuestin de tener un portal estticamente aceptable, ms creativo, ms usable o de ofrecer mejores productos, sino que es fundamental testear, medir, evaluar y comparar resultados cuantificables para gestionar la evolucin del portal.

13

1.3 Hiptesis
Este trabajo postula que es posible establecer un conjunto de mtricas que permitan evaluar la efectividad, en trminos de facilidad de acceso y de pertinencia de opciones) del sitio Web de una PYME chilena, y que este conjunto se puede validar a travs de la verificacin de ellas en un proceso de prueba.

1.4 Objetivos
Objetivo General
El objetivo general es proponer un conjunto de mtricas para evaluar sitios Web de PYMEs chilenas, que permitan definirlo como aceptable con respecto a otro de similares caractersticas.

Objetivos especficos
Investigar todo tipo de mtrica existente en los proyectos de Ingeniera Web en la actualidad mundial. Seleccionar las mtricas encontradas validndolas para la realidad chilena. Definir un conjunto finito de sitios Web de PYMEs chilenas para evaluar las mtricas. Evaluar las mtricas revisando el comportamiento de los sitios Web seleccionados, de acuerdo al esquema de mtricas propuesto. Depurar las mtricas que en teora se detectaron y compararlas con las evaluadas en la prctica. Definir una propuesta de mtricas para sitios Web de empresas chilenas.

14

1.5 Justificacin de la Investigacin


La evaluacin de un sitio Web es una de las mejores prcticas para la gestin de la pgina Web de un negocio. Es el proceso de recopilar, analizar y evaluar los datos que indican qu tan bien un sitio Web cumple con sus objetivos [15]. Habitualmente la evaluacin de un sitio Web ayuda a crear un producto de mayor calidad que satisfaga las necesidades de los clientes y la misin de su empresa. No es un ejercicio de una sola vez, es un proceso continuo que requiere una estrategia para determinar qu, cundo y cmo se va a evaluar el sitio Web [15]. La mejor manera de mejorar la eficacia de un sitio Web es tener datos que indican cmo est funcionando. Quien administre el sitio Web, debe asegurarse entre otras cosas, de que el sitio est bien escrito y bien diseado, que los visitantes puedan utilizarlo fcilmente, que la informacin es exacta. En estricto rigor, se necesita evaluar y poner a prueba acciones rutinarias del sitio Web para hacerlo ms eficiente, oportuno, y til para los visitantes, basndose en datos cientficos y que emanen de una investigacin seria y objetiva, evaluando finalmente qu tan bien el sitio Web logra alcanzar la misin de la empresa, para as determinar qu reas se deben mejorar, y medir el impacto de esas acciones, de manera de mantener fieles a los clientes en el tiempo. Cuando podemos medir aquello sobre lo que hablamos, y expresarlo en nmeros, entonces conocemos algo sobre ello; pero cuando no podemos medirlo, ni expresarlo en nmeros, nuestro conocimiento es de un tipo pobre e insatisfactorio (Lord Kelvin).

1.6 Limitaciones de la Investigacin


Las mediciones a realizar sern slo a sitios Web de PYMEs chilenas. Se utilizar la Web, para encontrar los sitios que se usarn para evaluar las mtricas definidas en la propuesta. Las evaluaciones de cada sitio se harn de forma subjetiva usando la observacin.

15

1.7 Contexto
Las empresas en general no ven tan fcilmente la importancia y las ventajas que pueden obtener al momento de utilizar herramientas y soportes tecnolgicos en su desempeo diario. Esta problemtica se evidencia, por falta de conocimiento frente a la innovacin, integracin tecnolgica o por inseguridad natural de formar un equipo estratgico y de trabajo frente a proveedores no confiables, incapaces de cubrir esta importante labor. Es as como en general son las nuevas empresas, las empresas innovadoras y con espritu emprendedor, las que se atreven a usar las nuevas herramientas de Internet para incrementar su presencia en el mercado y aumentar las ventas a travs del posicionamiento Web. Hoy las comunicaciones exigen a las empresas contar, a lo menos, con un correo electrnico institucional donde canalizar los requerimientos de los clientes y atender de forma eficaz sus solicitudes. Sin embargo, el contar con un sitio Web es necesario para disponer de un lugar donde presentar la historia o referencias de la organizacin, experiencia y servicios o productos ofrecidos. La crisis econmica anunciada por el gobierno de Chile para el ao 2009, debera alertar a las empresas chilenas a potenciar su presencia en la Web, considerando lo masivo y econmico de este medio. Tener una pgina Web en estos tiempos debera ser considerado una necesidad y requisito para las empresas, tal como lo es contar con un departamento de ventas. Segn [25], es evidente; una PYME que no posee presencia Web o integracin tecnolgica usable, se encuentra en desventaja competitiva de quienes s han integrado este aspecto como factor clave de innovacin, crecimiento, prestigio y liderazgo. En [27] sealan que falta mucho camino que recorrer en temas de Internet en la octava regin, hay segmentos que an no conocen y no ven en Internet una oportunidad, y en donde sus empresas todava se sustentan en medios tradicionales de difusin e incluso sin ellos. En los pases donde Internet es utilizada como una herramienta de ventas y un efectivo canal de comunicacin, el marketing toma un lugar determinante a la hora de posicionarse en las mentes del consumidor, como empresa, productos y servicios. Segn el Jefe de Desarrollo e Informtica de [24], en los estudios relacionados con el uso de Internet, en Chile y en la Regin del Biobo se est avanzando ms rpido que en el resto de Latinoamrica, an cuando queda mucho por hacer. De hecho, Chile es el pas que lidera en uso de Internet, sea desde los hogares o desde el lugar de trabajo.

16

Cada vez, es ms difcil el posicionamiento de pginas Web para empresas, convirtindose en uno de los objetivos ms importantes dentro de los negocios orientados a Internet. Esto hace necesario un anlisis exhaustivo de cada sitio Web para optimizarlo, hacer un posicionamiento en buscadores e intentar aparecer entre las primeras posiciones de una bsqueda. Las empresas por necesidad de estar presentes en Internet, se esmeran en conseguir reducidos valores para una esplndida pgina con buenos contenidos, muchas animaciones y efectos en textos 3D o animaciones rediseadas, pero dejan de lado evaluar si las personas se interesan en lo que se ofrece a travs de su sitio Web; he ah la importancia de la constante evaluacin, tema que justifica esta tesis.

17

1.8 Contenido
El contenido de la tesis que se presenta se ha estructurado de la siguiente manera: A lo largo del captulo 2 se describe el estado del arte sobre las herramientas relacionadas con la evaluacin de productos Web. En el captulo 3 se realiza una descripcin de la propuesta, la metodologa de trabajo empleada para llevar a cabo la investigacin, as como un listado de las mtricas existentes en la realidad mundial. El captulo 4 contiene la clasificacin de las mtricas existentes y la seleccin de aquellas que sern usadas para la evaluacin de sitios Web. En el captulo 5 se definen las escalas y criterios que se emplearn para la evaluacin, la definicin de qu sitios Web sern usados para evaluar las mtricas, as como tambin el instrumento que se usar en las evaluaciones descritas. Finalmente, en el captulo 6 se describen los resultados obtenidos luego de haber evaluado cada una de las mtricas propuestas en cada uno de los sitios escogidos. El captulo 7 y ltimo, contiene las conclusiones del trabajo desarrollado y las nuevas lneas de investigacin que se proponen.

18

CAPITULO 2 ESTADO DEL ARTE


La evaluacin de productos Web no es una tarea sencilla. Es difcil considerar todas las caractersticas y los atributos deseables y obligatorios de una aplicacin o sitio Web si no se cuenta con un modelo que permita a los evaluadores especificar ordenadamente dichas caractersticas y atributos, de manera que sea reusable para otros entes. A continuacin, se describirn algunas de las herramientas y mtodos que existen actualmente y que pueden ayudar al usuario, tanto evaluador como diseador de un sitio Web, a analizar ciertas caractersticas y atributos del mismo, a reconocer la importancia y las ventajas que pueden obtener los empresarios al momento de utilizar herramientas y soportes tecnolgicos en su desempeo diario.

2.1 Mtodos
En cuanto a los mtodos actuales, se pueden mencionar algunos usados en nuestro pas y en otros lugares del mundo. Estos pueden ser encontrados en libros escritos por consultores de anlisis Web, empresas consultoras, artculos de revistas electrnicas, especialistas en mercadotecnia por Internet, gestin de los negocios en lnea, entre otros. Sterne [3], da a conocer herramientas y tcnicas para determinar si un sitio Web entrega un valor agregado al negocio, que le permita transformarse en una ventaja competitiva frente a su competencia en el mercado. Utiliza propuestas que se basan en casos de soluciones reales a problemas reales que enfrentan los sitios de empresas de hoy, como es el caso de las empresas norteamericanas Compaq, Hallmark, Kodak, Excite entre otras. En general, presenta un conjunto de mtricas, las que tienen un buen grado de cobertura, aunque la asociacin entre ellas es a veces difusa. El estudio que hace Nielsen [13], consiste en lo que se llama una evaluacin heurstica. Esta consiste en recabar informacin, por un nmero aproximado de 5 expertos calificados, a partir de una lista de puntos predeterminados, con el fin de detectar aciertos y errores bsicos de diseo. Nielsen plantea que es mejor realizar esta evaluacin y luego aplicar lo que se conoce como el test de usuarios 1, pues implica mayor costo y adems permite detectar fallas de interaccin y detalles que pueden pasar desapercibidos sino se sigue ese orden de ejecucin.

El test de usuario es un mtodo de evaluacin en el anlisis de un sitio web, que ayuda a descubrir problemas y potenciales mejoras para un sitio web, siendo la manera ms cercana de aproximarse al uso real de ste.

19

En esta evaluacin se realizan varias navegaciones por toda la Web, analizando los problemas segn un listado comn de tareas a revisar, las que suelen estar jerarquizadas, existiendo en cada grupo un nmero aproximado de 20 preguntas. Si bien es una buena y clara referencia dirigida a los ejecutivos de marketing de Internet de empresas, que detalla criterios a seguir para construir un sitio con xito y obtener una ventaja competitiva en el mercado y darle mayor valor al negocio, no apunta directamente a la evaluacin de sitios. Kapoun [11], seala que existen cinco criterios que deben examinarse para evaluar el contenido de un sitio Web, independiente del tipo que sea, para determinar si un artculo es vlido, de calidad y que se pueda usar como referencia en alguna investigacin. En general los criterios son: Precisin, si en la pgina se enumeran los autores y la institucin que public la pgina y si ofrece una forma de ponerse en contacto con el autor; Autoridad, si en la pgina se enumeran los autores y sus credenciales de dominio (.edu, .gov, .org, o .net); Objetividad, si la pgina ofrece informacin precisa con publicidad limitada y es objetivo en la presentacin de la informacin; Moneda, si la pgina est en curso y si se actualiza regularmente la informacin y los enlaces; Cobertura, si se puede ver la informacin correcta, no limitndose a tener como requisito la tecnologa o un software especfico. La justificacin se basa en que los autores son responsables de bibliotecas en sus respectivos estados, por lo tanto afirman que el material que se publique y que est a disposicin de los usuarios, debe contener por lo menos estos 5 criterios mencionados; sin embargo, estos criterios no apuntan de manera integral a la evaluacin de un sitio Web en general, que sin lugar a dudas es ms que slo el contenido de la informacin publicada. La propuesta de Inan [2] ofrece una variedad de tcnicas y soluciones para el anlisis y la medicin prctica de pginas Web, utilizando 4 ejemplos genricos ficticios para ilustrar el enfoque en cada captulo, lo que implica que se debe hacer un trabajo extra, evaluando si una mtrica es aplicable a una organizacin en particular. Determina qu tan bien un sitio Web cumple con las necesidades de los clientes en lnea, la forma en que interactan con la Web, e identifica los cambios que se necesitan hacer para tener ms xito y mantener la fidelidad de los diferentes tipos de clientes haciendo que sigan visitando el sitio Web. Seala que los diseadores deben estar conscientes de estas diferencias, procurando mejorar el diseo y la funcionalidad de los sitios que crean, para que as el proceso de medicin sea ms sencillo de aplicar. En el artculo de Manchn [12], se indica que hay ciertos aspectos del estudio de sitios Web que deben ser evaluados con precaucin, pues muchas de las mtricas

20

consideradas llegan a ser un sesgo de la confiabilidad que debe reportar toda evaluacin. Por otra parte, plantea que existen 5 diferentes mtodos de evaluacin de sitios Web que varan en su rigurosidad, costo y conocimientos: Evaluacin heurstica por expertos, Test de comportamiento de usuarios, Evaluacin a travs de simulacin cognitiva de todos los procesos de uso de un sitio Web, Evaluacin de la usabilidad intercultural, Evaluacin de la Accesibilidad2 por parte de discapacitados. De todos los mtodos mencionados, plantea que la estrategia de evaluacin ms aconsejable es combinar una evaluacin heurstica con un test de usuarios, por considerar que son las ms eficientes, prcticas y asequibles. Ambas tcnicas son de observacin e involucran a usuarios y a un grupo entre 3 y 5 evaluadores especializados para hacer vlida la evaluacin. Aconseja realizar la evaluacin heurstica antes que las pruebas de usuario y en los primeros prototipos de la creacin del sitio Web. El diseo de un sitio Web no puede basarse en suposiciones, sino en hechos, por lo que las indicaciones que da Manchn [12] son bastantes acertadas, pero no estn enfocadas a la evaluacin del sitio, sino ms bien al desarrollo del mismo. Por lo dems, las evaluaciones debieran poder hacerse en diferentes periodos de tiempo, considerando el inicio de la creacin del sitio hasta su construccin final. La tesis que postula Olsina [7], define una metodologa cuantitativa y flexible denominada Web Quality Evaluation Method (QEM), que evala la calidad en aplicaciones centradas en la Web y que permite especificar ordenadamente las caractersticas y atributos deseables y obligatorios a evaluar en un sitio Web ms o menos complejo, partiendo de un modelo jerrquico de calidad de producto basado en el estndar ISO 91263. La metodologa considera caractersticas como la Usabilidad, que consiste en revisar aspectos de Comprensibilidad Global del sitio, Mecanismos de ayuda y retroalimentacin en lnea y Aspectos de interfaces y estticos; Funcionalidad que trata aspectos de bsqueda y recuperacin as como tambin aspectos de navegacin y Exploracin; Confiabilidad que implica revisar aspectos no deficientes como errores de enlaces, nodos Web muertos (sin retorno), enlaces en construccin y Eficiencia que tiene que ver con el rendimiento (pginas rpidas) y accesibilidad. Presenta una gran similitud con las evaluaciones heursticas, pero a diferencia de ellas que indican estrictamente si un sitio Web cumple o no con un criterio. QEM
2

Capacidad de acceso a la navegacin online por parte de los usuarios.

Es un estndar internacional para la evaluacin del Software. El estndar est dividido en cuatro partes: modelo de calidad, mtricas externas (ISO 9126-2) , mtricas internas (ISO 9126-3) y calidad en las mtricas de uso (ISO 9126-1).

21

cuantifica qu tan cerca o lejos se est de cumplir el criterio, an cuando de todas maneras si presentan errores, stos deben ser corregidos. Al usar como base el estndar de calidad ISO 9126 de alguna manera certifica que la metodologa se sustenta en una base slida y probada. El estudio de tesis de Lafuente [6], apunta a determinar qu tipo de mtricas de la metodologa QEM de Olsina [9] podan ser automatizadas, con el fin de facilitar la tarea de los usuarios evaluadores en los procesos de control y evaluacin de calidad. Lafuente dise y desarroll una herramienta para automatizar un conjunto de mtricas Web, y poder aplicarlas rpidamente a un sitio Web obteniendo una evaluacin que permita hacer comparaciones. Las mtricas que consider son: la cantidad de enlaces rotos (broken links) de un sitio, la cantidad total de enlaces de un sitio, el porcentaje de enlaces rotos de un sitio, la cantidad de nodos web muertos de un sitio, la cantidad de imgenes de un sitio que referencian a la tecla Alt, la cantidad total de imgenes de un sitio, el porcentaje de presencia de la tecla Alt, la cantidad total de pginas de un sitio, el promedio de enlaces por pgina, el tamao de una pgina, las pginas de acceso rpido, el mantenimiento del color de los enlaces, la cantidad mxima de marcos o frames. La herramienta se ajusta a las fases y procesos de la metodologa Website QEM, siendo este su aporte principal pero a la vez su desventaja mayor, ya que de alguna manera es riesgoso asumir que esta metodologa es nica y que es 100% eficiente y eficaz, pues de existir algn enfoque distinto, el estudio no tendra fundamento terico valedero. Visitando Internet En el artculo presentado por [14], se considera que un sitio Web es exitoso si presenta una buena combinacin entre contenido y estructura. Porras seala que an cuando un sitio Web debe basarse en tecnologas disponibles y accesibles, usadas para crear e interpretar el contenido basado en Web, esto no garantiza que sea exitoso. Para lograr mantener caractersticas como mantencin menor, fcil y rpida, menor costo, diseo centralizado del cual todos pueden sacar provecho, compatibilidad con los navegadores antiguos y presentes, descarga ms rpida de la informacin, mayor accesibilidad y estar mejor posicionado en los buscadores, se necesita una buena plataforma Web, estndares Web, CMS4 (Content Management System, Sistema de Gestin de Contenidos) o lenguaje PHP, .NET, etc., infraestructura, mantenimiento, y una buena experiencia de los usuarios.
4

Programa que permite crear una estructura de soporte o framework para la creacin y administracin de contenidos, principalmente en pginas Web, por parte de los participantes.

22

Si bien, los comentarios percibidos indican aspectos relevantes acerca de como disponer de una buena plataforma, estndares y un lenguaje Web apropiado, son estndares relativos ms al rea de diseo que a mtodos de evaluacin, sin embargo precisan algo importante que es complementar contenido y estructura tomando como base la orientacin hacia el usuario. La Asociacin mexicana de Internet AMIPCI, publica en su sitio Web, especficamente en el link //amipci.org.mx/estandares/, que es difcil estandarizar en detalle todas las variables involucradas en la medicin de sitios y aplicaciones en Internet, pero que existen ciertas variables que son consideradas estndares, dado que las citan los sitios ms importantes y los principales programas para la medicin de sitios. Estas variables son: -Vista de Pgina (Page View): se refiere a cada una de las veces que una pgina es vista (descargada) por algn usuario de un sitio. -Tasa de Clics (Click Rate o Click Through Rate): porcentaje de Clics que uno o muchos usuarios de un sitio Web hacen sobre un espacio publicitario. -Visita de Usuario (User Session): cuenta una visita que un usuario hace a un sitio Web, sin importar el nmero de pginas que vea. -Tiempo o Duracin de Sesin (Session Time): se mide tomando como tiempo inicial el momento en el que un visitante carga la primera pgina perteneciente a un sitio Web y como tiempo final el momento en el que el usuario carg la ltima pgina de ese sitio. -Usuario nico o Visitante nico (Unique User o Unique Viewer): se consideran Usuarios nicos las personas distintas que han visitado un sitio en un determinado lapso. -Hit: esta medicin tiene el objetivo de conocer el nmero de peticiones que se generan en un servidor Web, para monitorear la capacidad del servidor del sitio Web y predecir sus necesidades de crecimiento. Si bien estas mediciones pueden ser catalogadas de estndares, son insuficientes para abarcar todas las reas de medicin que permiten obtener una conclusin objetiva frente a la comparacin de varios sitios Web. [26] es una organizacin de consultora con sucursales en Madrid y Barcelona en Espaa. El trabajo de esta consultora est focalizado en la capacitacin a empresas y en el diseo de productos a travs del anlisis, diseo y desarrollo de interfaces de usuario centradas en las personas, usando principios como el diseo centrado en el usuario, usabilidad, creatividad, estndares Web y accesibilidad. Para identificar los problemas y las dificultades de uso de una interfaz de usuario, aplican diferentes tcnicas de evaluacin manuales y automticas de usabilidad y accesibilidad con a lo menos 20 usuarios reales. Entre las tcnicas usadas estn: evaluacin heurstica realizada por expertos, eyetracking5, test de usabilidad con usuarios finales, auditora de accesibilidad basados en las pautas que establecen
5

Tcnica de anlisis del recorrido visual.

23

las normativas WAI del World Wide Web Consortium (W3C) a travs de Directrices de Accesibilidad para el contenido en la Web 1.0. Las mtricas de usabilidad estn divididas en tres grupos: Efectividad que son variables que permiten medir la exactitud y la plenitud con la que se alcanzan los objetivos de una tarea concreta, la Eficiencia que se refiere al esfuerzo que un usuario tiene que hacer para conseguir un objetivo y la Satisfaccin que se refiere a aquellas que tienen que ver ms con lo emocional o subjetivo. La validacin de las mtricas usando a usuarios reales, puede ser considerado como muy efectivo, pero limita la evaluacin pues la hace depender de terceros. Por otro lado, las medidas de usabilidad a evaluar se centran principalmente en el diseo de interfaces, no son mediciones respecto a una aplicacin existente sino a estndares Web, en los cuales ellos se basan para disear esa interfaz y optimizar el rendimiento al mximo. El artculo [15] publicado en el sitio gubernamental norteamericano www.usa.gov, seala que la evaluacin de un sitio Web es una las mejores prcticas para la gestin de la pgina Web de un negocio. La definen como el proceso de recopilar, analizar y evaluar los datos que indican qu tan bien un sitio Web cumple con sus objetivos, por lo que pueden hacer mejoras. Definen dos tipos de medidas de rendimiento relacionados con los sitios Web: -Eficacia del sitio Web, medida en trminos de las experiencias de los visitantes en un sitio Web. Esta mtrica usa datos cuantitativos y cualitativos como por ejemplo conocer al pblico y hacer investigacin de mercado, analizar el trfico de visitantes, buscar como proporcionar acceso a las personas con discapacidad, medir el reconocimiento pblico de un sitio, entre otros. -Logro de la misin de la organizacin, se debe medir el impacto del sitio Web en el logro de la misin de la organizacin. Esto se logra en la medida en que la organizacin logre su misin especficamente debido a su sitio Web, lo que las hacen difciles de identificar, recoger y evaluar. El artculo de [19] en Nielsen/NetRatings, considerada como una de las empresas ms grandes de referencia de Internet; indica que la principal y ms exacta mtrica para comparar sitios Web, debera ser el tiempo total de visita dedicado por los usuarios a un sitio Web, dejando a nivel secundario la cantidad de pginas visitadas. Lo anterior, motivado por un aumento en el uso del lenguaje AJAX 6, dado que permite que un sitio Web no deba cargar una pgina entera para actualizar el contenido, y al creciente uso de audio y video streaming7. Si bien puede ser un aporte una evaluacin y comparacin de sitios, no puede tomar slo este punto como criterio de evaluacin, pues se obtendr informacin
6

Acrnimo de Asynchronous JavaScript And XML (JavaScript asncrono y XML) tcnica de desarrollo Web para crear aplicaciones interactivas. 7 Tecnologas Web 2.0 que permiten escuchar msica o ver vdeos por Internet sin necesidad de ser descargados previamente.

24

resultante bastante limitada y sesgada, ya que este indicador debe ser siempre reevaluado a medida que la tecnologa siga evolucionando, lo que no deja de ser una limitante. Adems, no hace diferencia entre los distintos tipos de usuarios que puedan visitar el sitio (espordico, regular y habitual). Un ejemplo local La Gerencia de Proyectos de la empresa [27] que la verdadera efectividad de un sitio Web se mide en los contactos y cotizaciones generadas por los usuarios de Internet a travs de la misma pgina. Es decir, de nada sirve mencionar que un diseo es el mejor por su color o por el efecto de un flash animado si recibe pocos contactos o ninguno. Esta firma considera comercialmente exitoso un diseo de Pginas Web, si ste contempla aspectos de usabilidad, accesibilidad rpida y buen posicionamiento en la Web, as como tambin que sean de fcil lectura e interpretacin, teniendo niveles de profundidad en informacin en forma metdica y ordenada, visibilidad de contactos o direcciones e-mail y telfonos para que los clientes tomen contacto con la empresa. Sealan que un sitio puede ser definido como efectivo, en la medida que disponga de diferentes formas en las cuales los usuarios se puedan poner en contacto con la organizacin, pero el resto de las medidas se centran en aspectos del punto de vista del diseo de un sitio y no indica certeramente formas de evaluarlo, ni menos si es efectivo en empresas del mismo rubro.

25

2.2 Herramientas de Software


En cuanto a las herramientas de software de anlisis existentes en el mercado se pueden destacar las siguientes: El software Descartes versin 1.0, fue desarrollado por la consultora de eBusiness Multiplica y las compaas MarketingCom y NexTret y presentado en la Escuela de Negocios ESADE de Barcelona. Este software analiza las necesidades de los usuarios y define la propuesta de valor de la presencia online de una empresa, realizando para ello entrevistas a los responsables de negocio online de ciertas organizaciones lderes del mercado mundial. El software Certifica Metric, desarrollado por la Multinacional Certifica que opera principalmente en Amrica Latina, es una solucin para empresas que enfrentan desafos como aumentar las admisiones o prospectos generados va Web, aumentar ventas online o generacin de contactos, aumentar lealtad y trfico al sitio, disminuir costos de servicios, aumentar efectividad de sitios y campaas online. Adems, cuenta con una certificacin, que permite que las cifras sean validadas por el medio, permitindole al cliente comunicar sus logros (referencias en www.certifica.com). La herramienta SITE SWEEPER no slo recolecta datos en lnea sino que tambin genera informes textuales, grficos e hipertextuales, que facilitan el anlisis y documentacin. El usuario puede elegir las opciones a evaluar de un sitio Web y personalizar el informe final, para el caso de enlaces rotos. Permite adems analizar el tiempo de acceso a las pginas de un sitio, muestra los porcentajes de presencia de la tecla ALT en los documentos fuentes HTML. De igual manera, recolecta datos para la cantidad de enlaces, enlaces rotos o muertos8, entre otros. La herramienta WAMMI (Website Anlisis y MeasureMent Inventory), disponible actualmente en la versin 2.5 en la pgina www.wammi.com, fue creada por Jurek Kirakowski y Nigel Claridge para la evaluacin de la calidad de uso de sitios Web. Es un cuestionario en lnea que permite obtener una medida de la facilidad de uso de un sitio Web desde la percepcin del usuario, mediante la medicin y el seguimiento de las reacciones del usuario del sitio Web de fcil uso, realizado a travs de cinco dimensiones de medicin y sus respectivas subescalas: atractivo, control, eficiencia, utilidad y aprendizaje. Se puede aplicar a cualquier tipo de sitio Web y se ha utilizado en el sector pblico y en muchos sectores como la banca y las finanzas, los viajes, las telecomunicaciones y tecnologas de la informacin y todos los tamaos de las transacciones. Tambin se ha aplicado a soluciones de intranet corporativas.
8

Enlaces de hipertexto que no funcionan, ya sea porque llevan hacia una pgina o elemento Web que ha sido removido o llevan hacia una pgina que jams existi.

26

El software SUMI (Software Usability Measuring Inventory), es utilizado para medir la satisfaccin y valorar la percepcin del usuario de la calidad del software. Fue desarrollado por la Universidad College Cork como una solucin a los problemas de medicin de la percepcin de usabilidad del software por parte del usuario. Proporciona un mtodo vlido para la comparacin tanto de productos como de diferentes versiones del mismo producto. A partir de las respuestas obtenidas mediante esta herramienta y mediante el uso de conceptos estadsticos puede calcularse el valor de la usabilidad del producto. Es un cuestionario de 50 tems, siendo el nico desarrollado, validado y estandarizado sobre la base europea. Las subescalas SUMI estn siendo referenciadas en el estndar ISO 9241-10 y el ISO 9126. SUMI se recomienda a cualquier empresa que desee medir la calidad percibida de uso de software, ya sea como desarrollador, un consumidor de software, o como comprador / consultor. El software LinkScan en su actual versin 7.2, permite validar, principalmente los enlaces de un sitio Web como as tambin detectar archivos hurfanos (o pginas muertas), es decir, pginas que no posean ningn enlace de retorno o navegacin. En cada uno de los proyectos desarrollados se pueden introducir las opciones de URL del sitio a ser analizado, agregar una descripcin para el proyecto, y adems, seleccionar las opciones de anlisis como chequear enlaces externos al sitio y chequear archivos hurfanos. Posee entre otras cosas, una opcin que permite configurar la velocidad de anlisis, indicndole la cantidad de pginas a ser analizadas simultneamente. Cunto ms pginas sean analizadas simultneamente, el uso de la CPU va a ser mayor, pero en definitiva, la duracin del anlisis ser menor debido a la ejecucin paralela de las tareas. Urchin, es una firma de software ubicada en San Diego EE.UU., que trabaja para dueos de pginas Web y para responsables de marketing. La firma lanza un software con el mismo nombre, el que es utilizado por numerosos proveedores de hosting para ofrecer a sus clientes la posibilidad de analizar el trfico a sus sitios Web. Ofrece dos modalidades de sus productos: como un servicio 'on-demand' y como un software para ser instalado en un servidor propio, realizando grficos y estadsticas de los accesos a pginas Web. Actualmente en su versin 6 puede ser conseguido slo a travs de los asociados de Google Analytics. Este software analiza el trfico de uno o ms sitios Web y proporciona informes precisos y de fcil comprensin sobre los usuarios: de dnde proceden, cmo utilizan su sitio Web, qu los convierte en clientes, etc. Los servicios de los asociados a Google Analytics incluyen planes de asistencia de pago, servicio personalizado avanzado y consultora de anlisis. 27

En general se puede mencionar que estas herramientas de software, apuntan a medir el xito o fracaso de la Web mediante la medicin y el seguimiento de las reacciones del usuario, segn la percepcin de este respecto al sitio y el grado de satisfaccin del cliente, el comportamiento de la audiencia, usando para ello la observacin o cuestionarios en lnea que permitan obtener una medida de la facilidad de uso de un sitio Web. Otros generan informes con textos, grficos e hipertextos, que facilitan el anlisis y documentacin, todo con la idea clara de poder tomar decisiones correctas en el momento preciso. La mayora estn disponibles en varios idiomas siendo usados a nivel internacional y nacional.

28

2.3 Consideraciones sobre el Estado del arte


De todos los trabajos presentados anteriormente acerca de mtricas, indicadores, herramientas y modelos de evaluacin, se deduce que no estn basados en criterios comunes y en muchos casos estn definidos para dominios especficos, dificultando su aplicacin a procesos de evaluacin genricos y su reuso en distintos proyectos de investigacin. Se pueden por tanto concluir varios puntos generales: Las mtricas presentan slo aspectos abstractos a medir como la efectividad, la eficiencia, la satisfaccin, la usabilidad, la funcionalidad, la confiabilidad y la portabilidad. Miden el proceso de calidad del software a travs del estndar internacional ISO 9126. Se orientan mayoritariamente a mediciones estndares del punto de vista del proceso de desarrollo de un sitio Web, como por ejemplo lo que difunde el World Wide Web Consortium (W3C). Apuntan a evaluar la validez, calidad y objetividad de la informacin publicada en un sitio Web. Miden la existencia o no de elementos multimediales como complemento a lo textualmente publicado. Se orientan al desarrollo de sistemas de informacin en general pero no centrados en la Web. Miden con enfoques dirigidos slo a los costos incurridos por la empresa olvidando la visin del cliente. Se inclinan principalmente a la Medicin de Audiencias. Evalan mtricas especficamente respecto a la usabilidad y/o funcionalidad de sitios Web. Evalan la accesibilidad a un sitio Web diseado hacia un rea muy especfica que sesga las opciones de reusar las mtricas, por ejemplo para nios, personas discapacitadas o adultos mayores. Evalan el diseo de sitios Web netamente educativos.

29

Consideran metodologas de evaluacin y seleccin para productos software con un dominio particular, pero no con alcances globales y otras que no definen claramente objetivos ni audiencia a evaluar. Utilizan terminologa, tanto del punto de vista sintctico como semntico, no centrada en la realidad chilena, pues los autores no son nacionales. No existen estudios demostrativos aplicados a las PYMEs chilenas. Permiten muchas veces slo analizar sitios Web y recolectar de ellos cierta informacin para luego emitir un reporte con los datos recolectados y que las empresas puedan analizarlos para su beneficio.

Estos resultados estn dentro de lo presupuestado debido, precisamente a la inexistencia de trabajos en este contexto. Todo lo anterior, presenta ciertas limitaciones que impiden su posible reutilizacin en otros mbitos y la aplicacin de las herramientas por parte de terceros para la correcta toma de decisiones de cualquier tipo de empresa y que afectan la representacin de los resultados. En concreto, falta considerar aspectos que permitan testear, medir, evaluar y comparar cuantitativamente las experiencias de usuarios y que sean aplicados a la realidad nacional de las PYMEs y que no tan slo sean estudios de medicin que les sirvan a las empresas para saber lo que ganan, sino que sirvan como una gua de evaluacin para ofrecer un servicio de calidad a los clientes visitantes de los sitios Web.

30

CAPITULO 3 METODOLOGIA
3.1 Conceptos Bsicos
Antes de profundizar en la metodologa en s, se describirn algunos conceptos importantes de manejar previamente, segn lo que publica [5]. METRICA: es una medida cuantitativa del grado en que un sistema, componente o proceso posee un atributo dado. Una mtrica relata de alguna forma las medidas individuales sobre algn aspecto. MEDICION: es el acto de determinar una medida. Es el resultado de la recopilacin de uno o varios aspectos de los datos. MEDIDA: proporciona una indicacin cuantitativa de extensin, cantidad, dimensiones, capacidad y tamao de algunos atributos de un proceso o producto. INDICADOR: es una mtrica o combinacin de mtricas que proporcionan una visin profunda del proceso del software, del proyecto del software, o del producto en s. Un indicador proporciona una visin profunda que permite al gestor de proyectos o a los ingenieros del software, ajustar el proceso, el proyecto, o el producto para que las cosas salgan mejor. En la Figura 1, se muestra la relacin de estos conceptos con la seleccin y evaluacin de mtricas. Recopilacin de datos

Medidas

Seleccin de mtricas

Mtricas

Evaluacin de mtricas

Indicadores

Figura 1. Proceso de recopilacin, seleccin y evaluacin de mtricas

31

3.2 Descripcin de la propuesta


El mundo de la Web actualmente est en pleno crecimiento y da la idea de que no tiene fin, lo que lleva a cuestionarnos el uso indiscriminado de las tecnologas de la informacin y las complicaciones que esto le pudiera traer al usuario comn. Cada vez son menos las empresas que no cuentan con un sitio Web que les ayude en sus negocios. La diferencia entre tener y no tener un sitio Web puede influir en perder muchos potenciales clientes, por lo que la posibilidad de contar con informacin rpida, ordenada y segura desde cualquier lugar ya no le es ajeno a nadie. De hecho, existen muchas empresas que han llevado sus catlogos de compras a Internet con muy buenos resultados en trminos de interaccin con la audiencia. Independientemente de la orientacin del sitio Web, ya sea del mbito educativo, comercial, tecnolgico, de servicio, etc., estas aplicaciones deben contar con caractersticas y atributos que aseguren su calidad y efectividad a la hora de ser diseadas y evaluadas. Incluso, debieran considerar atributos especficos del mbito objetivo para el cual se idearon. Si no se est midiendo el uso de la Web no es posible identificar si los visitantes cumplen los objetivos para los cuales se dise la aplicacin. As es como nacen herramientas altamente tecnologizadas que monitorean frecuentemente el comportamiento de las audiencias y el cumplimiento de los objetivos por parte del sitio Web. Los informes de medicin Web pueden llegar a ser de vital importancia para el cumplimiento de los objetivos, ya que son una herramienta de gestin altamente efectiva que va entregando informacin especfica sobre el comportamiento de la audiencia acerca de la pgina Web. Si una pgina Web entra en circulacin, es esencial saber la reaccin de los usuarios al verla por primera vez. En su generalidad, estas herramientas permiten obtener informes, no slo de las preferencias de los usuarios dentro de la pgina segn los links ms visitados; sino que tambin permiten conocer qu tipo de personas los utilizan, por qu la visitan, incluso la resolucin de pantalla de cada uno de ellos, frecuencia y alcance del mensaje, estimar el tiempo de permanencia dentro del sitio, etc. Posteriormente a la determinacin de aquellos atributos imprescindibles, se debieran realizar evaluaciones de cada una de ellos en determinados sitios Web, lo que permitira determinar objetivamente la eficacia de esa aplicacin, ya que sin evaluacin la medicin no tiene sentido. Dado entonces que la calidad del software para la Web es una preocupacin actual de la comunidad cientfica y empresarial a nivel mundial, es que esta tesis se enmarca en el rea de evaluacin de sitios Web. Especficamente, lo que interesa rescatar en este aspecto es cmo poder medir y evaluar la satisfaccin de

32

un usuario cuando visita un sitio Web, para adquirir algn producto o servicio que est a su alcance. De esa manera entonces, se podra determinar qu sitio Web es ms preferido que otro de sus mismas caractersticas, de tal manera que ayude a la empresa a tomar esta informacin y usarla como ventaja competitiva frente al resto de las empresas de su competencia y determinar si se est recibiendo un retorno sobre la inversin que se ha realizado para construir, operar y mantener el sitio Web. Dentro del periodo de investigacin de este proyecto, se pudo constatar que las mediciones a sitios Web son realizadas sobre todo por empresas grandes, en donde claramente existen ms posibilidades de medir atributos pues existe un contexto ms definido, y por ende entonces, se hace ms atractivo para esta tesis evaluar la realidad en empresas pequeas y medianas. La Figura 2 resume la propuesta sealada.

PYME

Sitio Web Evaluacin Sitio Web Informes de medicin

Figura 2. Esquema de la propuesta

33

3.3 Metodologa de trabajo


En esta tesis se propone buscar mtricas, que hayan sido usadas y consideradas por empresas internacionales y nacionales, que permitan detectar cundo un sitio Web es efectivo y validarlas para sitios chilenos. Posteriormente, se pretenden evaluar esas mtricas en un conjunto finito de sitios Web chilenos de similares caractersticas, para determinar si esas mtricas son suficientes y adecuadas a la hora de considerar una evaluacin de sitios o aplicaciones Web y si no lo son, realizar un proceso de depuracin. Lo anterior, permitir definir una propuesta de mtricas a ser usadas por las PYMEs chilenas cuando necesiten evaluar su sitio Web. Concretamente los pasos a seguir sern los siguientes: Bsqueda de mtricas o Revisin de trabajos relacionados con la Ingeniera Web, de manera de obtener un listado de mtricas contemplando aquellas probadas y/o consideradas como mnimas e indispensables en cada una de estas investigaciones. o Recorrido por diferentes sitios de PYMEs, con el fin de observar atributos particulares que ellas contemplen, para definir las mtricas que realmente son necesarias para un sitio Web de ese tipo. Definicin de un conjunto finito de sitios Web o Determinacin concreta de la cantidad de sitios Web de PYMEs que se analizarn de acuerdo al cumplimiento de ciertas caractersticas por parte de la empresa, como por ejemplo: tipo y rubro de la empresa, de origen chileno, con buenos niveles de ingreso, con una cantidad mnima de aos de existencia en el mercado nacional, entre otros. Evaluacin de las mtricas o Recorrido por los sitios Web de PYMEs escogidos, y en cada uno de ellos revisar y medir la existencia de las mtricas seleccionadas haciendo uso de una medicin manual o automatizada. o Depuracin de las mtricas obtenidas producto del anlisis terico inicial ms aquellas que fueron rescatadas de la observacin de sitios Web chilenos. Evaluacin de los sitios Web o Definir una escala porcentual con valores cuantitativos para cada grupo de mtricas, de acuerdo al grado de importancia que stas tengan en la evaluacin global exitosa del sitio. o Graduar la presencia de las mtricas en cada uno de los sitios a ser evaluados, las de mayor presencia, cules son comunes para jerarquizarlas, cul es una caracterstica deseable o indeseable.

34

o Establecer un ranking de acuerdo a lo obtenido anteriormente, de manera de poder compararlos y establecer qu sitio es mejor que otro. Propuesta de mtricas o A partir de la evaluacin antes realizada poder concluir con una propuesta de mtricas vlida aplicable a un sitio Web de una PYME chilena.

La Figura 3 resume la metodologa de trabajo que se llevar a cabo para el desarrollo de la tesis.
Identificacin de rbricas Diseo Matriz de valoracin por Sitio Evaluacin sitios Por cumplimiento de mtricas Puntajes por Sitio Evaluacin mtrica Por importancia

Categorizacin de Sitios segn puntaje

Figura 3. Esquema metodolgico de la propuesta para la evaluacin de sitios Web

En general, el procedimiento a seguir para la evaluacin de un sitio Web responde a las siguientes interrogantes: Qu hay que medir? Cules son sus requisitos? Se definen un conjunto de atributos de un sitio Web agrupados en las categoras de contenido, navegacin, presentacin y comportamiento. Cmo medirlo? Qu herramientas se utilizan? Qu metodologas son necesarias para reunir los datos que son necesarios? Se mide cada mtrica, relacionada con los atributos existentes, utilizando alguna ponderacin o regla. Qu se har con los resultados y cmo ayudan a satisfacer los objetivos del sitio Web y la misin del negocio? Se obtiene la puntuacin final del sitio Web. Se analizan los efectos de esta puntuacin.

El hecho de que el objetivo de este proyecto sea orientarse especficamente a medir los sitios Web de PYMEs, implica mantener mtricas que satisfagan la realidad chilena y ver de qu forma se puede ir agregando valor al negocio.

35

3.4 Resumen de Mtricas existentes


De acuerdo a la informacin que se pudo recoger en la literatura, diferentes autores investigadores del tema y empresas consultoras que se dedican a la evaluacin de aplicaciones Internet y a cmo medir el xito de un sitio Web, mencionan distintos tipos de mtricas de acuerdo a lo que ellos consideran como relevante segn lo que estn midiendo. Por lo mismo, y con el sentido de mostrar un marco referencial valedero para la propuesta, se expondr a continuacin un resumen de los diferentes tipos de mtricas existentes en la actualidad, encontradas y clasificadas segn los aspectos que medan en comn, detallando ms especficamente las mtricas de software que son la base de esta tesis. Mtricas de Hardware, segn lo indicado en [4] algunos ejemplos pueden ser: Velocidad del procesador (mhz, ghz, ) Tamao de la memoria (Gbytes, Mbytes, ) Espacio en disco Velocidad de transferencia Nmero de ciclo de mquina por segundo Nmero de conexiones USB disponibles MIPS millones de instrucciones por segundo Mbps Millones de bits por segundo CPS caracteres por segundo Mtricas de Software Se define como algn tipo de medida relacionada al sistema de software, proceso o documentacin. La informacin encontrada en [5] respecto a mtricas de software, contempla varias clasificaciones que apuntan a diferentes aspectos del proceso y del producto de software, por lo que para efectos explicativos, se agruparn entre ellas de acuerdo a algn criterio en comn, que permita comprender su eventual aplicabilidad y cmo esto influye en la toma de decisiones en el aspecto administrativo de una empresa. a) Segn la dependencia con el producto: Mtricas Directas Las Mtricas directas son aquellas que se obtienen a travs de un proceso de medicin directo, es decir, que no involucra a ningn otro atributo, y su definicin no depende de otras mtricas. Un atributo directo se mide a travs de una mtrica directa, y es la resultante de una correspondencia directa entre un atributo de un

36

ente (del dominio emprico) y el valor (del dominio numrico) a partir de algn criterio. Ejemplos: cantidad de horas de desarrollo, cantidad de lneas de cdigo fuente del mdulo, cantidad de mdulos solicitados y cantidad de mdulos completados, cantidad de enlaces rotos en una pgina Web. Mtricas Indirectas Las Mtricas indirectas dependen de otras mtricas y estn especificadas por una funcin de clculo. Son aquellas que se obtienen a partir de mtricas directas. Un atributo indirecto es medido a travs de una mtrica indirecta. La mtrica indirecta es la resultante de una correspondencia entre relaciones de dos o ms atributos (y/o parmetros) y el valor numrico es obtenido por medio de un modelo matemtico o ecuacin. Ejemplos: lneas de cdigo producidas por hora, completitud de desarrollo, tamao promedio de los mdulos, porcentaje de enlaces rotos en una aplicacin Web. b) Segn el dominio: Mtricas del proceso Son datos cuantitativos de los procesos del software. Se utilizan para evaluar si la eficiencia de un proceso ha mejorado en el largo plazo. Se recopilan de todos los proyectos y durante un largo periodo de tiempo. Las mtricas del proceso cuantifican atributos del proceso de desarrollo y del ambiente de desarrollo, relacionadas con el software. Esta definicin incluye recursos como la experiencia profesional y el costo del desarrollo y mantenimiento, entre otros. Se puede medir el esfuerzo y tiempo dedicado a las pruebas (las mejoras efectivas para los procesos de prueba reducen el esfuerzo, el tiempo de prueba o ambos), tiempo de desarrollo (total y por proceso, subproceso), tipo y cantidad de fallas (review), nmero de cambio con modelos previos, costo aseguramiento de la calidad, costo por introducir nuevo proceso y herramienta, cantidad de personas por da, por mes, intensidad del trabajo, interrupciones, etc. Mtricas del producto Componentes, entregas o documentos resultantes de una actividad de proceso. Las mtricas del producto son mediciones del producto de software. Esta definicin incluye el tamao del producto, la complejidad de la estructura lgica y la complejidad de estructuras de datos, entre otros. Es posible reunirlas en 3 grupos: Mtricas de tamao: lneas de cdigo, nmero de tokens (unidades clasificables como operandos u operadores), nmero de funciones, etc. Mtricas de estructura de datos: nmero de variables, de servicios, total de mensajes, total de parmetros, etc. Mtricas de estructuras de control: nmero de decisiones, complejidad ciclomtica (nmero de caminos independientes a travs de un programa) de un mdulo.

37

Mtricas del proyecto Las medidas del proyecto de software son tcticas, lo que implica que estas mtricas y los indicadores derivados de ellos, los utilizan un gestor de proyectos y un equipo de software para adaptar el flujo de trabajo del proyecto y las actividades tcnicas. Se utilizan para minimizar la planificacin de desarrollo guiando los ajustes necesarios que eviten retrasos y mitiguen problemas, y en segundo trmino para evaluar la calidad de los productos en el momento actual y cuando sea necesario. Ejemplos: total de tiempo invertido, total de dinero gastado, horas/Hombre totales, y por fases, cantidad de lneas de cdigo (o pginas Web) por proyecto, y por requisito funcional, duracin del proyecto. c)Mtricas de calidad Los requisitos del Software son la base de las medidas de calidad. A continuacin algunas mtricas que definen la calidad. Mantenibilidad El esfuerzo necesario para localizar y arreglar un error en un programa. Modificabilidad. Mnima redundancia. Ejemplos: facilidad de anlisis, facilidad de cambio, estabilidad y facilidad de prueba. Portabilidad El esfuerzo necesario para transferir el programa de un entorno de sistema hardware y/o software a otro entorno diferente. Software independiente del hardware. Ejemplos: facilidad de instalacin, facilidad de ajuste, facilidad de adaptacin al cambio. Usabilidad (facilidad de manejo) El esfuerzo necesario para aprender a operar los datos de entrada e interpretar las salidas de un programa. Eficiente y efectivo desde el punto de vista del usuario. Diseo de interfaces centradas en el usuario, facilidad de comprensin, facilidad de aprendizaje y operatividad. Reusabilidad (total o parcial) Hasta donde se puede volver a emplear un programa (o partes de un programa) en otras aplicaciones, en relacin al empaquetamiento y alcance de las funciones que realiza el programa, lo que implica un ahorro de tiempo y dinero. Ejemplos: cantidad de programa reutilizable, memoria "media" reutilizada, total de lneas de cdigo reutilizable. Flexibilidad El esfuerzo necesario para modificar un programa operativo.

38

Fiabilidad Hasta dnde se puede esperar que un programa lleve a cabo su funcin con la exactitud requerida. Ejemplos: medicin de la frecuencia y gravedad de las fallas, la exactitud de las salidas, el tiempo medio entre fallas, la capacidad de recuperacin de una falla y la capacidad de prediccin del programa. d) Segn su orientacin: Mtricas orientadas al tamao Son medidas directas al software y el proceso por el cual se desarrolla. Proceden de la normalizacin de las medidas de calidad o productividad considerando el tamao del software que se ha producido. Ejemplos: errores por KLOC (Koit LO fines oda C - Mil Lneas de Cdigo), defectos por KLOC, costo por LOC (Lneas de cdigo), pginas de documentacin por KLOC, errores por persona-mes, LOC por persona-mes, costo por pgina de documentacin. Mtricas orientadas a la funcin Son medidas indirectas del software y del proceso por el cual se desarrolla. Estas medidas se centran en la funcionalidad o utilidad del software. Se emplean como un valor de normalizacin, como medio para medir la funcionalidad que entrega la aplicacin. Emplea datos histricos, se usa para estimar el costo o el esfuerzo requerido para disear, codificar y probar el software; predecir el nmero de errores que se encontrarn durante la prueba; pronosticar el nmero de componentes, de las lneas de cdigo proyectadas, o ambas en el sistema implementado. Ejemplos: errores por FP (function points puntos de funcin), defectos por FP, costo por FP, pginas de documentacin por FP, determinar el tipo de proyecto, valorar el grado de rigor requerido (identificar el criterio de adaptacin, calcular el valor de Task Set Selector (TSS selector de conjunto de tareas establecidas), interpretar el TSS para determinar el grado de rigor), seleccionar las tareas de ingeniera de software apropiadas, FP por persona-mes. Mtricas para proyectos orientados a objetos Las mtricas de proyectos de software convencionales (LOC o PF) se aplican en la estimacin de proyectos de software orientados a objetos. Sin embargo estas mtricas no proporcionan el suficiente grado de granularidad para la planificacin y los ajustes de esfuerzo que se requieren conforme se itera a largo de un proceso evolutivo o incremental. Se necesitan mtricas que se puedan aplicar a las caractersticas de diseo y clase. Tipos: Mtricas de diseo orientadas a clases, orientadas a operaciones, calidad de los diagramas de clases. Ejemplos: nmero de guiones de escenario, nmero de clases clave, nmero de clases de apoyo, nmero promedio de clases de apoyo por clase clave, nmero de subsistemas.

39

Mtricas orientadas a los casos de uso El caso de uso se define en etapas tempranas del proceso de software, lo que permite emplearlo en la estimacin, antes de iniciar las actividades significativas del modelado y construccin. Los casos de uso describen funciones y caractersticas visibles al usuario que son requisitos bsicos para un sistema. El nmero de casos de uso es directamente proporcional al tamao de la aplicacin en LDC, as como el nmero de casos de prueba que tendrn que disearse para ejercitar completamente la aplicacin. Son independientes del lenguaje de programacin. Dependen de la complejidad del problema. Mtricas orientadas a proyectos de Ingeniera Web El objetivo de los proyectos de ingeniera Web es construir una aplicacin Web que proporcione una combinacin de contenido y funcionalidad al usuario final. Por lo mismo, no se pueden aplicar las mtricas para el software convencional. Entre las medidas que se recopilan existen las siguientes: nmero de pginas Web estticas, nmero de pginas Web dinmicas, nmero de vnculos internos de la pgina, nmero de objetos de datos persistentes, nmero de sistemas externos en interfaz, nmero de objetos de contenido esttico, nmero de objetos de contenido dinmico, nmero de funciones ejecutables, esfuerzo/tiempo por tarea de Ingeniera de Software, errores no cubiertos por hora de revisin, fechas de entrega reales v/s programadas, cambios (nmero) y sus caractersticas, distribucin del esfuerzo sobre tareas de Ingeniera de Software. Mtricas orientadas al diseo (atributos internos) Se concentran en las caractersticas de la arquitectura del programa, con nfasis en la estructura arquitectnica y en la eficiencia de los mdulos. Ejemplos: acoplamiento, cohesin, complejidad, modularidad, profundidad, amplitud, tamao (por ejemplo de mdulos, del diseo mismo, del cdigo), nmero de requerimientos, nmero de casos de uso y actores, nmero de objetos por tipo, nmero de Subsistemas, clases. A continuacin, en la Figura 4 y 5a, 5b y 5c se muestra un esquema que resume de manera grfica la clasificacin de las mtricas encontradas.
Mtricas de hardware Mtricas de servicios Mtricas de comunicaciones
(1)

Mtricas de software
(2) (3)

Relacin con el producto Directas Indirectas

Dominio

Orientacin

Calidad

Figura 4. Esquema de mtricas encontradas

40

En mayor detalle (1), (2) y (3)

(1)

Dominio

Del proceso

Del producto

De los recursos

Figura 5.a Clasificacin de mtricas segn su Dominio

(2)

Orientacin

Tamao

Funcin

Objetos

Casos de uso

Ingeniera web

Diseo

Figura 5b. Clasificacin de mtricas segn su Orientacin

(3)

Calidad

Mantenibilidad

Portabilidad

Usabilidad

Reusabilidad

Flexibilidad

Fiabilidad

Figura 5c. Clasificacin de de mtricas segn su Calidad

41

3.5 Definicin de mtricas ms relevantes


Evaluando las definiciones en la literatura y las experiencias internacionales, tal como se mostr en el resumen definido anteriormente en el punto 3.4, se logr determinar un conjunto de mtricas que son las ms relevantes; por lo tanto en este punto, se explicarn cada una de esas mtricas. Las mtricas sugeridas son: a) Color/letras/fondo El sitio presenta colores adecuados, letras afines con el fondo tanto en color como en forma? Justificacin. El contenido del sitio debe presentar colores armnicos, letras de tamao, tipo y colores afines al fondo, fondos que complementen la informacin presentada. Todo esto para lograr que la permanencia del usuario sea agradable cuando visita el sitio. b) Lenguaje y redaccin. Se utilizan criterios como: El sitio Web habla el mismo lenguaje que sus usuarios? La informacin escrita en el sitio tiene faltas de ortografa o errores gramaticales? Justificacin. El sitio debiera disponer de una opcin para que el texto escrito pueda ser ledo por el usuario en distintos idiomas, ya que no se tiene certeza del idioma nativo del usuario. Adems el texto debiera pasar por una revisin con un editor para no permitir faltas ortogrficas o malas redacciones que hagan perder el sentido de la lectura e interpretacin de la informacin entregada. c) Ttulos/textos. Se utilizan criterios como: Los ttulos son significativos? Los textos son de fcil lectura e interpretacin? Justificacin. Ttulos deben ser claros, precisos y el texto de una comprensin tal que el usuario entienda lo que lee. d) Elementos multimedia. Se utilizan criterios como: El sitio incluye elementos multimedia como grficos, sonido y/o animacin? Estos elementos se incluyen de forma adecuada siendo un aporte complementario al texto y no en forma exagerada? Justificacin. Los multimedios contribuyen a explicar el tema y mejorar el mensaje hacia el usuario hacindolo ms entendible.

42

e)

Imgenes. Se utilizan criterios como: Cul es el promedio de imgenes por pgina? La mayora de las Pginas tienen imgenes? Cuntas imgenes del Sitio referencian a la tecla Alt? Cuntas imgenes en total posee un Sitio?

Justificacin. Es relevante que existan suficientes imgenes alusivas a los temas mostrados y sobre todo que todas (especialmente aqullas que son usadas para la navegacin) tengan una etiqueta que describa la imagen y su enlace para que las personas que son discapacitadas visuales puedan usar bien el sitio. f) Cobertura. Se utilizan criterios como: Se puede ver la informacin correcta - no se limita a las tasas de explorador, la tecnologa, o se debe utilizar un software especial para ver el contenido? Se incluye una descripcin adecuada de cada uno de los productos y servicios que se ofrecen? Qu temas se tratan? Qu es lo diferente que esta pgina oferta que no est publicado en otros lugares? Cul es su valor intrnseco? El sitio proporcionar fondo para la cobertura del material del tema? Quin es la audiencia? Cul es el foco de la informacin? Justificacin. Con frecuencia, es difcil determinar el alcance de la cobertura de un tema de una pgina Web. La pgina puede o no incluir enlaces a otras pginas Web o las referencias de impresin. A veces la informacin en la Web es "slo por diversin", lo que puede ser o no de inters para alguna persona. g) Interaccin. Si la organizacin requiere informacin de los usuarios, se indica claramente de qu modo ser utilizada la informacin? Justificacin. Cuando se solicita informacin personal de las personas por medio de un sitio Web, este debiera indicar explcitamente con qu fin lo solicita dado que en la actualidad nos enfrentamos a un problema de seguridad muy delicado en la red. h) Exactitud. Se utilizan criterios como: Se indican las fuentes de la informacin para que puedan comprobarse los datos con el original? El documento indica las fuentes utilizadas y las fechas exactas en que ocurrieron los acontecimientos? Justificacin. El mostrar las fuentes asociadas a la informacin en el sitio, tiene que ver con la transparencia, credibilidad y confianza que se debe mostrar al cliente, referente a lo que se publica. Incluso se debe distinguir entre autor y 43

administrador del sitio o webmaster. Actualmente, no existen estndares Web para garantizar la exactitud. i) Precisin. Verificar si la informacin es precisa, fiable, verificable y libre de errores. Justificacin. Debe existir un editor o alguien que compruebe/verifique la informacin que se publica en el sitio. j) Grados de autoridad de la informacin. Se utilizan criterios como: Si el sitio es parte de una organizacin mayor, se indica el logo o nombre de la organizacin en la pgina principal?, Se indica el Copyright de los materiales incluidos en la pgina?, Se identifican los autores y la institucin que public la pgina?, Cules son las credenciales del autor?, Los autores son expertos en el rea, es un autor cualificado?, Cundo se publicaron los documentos?, Quin es el patrocinador?, Es de renombre?, Cmo es su reputacin?, Existe un vnculo a la informacin sobre el autor o el patrocinador?, El autor proporciona informacin de contacto?, Se puede buscar una cabecera o pie de pgina que muestra la afiliacin?, Si la pgina no incluye ni la firma ni indica un patrocinador, hay alguna otra manera de determinar su origen? Justificacin. Cualquiera puede publicar cualquier cosa en la Web. A menudo es difcil determinar la autora de la informacin publicada en una pgina Web. Incluso si una pgina est firmada, los ttulos no suelen ser siempre clarificatorios. El patrocinio no siempre es indicado. k) Identidad e informacin. Se utilizan criterios como: Se proporcionan mecanismos para ponerse en contacto con la empresa, visibilidad de contactos o direcciones e-mail y telfonos? Se muestran los contactos y cotizaciones generadas por los usuarios de Internet a travs de la misma pgina Web? Justificacin. Es necesario que la empresa muestre la forma de cmo el clienteusuario puede tomar contacto con ella y as sentirse ms cercanos y confiados ya que existe un respaldo formal detrs del sitio. l) Logro de la misin del organismo. Se utilizan criterios como: Cul es el impacto del sitio Web en el logro de la misin de su organismo? Se indica cul es la misin de la empresa? Justificacin. Identificar si los resultados ayudan a satisfacer la misin de la empresa. m) Objetivos. Se utilizan criterios como: Cules son los objetivos del sitio Web?

44

Cul es la finalidad del sitio en la presentacin de la informacin: persuadir, informar o entretener?

Justificacin. La informacin presentada en el sitio, debe dejar de manifiesto cual es el objetivo del sitio Web y cmo los resultados ayudan a satisfacer los objetivos del sitio Web. n) Confiabilidad. Se utilizan criterios relacionados con los enlaces por pgina como los siguientes: Cul es el promedio del nmero de enlaces por pgina? Qu pginas presentan ms enlaces? Qu pginas no presentan enlaces? Cuntos sitios externos son referenciados? Existe duplicacin de enlaces Internos y externos al sitio? Cul es la cantidad de enlaces rotos (Broken Links) del sitio? Cul es la cantidad total de enlaces del sitio? Cul es el porcentaje de enlaces rotos del sitio? Justificacin. Implica revisar aspectos como por ejemplo errores de enlaces, nodos Web muertos (sin retorno), enlaces en construccin. o) Posicionamiento. Cul es el grado de posicionamiento del sitio en los buscadores de la Web? Justificacin. Si el posicionamiento del sitio dentro de los buscadores tradicionales es bueno, esto asegurara en gran medida que el sitio sea visitado por ms usuarios. p) Efectividad. Variables que permiten medir la exactitud y la plenitud con la que se alcanzan los objetivos de una tarea concreta. Se utilizan criterios como: Cul es el porcentaje total de tareas completadas? Cul es el porcentaje de tareas completadas en el primer intento? Cul es el porcentaje de usuarios que completan las tareas? Cul es la relacin entre xitos y fracasos? Cuntas veces los usuarios solicitan ayuda por no saber qu hacer? Justificacin. La efectividad ayuda a determinar con qu frecuencia el usuario por s solo cumple o no con la tarea que se propuso realizar dentro del sitio o si tuvo que pedir ayuda. q) Eficiencia. Se utilizan criterios como: Cul es el tiempo empleado en completar cada tarea? Cul es el porcentaje o nmero de errores cometidos? Cul es el porcentaje de errores o problemas segn su severidad?

45

Cul es el tiempo empleado en recuperarse de los errores? Cul es el nmero de clics realizados para completar una tarea? Cul es el nmero de pginas visitadas para completar una tarea? Cul es el tiempo empleado en determinadas pginas o grupos de pginas? Cul es el porcentaje o nmero de veces que se acude a ayudas, FAQ o similar?

Justificacin. El esfuerzo que un usuario tiene que hacer para conseguir un objetivo. r) Grado de satisfaccin del usuario. Tienen que ver ms con lo emocional o subjetivo. Se utilizan criterios como: Cul es el porcentaje de usuarios que despus de utilizar el producto lo recomendara a un amigo? Cul es la proporcin de adjetivos positivos o negativos que cada usuario otorga al producto? Cul es el porcentaje de usuarios que califican el producto ms fcil de usar que cualquiera de la competencia directa? Cul es el nmero de veces que el usuario expresa satisfaccin o insatisfaccin? Justificacin. Tiene que ver con hacerse cargo del cliente. Los mensajes u opiniones de los usuarios visitantes ayudan a la organizacin a poder mejorar en aquellos puntos en que estos los encuentran deficientes o seguir con aquellos que causaron buena impresin de manera de brindar siempre un mejor servicio. s) Funcionalidad Trata aspectos de bsqueda y recuperacin as como tambin aspectos de Navegacin y Exploracin (indicacin del camino, etiqueta de la posicin actual). Se utilizan criterios como: Se ha comprobado que las pginas pueden imprimirse de forma legible? El sitio es organizado y fcil de navegar? Muestra las maneras de navegar, existen conos alusivos? El sitio se carga en un tiempo prudente? Justificacin. Si existe una buena organizacin del contenido del sitio, acompaado de conos alusivos, el usuario podr navegar ms libremente. t) Usabilidad. Se utilizan criterios como: Comprensibilidad global del sitio (mapa del sitio, ndice global, tabla de contenidos). Mecanismos de ayuda y retroalimentacin en lnea (etiquetado textual y con iconos) colocados en una zona visible y "estndar". Aspectos de interfaces y estticos (cohesin y persistencia en los controles principales, preferencia esttica, uniformidad en el estilo). Diseos atractivos. Mltiples funcionalidades. Contenidos en constante renovacin, programados para una rpida descarga y para ser adecuadamente indexados por los buscadores. 46

Justificacin. Un diseo atractivo y con variadas funcionalidades sin caer en la exageracin, con opciones de ayuda visibles, harn al sitio ms usable y que el usuario quiera visitarlo nuevamente. u) Contenidos no textuales. Si la pgina incluye un grfico como un logo o un mapa navegable, existe un texto alternativo para quienes visualizan la pgina en modo slo texto? Justificacin. Disponer de textos alusivos que acompaen las distintas grficas del sitio, es un complemento importante para esclarecer an ms las funcionalidades del sitio sin dejar de lado a ningn tipo de usuario. v) Estructura y navegacin. Se utilizan criterios como: Mantiene un equilibrio entre Profundidad y Anchura? Los niveles de profundidad en informacin se presentan en forma metdica y ordenada? Justificacin. Si bien es recomendable usar nuevas ventanas de pginas para profundizar algn tema descrito, la cantidad de pginas a las que se pueden acceder desde el home del sitio debe ser tal que el usuario no se pierda y no termine siendo un laberinto indescriptible ms que una ayuda. w) Recursos de navegacin. Es breve y clarificador el ttulo para el navegador? Justificacin. Es recomendable que el ttulo que lleve el sitio en el navegador no sea muy extenso para as facilitar que se encuentre cuando los usuarios lo busquen usando las mnimas palabras claves que pudiera contener en los motores de bsqueda en la Web. x) Layout de la pgina. Se utilizan criterios como: Cmo est organizada la pgina? Se ha evitado la sobrecarga informativa? Es fcil encontrar la informacin que se busca? Hay anuncios que podran distraer la atencin del visitante?

Justificacin. Siempre es bueno informar y si es necesario acudir a la publicidad, pero que esto no implique saturacin del sitio y distraccin del usuario. y) Bsqueda Muestra los resultados de la bsqueda de forma comprensible para el usuario. Justificacin. Si el sitio brinda opciones de bsqueda, es para facilitarle al usuario que encuentre de una manera ms rpida el producto que necesita y as no tenga que navegar por todo el sitio buscndolo optimizando su tiempo.

47

z) Accesibilidad Control del peso de la pgina. Justificacin. Si una pgina pesa demasiado y por ende se demora mucho en cargar, por ejemplo por muchas grficas o imgenes, los potenciales usuarios dudarn en visitar nuevamente ese sitio. Debe corregirse en la etapa de pruebas antes de lanzar el sitio al mercado. aa)Control y retroalimentacin Se informa constantemente al usuario acerca de lo que est pasando en una transaccin, por ejemplo, en un proceso de compra, etc.? Justificacin. Al usuario le interesa ser informado sobre qu va sucediendo mientras l realiza una transaccin online, y para eso es bueno que el sitio le brinde mensajes alusivos hasta terminarla y as asegurarse que la operacin se realiz bien y por completo. bb)Tasa de clics Cul es el porcentaje de Clics que uno o varios usuarios de un sitio Web hacen sobre un espacio publicitario? Justificacin. Si un banner o un botn publicitario es escogido varias veces por un mismo usuario o varios usuarios distintos, es un porcentaje que determina la cantidad aproximada de visitas que vieron el anuncio, lo que es importante para el anunciante. cc) Tiempo o duracin de sesin Una sesin se mide tomando como tiempo inicial el momento en el que un visitante carga la primera pgina perteneciente a un sitio Web y como tiempo final el momento en el que el usuario carg la ltima pgina de ese sitio. Justificacin. Es necesario saber cunto tiempo estuvo navegando un usuario en el sitio y poder determinar si cumpli sus expectativas y pudo realizar lo que deseaba, por lo que se debe asignar un tiempo de sesin determinado para efectos estadsticos. dd)Peticiones de archivos Esta medicin no tiene trascendencia comercial o publicitaria en las mediciones, ya que contabiliza todos los archivos solicitados (imgenes, documentos html, frames, etc.) en una sola pgina Web, por lo que no tiene relacin con el nmero de pginas vistas y menos con el nmero de visitantes o usuarios nicos. Esta medicin ms bien tiene el objetivo de conocer el nmero de peticiones que se generan en un servidor Web.

48

Justificacin. Conocer la cantidad de peticiones de archivos se hace necesario para monitorear la capacidad del servidor Web y predecir sus necesidades de crecimiento. ee) Determinacin de la lealtad del usuario La determinacin de la lealtad del usuario promedio, se calcula tomando el umbral de desactivacin (ltima vez que un usuario visita su sitio Web), dividido por la duracin media de tiempo que un usuario sigue visitando un sitio. Desactivacin del umbral = Reciente Promedio usuario leal

Justificacin. Saber el umbral de desactivacin del usuario permite determinar el nivel de lealtad hacia el sitio Web. Para muchas empresas tradicionales, este nmero se mide en aos y para otros negocios, la cantidad se mide en semanas o meses. ff) Costo de conversin El costo por conversin es el nmero que usan las personas de marketing para determinar la mejor inversin de su presupuesto de promocin. Costo por conversin = Costos de publicidad y promocin Nmero de ventas

Justificacin. Conocer el costo de conversin, ayuda a los encargados de marketing a determinar si la inversin en promocin es lo bastante sostenible en el tiempo segn sea el bien que se vende. Esto es bueno si es venta de bienes races a los profesionales de altos ingresos pero no es sostenible si se estn vendiendo artculos de papelera a los estudiantes. gg)Pginas vistas Se refiere a cada una de las veces que una pgina es vista (descargada) por algn usuario de un sitio. Los sistemas de monitoreo de sitios Web y campaas publicitarias usan el concepto de pgina vista en el mismo sentido que el de impresin de pgina. Se utilizan criterios como: promedio del nmero de pginas vistas en un da, semana, mes, ao; promedio del nmero de pginas vistas por visita, comienzo de las pginas visitadas (duracin de tiempo considerado), principales pginas de salida, pginas de acceso nico, pginas no visitadas en X nmero de meses/aos, tiempo de descarga. Justificacin. Saber cuantitativamente las veces que un usuario visita un sitio Web, es un buen punto de referencia para el sitio, considerando aspectos como el tipo de contenido, del tipo de pblico y de muchas otras variables involucradas, sobre todo si se mantiene en el tiempo. hh) Sesin de usuario o visita 49

Cuenta una visita que un usuario hace a un sitio Web, sin importar el nmero de pginas que vea. Se utilizan criterios como: promedio del nmero de visitas por visitante, promedio del nmero de visitas por da, duracin media de tiempo por visita, visitas por hora del da, visitas por da, caminos a travs del sitio (incluyendo la capacidad para supervisar a partir de la variedad, puntos de destino), comienzo de la pgina de contenido grupos, visitantes por primera vez (caminos a travs de sitio, pginas visitadas, pgina de entrada, salida de la pgina). Justificacin. Para obtener estadsticas de las visitas que hace un usuario a un sitio, se utiliza el concepto de sesin de usuario sin importar cuantas pginas recorra. ii) Usuario nico o Visitante nico. Se consideran Usuarios nicos las personas distintas que han visitado un sitio en un determinado lapso. Por ejemplo, se pueden medir "Usuarios nicos en el Da", o "Usuarios nicos en el mes", ya que un usuario puede visitar un sitio diariamente, no son cifras proporcionales. La forma en la que se determina si una persona es distinta a la otra es guardando la direccin IP del computador desde el que se conecta, por lo que esta medicin en realidad es inexacta si se piensa en "personas". Por otro lado, un computador puede ser usado por varias personas, como es el caso de CyberCafs, Universidades, Oficinas e incluso hogares, por lo que normalmente el nmero de personas que visitan un sitio es superior al nmero de "Usuarios nicos". El nmero de Sesiones de Usuario siempre ser mayor al nmero de Usuarios nicos, ya que un Usuario nico genera al menos una Sesin de Usuario. Justificacin. Si el tipo de usuario es un nuevo usuario que ingresa al sitio o es el mismo que lo hizo pero desde otro computador o son varias las personas que ingresaron del mismo computador, arrojan informacin distinta respecto al tipo d visitante del sitio, lo que interfiere en evaluar objetivamente cuando un sitio ha sitio visitado. jj) Actualizacin. Se utilizan criterios como: Se indica en la pgina la fecha de creacin del material? En caso afirmativo, Cundo fue la ltima actualizacin? Si la pgina est en curso, la informacin publicada y los enlaces se actualizan regularmente? Cmo son los vnculos actuales? Algunos han expirado o se han movido? Cul es la fecha de las publicaciones y los vnculos actuales?

50

Justificacin. Es importante para el usuario visitante especificar en el sitio, las fechas de publicacin o de revisin de la informacin que se publicita, de tal forma de no distorsionar la informacin. Por ejemplo, puede indicar cundo el material fue escrito, puede indicar cundo el material fue colocado en la Web o puede indicar cundo el material se revis por ltima vez. kk) Objetividad. Se utilizan criterios como: Est la pgina libre de publicidad o hay alguna publicidad en la pgina? La pgina ofrece informacin precisa con publicidad limitada? La pgina est destinada a influir en la opinin? La informacin en el sitio es objetiva o sesgada? Justificacin. Con frecuencia los objetivos de los patrocinadores/autores no estn claramente establecidos. ll) Rendimiento tcnico. Se utilizan criterios como: El xito de visitas, error de visitas, total de artculos guardados en el servidor, promedio de tiempo para servir a los artculos, Kilobytes definidos en el servidor, trfico de visitas por hora, da de la semana y/o fin de semana. Justificacin. Determinar cmo es el trfico de visitas al sitio en un determinado instante de tiempo, permite disponer un adecuado espacio en el servidor de archivos.

51

CAPITULO 4 PROTOTIPO
4.1 Definicin formal
El estudio debe permitir que a partir del conjunto de mtricas obtenidas para un sitio Web, stas puedan probarse en una cantidad finita de sitios Web de PYMEs chilenas, de manera de obtener informacin cuantitativa de su efectividad en cada uno de ellos. Lo anterior, proporciona el hecho de poder comparar qu sitio es mejor que otro, indicando qu atributos los diferencian positivamente y cules no, lo que permite expresar una metodologa para evaluar sitios Web. Para definir formalmente la metodologa que se quiere proponer en esta tesis, se har una descripcin que es anloga a la construccin de tipos de datos a partir de primitivas. De un punto de vista algebraico, la definicin de esta metodologa se puede definir como una tupla M=<T, A> siendo T el tipo de sitio Web y A el conjunto de atributos mnimos que un sitio Web debiera cumplir. M = <T, A> T: tipo de sitio Comercial (transaccional) Difusin (sin retorno de dinero) Educacional A: conjunto de atributos mnimos Encabezamiento Identificador rubro Contacto En particular, se debe determinar que para un conjunto finito de sitios Web existe un M = < T, A>, en que T es un subconjunto de T y A un subconjunto de A. A partir de esta definicin, es posible deducir una frmula que suministra un mecanismo general de evaluacin de sitios Web, independiente del tipo de usuario, del tipo de sitio, del tipo de mtrica, ya que se podrn evaluar diferentes aplicaciones con criterios particulares, pudiendo agregar o eliminar mtricas. Esta frmula se esquematiza como sigue:
EvaluacinSitiosWeb=*Vindispensables+*Vsecundarios+*Vdispensables donde: , , son los factores de ponderacin Vindispensables,Vsecundarios,Vdispensables son los grupos de mtricas clasificadas por grado de importancia

52

4.2 Clasificacin de mtricas ms relevantes


En este punto, se realizar la clasificacin de aquellas mtricas del punto 3.5 que se consideran las ms relevantes, producto de una revisin visual de algunos sitios de PYMEs. Lo primero a tener en cuenta es que las mtricas definidas deben estar enmarcadas dentro del grupo de mtricas de software, ya que es la clasificacin que mejor define las medidas que se quieren evaluar en un sitio Web. Teniendo claro aquello, primero que nada se realiz una clasificacin general de los atributos que deban evaluarse, asignndoles un nombre representativo segn la relacin que presentaban entre s. Los atributos generales que se usarn son: contenido, navegacin, presentacin, comportamiento y rendimiento los que se grafican a continuacin en la Figura 6.
Contenido Navegacin Presentacin Comportamiento Rendimiento

Figura 6. Clasificacin general de atributos de la propuesta

La estructura y clasificacin general de las mtricas sugeridas es:

I. Contenido
En el grupo Contenido existen 10 mtricas las que se indican a continuacin y se grafican en la Figura 7. Objetividad de la informacin. Lenguaje y redaccin de la informacin. Ttulos/Textos publicados. Elementos multimedia. Imgenes. Actualizacin de la informacin. Cobertura del material publicado. Interaccin con el usuario. Exactitud de la informacin. Precisin de la informacin.

53

Contenido

Objetividad Imgenes

Leng/redacc. Cobertura

Tit/textos Interaccin

Multimedia Exactitud

Actualizacin Precisin

Figura 7. Mtricas del atributo Contenido

II. Presentacin
En el grupo Presentacin existen 4 mtricas las que se indican a continuacin y se grafican en la Figura 8. Autora de la informacin publicada. Identidad e informacin de la empresa. Objetivos del sitio Web. Misin de la empresa.
Presentacin

Autoridad

Identidad

Misin

Objetivos

Figura 8. Mtricas del atributo Presentacin

III. Comportamiento
En el grupo Comportamiento existen 4 mtricas las que se indican a continuacin y se grafican en la Figura 9. Confiabilidad - Enlaces por pgina Posicionamiento del sitio Web. Efectividad de las tareas a realizar. Eficiencia en la realizacin de tareas. Comportamiento

Confiabilidad

Posicionamiento

Efectividad

Eficiencia

Figura 9. Mtricas del atributo Comportamiento

54

IV. Navegacin
En el grupo Navegacin existen 10 mtricas las que se indican a continuacin y se grafican en la Figura 10. Funcionalidad del sitio Web. Usabilidad del sitio Web. Contenidos no textuales. Estructura y navegacin en el sitio Web. Recursos de navegacin del sitio Web. Layout del sitio Web. Bsqueda de producto/servicio ofertado. Accesibilidad del sitio Web. Control y retroalimentacin con el usuario. Satisfaccin del usuario. Navegacin

Funcionalidad Layout

Usabilidad Bsqueda

Cont. No text Accesibilidad

Estr./ naveg.

Rec. Naveg. Satisfaccin

Control y retro.

Figura 10. Mtricas del atributo Navegacin

V. Rendimiento
En el grupo Rendimiento existen 9 mtricas las que se indican a continuacin y se grafican en la Figura 11. Tasa de Clics del usuario. Tiempo o Duracin de Sesin del usuario. Peticiones de archivos. Lealtad del usuario. Costo de conversin. Pginas Vistas por el usuario. Sesin de Usuario o Visita a un sitio Web. Usuario nico o Visitante nico al sitio Web. Rendimiento tcnico / peticin de archivos.

55

Rendimiento

Tasa de clics

Tpo. sesin

Peticin arch.

Lealtad

Costo convers.

Peticin arch.

Pginas vistas

Sesin usuario

Usuario nico

Figura 11. Mtricas del atributo Rendimiento

56

4.3 Seleccin de mtricas para la propuesta


Para la eleccin final de las mtricas que formarn parte de la propuesta de evaluacin de sitios Web de empresa, se escogern algunas mtricas del listado consolidado explicado en la seccin anterior, y adems, se incluirn otras que se considera que son importantes de acuerdo a la revisin va Internet de algunos sitios Web de PYMEs chilenas. En algunos casos, se adecu el nombre de las mtricas a la terminologa web. La evaluacin de las mtricas consideradas puede ser medida objetivamente en los sitios Web a travs de la tcnica de la observacin, aplicndolas en forma genrica a cualquier tipo de PYME. La definicin sinttica de cada mtrica y las razones de su inclusin dentro de la evaluacin de sitios Web es la siguiente: CONTENIDO Color/fondo/letra. Caractersticas como los formatos de color en fondos y letras del sitio, son importantes de analizar dado que hay ciertos aspectos estticos que dan mayor o menor atraccin al cliente y puede influir en que siga visitando frecuentemente el sitio. Lenguaje/Redaccin de la informacin. El sitio Web debe escribirse en el mismo lenguaje que sus potenciales clientes, y debe tener opciones de leer la informacin en otros idiomas. La informacin escrita en el sitio no debe tener faltas de ortografa o errores gramaticales. Elementos multimedia. El sitio debe incluir elementos multimedia como grficos, sonido y/o animacin que contribuyan a explicar el tema y mejorar el mensaje. Imgenes. El sitio debe incluir imgenes alusivas que acten como complemento de la informacin publicada y que aporten mayor comprensin . Cobertura del material publicado. Se debe incluir una descripcin adecuada de cada uno de los productos y/o servicios que se ofrecen, de los temas que se tratan. El sitio debe ser capaz de transmitir que es lo diferente que oferta que no est publicado en otros lugares. Interaccin con el cliente. Si la organizacin requiere informacin de los usuarios, debe indicarse claramente de qu modo ser utilizada. Actualizacin de la informacin. La informacin publicada en el sitio debe estar permanentemente actualizada. PRESENTACION Identidad/Informacin de contacto de la empresa. Se deben proporcionar mecanismos para ponerse en contacto con la empresa. Visibilidad de contactos ya sea a travs de direcciones, e-mail y/o telfonos.

57

Objetivos del sitio Web. Debe quedar de manifiesto en forma explcita, cul es la finalidad del sitio: persuadir, informar o entretener.

COMPORTAMIENTO Eficiencia en la realizacin de tareas. El nmero de clics realizados y pginas visitadas para completar una tarea, el tiempo empleado en determinadas pginas o grupos de pginas debe ser aceptable. Satisfaccin del cliente. Es buena imagen mostrar recomendaciones con adjetivos positivos de clientes que despus de utilizar el sitio o algn producto/o servicio ofertado, lo recomendara a un amigo. NAVEGACION Funcionalidad del sitio Web. El sitio debe ser organizado y fcil de navegar, mostrando las maneras de navegar, con iconos alusivos, y que no tarde mucho tiempo en cargar. Debe tener comprensibilidad global del sitio (mapa del sitio, ndice global, tabla de contenidos), mecanismos de ayuda y retroalimentacin en lnea (etiquetado textual y con iconos) colocados en una zona visible y "estndar". Debe evitar la sobrecarga informativa, para que sea fcil encontrar la informacin que se busca, y si hay anuncios estos no deben distraer la atencin del cliente. Bsqueda de producto/servicio ofertado. El sitio debe tener opciones de bsqueda de productos/servicios ofrecidos. Muestra los resultados de la bsqueda de forma comprensible para el usuario. Control y retroalimentacin con el cliente. Se debe informar constantemente al cliente acerca de lo que est pasando en una transaccin, por ejemplo, en un proceso de compra, etc. Transaccin online. Si el sitio es de ventas, debe tener opciones de compra y/o reserva de productos o servicios por Internet. Links hacia otras pginas. Un link es una conexin de una pgina web con otra mediante una palabra que representa una direccin de Internet (url). Generalmente est subrayado y es azul. Tambin sirve para descarga de archivos, abrir ventanas, etc. El funcionamiento de links existentes hacia otras pginas dentro del mismo sitio Web debe estar siempre en perfecto estado. Enlaces. Un enlace es un texto o imagen en un sitio web que un usuario puede pinchar para tener acceso o conectar con otro documento; sirven para conectar varios sitios web. Los enlaces existentes deben apuntar a sitios fidedignos y actualizados y no deben existir enlaces rotos hacia otros sitios Web. Cotizacin online. Si el sitio presenta transacciones online, debe contar con opciones de cotizar el valor total de una posible compra de los productos o servicios ofrecidos, pudiendo reservar antes de concretar la transaccin final. Cliente frecuente. El sitio debe brindarle al cliente la opcin de formar parte de su red, de manera de mantenerse en contacto, generar fidelidad y por ejemplo recibir ofertas o promociones. 58

59

RENDIMIENTO Sesin de Usuario o Visita. El sitio dispone de un contador de accesos que cuente las visitas que un usuario hace al sitio Web, sin importar el nmero de pginas que vea, sea por primera vez o no. Tiempo de carga. El tiempo de las personas hoy en da es muy valioso, por lo que las pginas del sitio deben cargarse en un tiempo prudente cada vez que el cliente accede a ellas. Compatibilidad del sitio Web. El sitio Web debe funcionar en ms de un explorador de Internet y en ms de un sistema operativo, para que sea usado por cualquier cliente sin discriminacin. A continuacin en la Figura 12 se muestra un esquema que indica grficamente el listado de mtricas propuestas y las categoras en las que fueron consideradas.

Contenido

Presentacin

Comportamiento

Navegacin

Rendimiento

Color/letra/ fondo Leng./Redac.

Ident./Infor. Objetivos

Eficiencia Control
Transaccin online

Funcionalidad Bsqueda

Visita Tiempo carga


Compatibilidad

Multimedia

Links Enlaces Cliente frecuente Satisfaccin

Imgenes
Cobertura Interaccin Autoridad

Cotizacin online

Figura 12. Esquema de mtricas propuesto

60

CAPITULO 5 PRUEBAS
5.1 Herramienta de evaluacin
Para realizar la evaluacin de los sitios definidos segn las mtricas propuestas, se utilizarn las rbricas como herramienta de evaluacin. Segn lo indicado en [29], una rbrica es una herramienta que se emplea para medir el nivel y la calidad de una tarea o actividad. En la rbrica se hace una descripcin de los criterios con los que se evaluar el trabajo, as como el puntaje otorgado a cada uno de ellos. Se disean para realizar una evaluacin objetiva y consistente de actividades como trabajos, presentaciones o informes escritos, etc., facilitando la asignacin de una calificacin en reas que son complejas, imprecisas y subjetivas, a travs de un conjunto de criterios graduados. Los elementos bsicos de una rbrica [29] se indican a continuacin y se grafican en la Figura 13: Criterios de evaluacin (Contenido, originalidad, requisitos, organizacin de la informacin, recursos visuales empleados). Niveles de cumplimiento (Excelente, bueno, adecuado, necesita mejorar). Valores o puntuacin segn escala (por ejemplo 1 punto, acreditado, no acreditado).

Figura 13. Esquema de confeccin de una rbrica

Dentro de las ventajas definidas para usar las rbricas y por lo cual se opt elegirlas para esta parte de la tesis, se encuentran las siguientes: 1. Son especficas al establecer criterios y niveles de evaluacin.

61

2. Son claras porque se definen los criterios de los comportamientos esperados para el sitio al observar la mtrica. 3. Son integradoras porque se pueden incluir durante su construccin o como parte de la misma, evaluaciones de diferentes examinadores de sitios con perfiles distintos. Para disear una rbrica se deben seguir los siguientes pasos [29]: 1. Revisar detalladamente el contenido o unidad que se va a estudiar. 2. Establecer con claridad dentro de esa rea o unidad un (unos) objetivo(s), desempeo(s), comportamiento(s), competencia(s) o actividad(es) en los que se va a enfocar y determinar cules se van a evaluar. 3. Describir claramente los criterios especficos que se van a utilizar para llevar a cabo la evaluacin de esas reas y asignar un valor numrico de acuerdo al nivel de cumplimiento esperado de los sitios. 4. Elaborar luego las escalas que se utilizarn y establecer los niveles de cumplimiento. 5. Escribir las descripciones de la rbrica (dejando bien en claro lo que se considera un trabajo bien realizado). Por lo general, la escala de calidad para calificar los diversos aspectos a evaluar, se ubica en la fila horizontal superior, con una graduacin que vaya de mejor a peor (Excelente, buena, etc.) o una escala progresiva en nmeros o letras (5, 4, 3, 2, 1; E, D, C, B, A). En la primera columna vertical se ubican los aspectos o elementos que se han seleccionado para evaluar. En las celdas centrales se describe de la forma ms clara y concisa posible los criterios que se van a utilizar para evaluar esos aspectos. Estas celdas centrales explican cules son las caractersticas de un trabajo excelente, de uno malo y las variaciones intermedias entre el uno y el otro. Las categoras de evaluacin pueden dividirse hasta en 5 niveles, siempre de ms a menos.

A continuacin en la Tabla 1, se muestra un ejemplo de rbricas de [25] con 4 niveles de cumplimiento para un proyecto de multimedia (Excelente-MuyBuenoCumpliBien-Cumpli), que permiten clarificar que significa y cmo es posible aplicar cada nivel de evaluacin.

62

CATEGORIA Contenido

4: Excelente El sitio en la red tiene un propsito y un tema claros y bien planteados y son consistentes en todo el sitio. Los compaeros demuestran respeto por las ideas de cada uno, dividen el trabajo de forma justa, muestran un compromiso por la calidad del trabajo y se apoyan unos a otros. El estudiante posee un entendimiento excepcional del material incluido en el sitio y sabe dnde encontrar informacin adicional. Puede fcilmente contestar las preguntas sobre el contenido y los procedimientos usados para crear el sitio en la red. Toda la informacin provista por el estudiante en el sitio web es precisa y todos los requisitos de la asignacin han sido cumplidos. No hay errores de ortografa, puntuacin o gramtica en el borrador final del sitio web.

3: Muy bueno El sitio en la red tiene un propsito y un tema claros, pero tiene uno dos elementos que no parecen estar relacionados. Los compaeros muestran respeto por las ideas de cada uno y dividen el trabajo de forma justa. Hay compromiso por parte de algunos de los miembros hacia un trabajo de calidad y se apoyan unos a otros. El estudiante tiene un buen entendimiento del material incluido en el sitio. Puede fcilmente contestar preguntas sobre el contenido y los procedimientos usados para crear el sitio.

2: Cumpli bien El propsito y el tema del sitio en la red son de alguna forma confusos o imprecisos.

1: Cumpli El sitio en la red carece de propsito y de tema.

Trabajo Cooperativo

Los compaeros muestran respeto por las ideas de cada uno y dividen el trabajo de forma justa. Hay poca evidencia de compromiso hacia la calidad del trabajo en grupo.

Los compaeros discuten o no respetan las ideas de cada uno y su aportacin. La crtica no es constructiva y no se ofrece apoyo. El trabajo es hecho por una dos personas. El estudiante no parece haber aprendido mucho de este proyecto. No puede contestar la mayora de las preguntas sobre el contenido y los procedimientos usados para crear el sitio.

Conocimientos del Material

El estudiante tiene un entendimiento bsico del material incluido en el sitio. No puede fcilmente contestar la mayora de las preguntas sobre el contenido y los procedimientos usados para crear el sitio.

Precisin del Contenido

Casi toda la informacin provista por el estudiante en el sitio web es precisa y todos los requisitos de la asignacin han sido cumplidos. Hay 1-3 errores de ortografa, puntuacin o gramtica en el borrador final del sitio web.

Casi toda la informacin provista por el estudiante en el sitio web es precisa y casi todos los requisitos han sido cumplidos. Hay 4-5 errores de ortografa, puntuacin o gramtica en el borrador final del sitio web.

Hay varias inexactitudes en el contenido provisto por el estudiante o muchos de los requisitos no estn cumplidos. Hay ms de 5 errores de ortografa, puntuacin o gramtica en el borrador final del sitio web.

Ortografa y Gramtica

Tabla 1. Ejemplo Matriz de valoracin para un proyecto multimedia

63

5.2 Escalas y criterios de evaluacin


Para realizar la evaluacin de los sitios Web, se determin ocupar dos estrategias tendientes a objetivizar el proceso. La primera estrategia de evaluacin es segn las mtricas propuestas y la segunda segn el grado de importancia de cada mtrica respecto al total de la evaluacin del sitio. 5.2.1 Criterios de evaluacin segn las mtricas propuestas Aspectos a evaluar Las mtricas a evaluar tal como se indic en el punto 4.3 se listan a continuacin: CONTENIDO Color/letra/fondo Lenguaje/Redaccin Elementos multimedia Imgenes Cobertura Interaccin Actualizacin PRESENTACION Identidad/Informacin de contacto Objetivos COMPORTAMIENTO Eficiencia Cotizacin online Control y retroalimentacin Transaccin online NAVEGACION Funcionalidad Bsqueda Links Enlaces Cliente frecuente Satisfaccin RENDIMIENTO Sesin de Usuario o Visita Tiempo de carga Compatibilidad

64

65

Niveles de cumplimiento Dada la informacin obtenida acerca de la implementacin de rbricas, se estim que para la evaluacin de las mtricas en los sitios Web, eran suficientes slo 3 niveles de cumplimiento, por estimar que se evalan en forma completa cada uno de los aspectos requeridos. Los niveles son Excelente, Regular y Malo, y los puntos que cada uno de ellos considerar son 4, 2 y 0 respectivamente: Excelente (4 puntos): significa que el sitio ha alcanzado un nivel excepcional de cumplimiento, excediendo todo lo esperado. Regular (2 puntos): significa que el sitio ha alcanzado un nivel de cumplimiento regular. Los errores no constituyen amenaza. Malo (0 puntos): significa que el sitio no obedece al nivel de cumplimiento esperado. No satisface los requerimientos de cumplimiento.

Estos valores son asignados en forma arbitraria, slo muestran las puntuaciones que pueden tener las mtricas evaluadas segn su nivel de cumplimiento. 5.2.2 Criterios de evaluacin segn el grado de importancia Adems de la evaluacin anterior, es conveniente realizar una clasificacin porcentual que agrupe a cada mtrica respecto al peso que representa frente al total de la evaluacin del sitio Web, para que as la evaluacin final de cada sitio sea ms objetiva. Dada la informacin recopilada en la investigacin inicial, es posible determinar que una agrupacin suficiente sera considerar 3 grupos en los que se pueden clasificar las mismas 22 mtricas definidas anteriormente. Los grupos son: Mtricas imprescindibles, mtricas secundarias y mtricas dispensables. Los nombres asignados son totalmente arbitrarios pero nemotcnicos. Para especificar la diferencia gradual de cada grupo, se le asign un porcentaje arbitrario a cada uno de ellos considerando el peso que representan frente al total de la evaluacin del sitio Web y la cantidad de mtricas asociadas a cada grupo. Es as como al primer grupo se le asign un 65%, al segundo grupo un 25% y al tercer y ltimo grupo un 10%. A continuacin, se detalla la clasificacin y especificacin de cada una de los grupos en que fueron asociadas las mtricas. Mtricas imprescindibles: aquellas mtricas que deben estar necesariamente presentes en la evaluacin de un sitio Web, es decir, son fundamentales pues forman parte de su esencia. Este grupo tendr un 65% de importancia respecto al total de la evaluacin del sitio.

66

Funcionalidad Transaccin online Links Cliente frecuente Cotizacin online Compatibilidad Interaccin Actualizacin Cobertura Tiempo de carga Identificacin/Informacin

Mtricas secundarias: aquellas mtricas que si bien son importantes que estn presentes no son esenciales. Este grupo tendr un 25% de importancia respecto al total de la evaluacin del sitio. Lenguaje/redaccin Visita de usuario Objetivos Control y retroalimentacin Enlaces Bsqueda Satisfaccin Eficiencia Mtricas dispensables: aquellas mtricas que sino se encuentran presentes en el sitio, no afectan a la evaluacin del mismo, incluso se puede prescindir de ellas pues slo son complementarias. Este grupo tendr un 10% de importancia respecto al total de la evaluacin del sitio. Color/letra/fondo Multimedia Imgenes

67

5.3 Seleccin de sitios Web a evaluar


Despus de indicar cules sern las mtricas a considerar para su evaluacin a diferentes sitios Web, se deber seleccionar el tipo de sitio dentro del contexto de sitio de empresa, al que se orientar este proceso de evaluacin. El dominio de los sitios Web seleccionados es el de sitio de empresa y en particular el de PYMEs chilenas, ya que es un sector que presenta un crecimiento ascendente en la inclusin de Internet como herramienta de apoyo en la implementacin de soluciones. De hecho, el estudio regional Internet y las nuevas tecnologas como herramientas para las PYMES exportadoras, realizado en noviembre del 2008 por la consultora internacional RGX en asociacin con DHL Express y SAP, indica que el 86% de las pequeas y medianas empresas exportadoras chilenas tiene sitio Web corporativo y un 46% de las empresas exportadoras promociona su negocio en el medio virtual, en comparacin con sus similares de Latinoamrica [22]. Para entender el contexto, es necesario realizar un consenso en lo que se entiende por PYME. La pequea y mediana empresa (conocida tambin por su acrnimo PyME, PYME o pyme), es una empresa con caractersticas distintivas, tienen dimensiones con ciertos lmites ocupacionales y financieros prefijados por los Estados o Regiones. Son agentes con lgicas, culturas, intereses y espritu emprendedor especfico. En otras palabras, tienen un nmero reducido de trabajadores y registran ingresos moderados. Otro trmino semejante es el de MIPyME (acrnimo de Micro, pequea y mediana empresa), que es una expansin del trmino original en donde se incluye a la microempresa. La definicin de PYME vara segn el pas. En Chile, el Ministerio de Economa en el website del Servicio de Impuestos Internos, define a las PYMES segn las ventas anuales en Unidades de Fomento, tal como lo muestra la Tabla 2:

Tipo de empresa Microempresa Pequea Empresa Mediana Empresa

Ventas anuales en U.F. hasta 2.400 2.400-25.000 25.000-100.000

Tabla 2. Clasificacin de PYME segn ventas anuales

Otra clasificacin en Chile, no tan frecuente como la anterior, es por la cantidad de empleados, y esta se muestra en la Tabla 3:

68

Tipo de empresa Microempresa Pequea Empresa Mediana Empresa

Empleados hasta 9 10-49 50-199

Tabla 3. Clasificacin de PYME segn nmero de empleados

Por lo anterior, se opt por la bsqueda de sitios Web de empresas usando Internet. Segn lo publicado por [23], se decidi hacer uso del motor de bsqueda Google por ser el buscador con mayor trfico en Chile actualmente, ya que abarca el 80% de los contactos de usuarios de la red. La bsqueda de la informacin en Internet, se hizo utilizando ecuaciones de bsqueda, que son un medio a travs del cual se interacta con el sistema de entrada de los buscadores a travs de sintaxis apropiada usando palabras claves y operadores matemticos. En primer lugar, se busc informacin a partir de la ecuacin de bsqueda: ranking sitios Web+chilenos. En esta bsqueda se encontr el sitio www.alexa.com de la The Web Information Company, que muestra un ranking de los sitios Web ms visitados, filtrando la bsqueda por criterios respecto a pas y categora. Sin embargo, los sitios indicados no necesariamente son de origen chileno, y lo que es peor an no necesariamente son PYMEs, por lo que no se pueden usar para las pruebas ya que no son adecuados para este estudio. En un segundo intento, se utiliz la frase de bsqueda Sitios Web+Pymes+chilenas y se obtuvo como resultado seis portales Web listados a continuacin: www.chileyellow.com / chileyellow.cl www.pymeschile.cl / www.pymesdechile.cl www.mundopyme.cl www.pyme.cl: comunidad empresarial que brinda noticias, tecnologa, subsidios y financiamiento para emprender a sus socios. www.chilepyme.cl: ofrece soluciones financieras para empresarios. www.redpyme.cl: canal de videos y noticias de la pyme chilena. Del listado anterior, se trabaj slo con los tres primeros portales. Las justificaciones de esta decisin, se centran principalmente en que los tres ltimos portales estn abocados a brindar informacin y soluciones financieras a las empresas y no es posible acceder a un listado de sitios Web de sus socios.

69

5.3.1 Eleccin de Sitios Web segn Criterios 1 y 2 En www.pymeschile.cl se encuentra el portal y directorio en Internet de la pequea y mediana empresa chilena, y en l es posible encontrar la descripcin de todas aquellas empresas que se han inscrito para formar parte de esta comunidad, pero que no necesariamente tienen pginas Web. Por lo anterior, se busc detenidamente dentro de las 60 categoras presentadas, aquellos sitios que pudiesen servir para esta evaluacin. Primero se eligieron 4 sitios de la misma categora en este caso Alimentos y luego se escogieron 6 sitios al azar. Caractersticas Criterio 1: Sitios rescatados desde el sitio www.pymeschile.cl Empresas del mismo rubro: categora Alimentos, Delicatessen.

subcategora

Los sitios escogidos fueron los siguientes (ver descripcin en Anexo 1): http://www.pasteleriaelparron.cl http://www.sabordemar.cl http://www.huertosdellago.com http://www.musto.cl

Caractersticas Criterio 2: Sitios rescatados desde el sitio www.pymeschile.cl Empresas de distinto rubro. Los sitios escogidos fueron los siguientes (ver descripcin en Anexo 1): http://www.airfresh.cl http://www.ingemetal.cl http://www.qualityingenieros.cl http://www.cuadrosmodernos.cl http://www.ecocolor.cl http://www.obsequios.cl

5.3.2 Eleccin de Sitios Web segn Criterios 3 y 4 En www.chileyellow.com se presentan sitios de PYMEs por categoras y ordenados alfabticamente. Para evaluar se escogieron sitios de un mismo rubro, en este caso el Turismo, encontrndose un total de 10 sitios y escogindose al 70

azar 7, todos con sitios Web disponibles. Posteriormente, se escogieron sitios por orden alfabtico de cualquier rubro, y se escogieron al azar 6 sitios. Caractersticas Criterio 3: Pginas escogidas desde el sitio www.chileyellow.com PYMEs chilenas de un mismo rubro: Turismo Los sitios escogidos fueron los siguientes (ver descripcin en Anexo 1): http://www.alondra.cl http://www.altosuite.cl/ http://www.ayelenaparthotel.cl/ http://www.mayurutour.com http://www.hipoterapia-mundoecuestre.es.tl/ http://www.termaschillan.cl/

Caractersticas Criterio 4: Pginas escogidas desde el sitio www.chileyellow.com PYMEs chilenas de distinto rubro Los sitios escogidos fueron los siguientes (ver descripcin en Anexo 1): http://www.caleli.cl/ http://www.ciape.org/ http://www.cirples.cl/ http://www.eventosvaldivia.es.tl/ http://www.minena.cl/ http://www.alturasdecoracion.cl

5.3.3 Eleccin de Sitios Web segn Criterio 5 En www.mundopyme.cl se presenta un directorio de empresas afiliadas ordenadas por categora. Se escogi evaluar sitios de empresas del mismo rubro, en este caso se escogieron al azar 5 empresas pesqueras. Caractersticas Criterio 5: Pginas escogidas desde el sitio www.mundopyme.cl

71

Empresas de un mismo rubro: pesqueras

Los sitios escogidos fueron los siguientes (ver descripcin en Anexo 1): http://www.delifish.cl/ http://www.geomar.cl http://www.landes.cl/ http://www.prona.cl/ http://www.pesqueraomega.cl

A continuacin, se muestra la Tabla 4 que resume todos los sitios Web que entrarn al proceso de evaluacin, agrupadas por los diferentes criterios de bsqueda. Portal Web Criterio 1 www.pymeschile.cl Rubro Sitios Web de empresa Nsitio 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21

Alimentos http://www.pasteleriaelparron.cl http://www.sabordemar.cl http://www.huertosdellago.com http://www.musto.cl Variado http://www.airfresh.cl http://www.ingemetal.cl http://www.qualityingenieros.cl http://www.cuadrosmodernos.cl http://www.ecocolor.cl http://www.obsequios.cl http://www.alondra.cl http://www.altosuite.cl/ http://www.ayelenaparthotel.cl/ http://www.mayurutour.com http://www.hipoterapiamundoecuestre.es.tl/ http://www.termaschillan.cl/ http://www.caleli.cl/ http://www.ciape.org/ http://www.cirples.cl/ http://www.eventosvaldivia.es.tl/ http://www.minena.cl/

Criterio 2 www.pymeschile.cl

Criterio 3 www.chileyellow.com Turismo

Criterio 4 www.chileyellow.com Variado

72

http://www.alturasdecoracion.cl Criterio 5 www.mundopyme.cl Pesca http://www.delifish.cl/ http://www.geomar.cl http://www.landes.cl/ http://www.prona.cl/ http://www.pesqueraomega.cl

22 23 24 25 26 27

Tabla 4. Resumen de los sitios Web de empresas a evaluar

73

5.4 Construccin de la matriz de valoracin


Luego de tener definidos los sitios Web que se van a evaluar, se debe comenzar a disear la matriz de valoracin para cada uno de ellos. Para el diseo de la matriz de valoracin e identificacin de cada uno de los aspectos a evaluar en cada sitio Web escogido, se utiliz la herramienta gratuita de Internet conocida como RubiStar descrita en [25]. Rubistar ofrece: Matrices tpicas en distintas materias: proyectos, multimedia, matemticas, escritura, productos, lectura, arte, destrezas de trabajo, ciencias, msica, investigacin y escritura. Posibilidad de modificar las matrices tpicas que se pueden usar como plantillas y se pueden adaptar a necesidades particulares. Ayuda aportando ideas sobre los aspectos o categoras a evaluar. Su caracterstica principal es que permite crear y publicar las rbricas online. El producto es un documento auto-actualizable, lo cual significa que se puede acceder y modificar, y al momento de guardarlo, queda publicado y accesible desde cualquier enlace por un cierto tiempo. Todas estas ventajas se tomaron en cuenta, de tal manera que se rescataron algunas ideas de las plantillas de las matrices ya creadas en Rubistar que tenan alguna relacin con sitios Web, se modificaron y se agregaron los aspectos a evaluar que ya haban sido estudiados con anterioridad y que estn especificados en el punto 5.2.2 de este captulo.
Mtricas seleccionadas Matrices desarrolladas en Rubistar Rbricas tomadas desde Rubistar Matriz de valoracin para sitios Web de empresa

Figura 14. Esquema de construccin de la Matriz de valoracin para sitios Web de empresa

74

De esta forma, se logr construir una matriz de valoracin propia, con las mtricas adecuadas y completas, para la evaluacin de sitios Web de empresa. La matriz de valoracin es una tabla que permite vaciar los resultados de la evaluacin de cada mtrica y disponer el puntaje total del sitio. La matriz qued conformada finalmente por 30 filas donde van descritas las mtricas y 5 columnas. La primera columna Aspectos es para indicar el nombre de la mtrica, las 3 siguientes columnas detallan el significado de la mtrica segn los distintos niveles de cumplimiento y la ltima columna de Ptje. es para indicar el valor numrico que refleja el nivel de cumplimiento de la mtrica en el sitio (0, 2, 4). Para la implementacin en s de la matriz de valoracin, primero que nada se debe realizar una breve descripcin con detalles del sitio Web como la URL y ttulo del sitio Web y perfil y nombre del evaluador si es necesario, para posteriormente disponer de la matriz de valoracin como tal. La Tabla 5 muestra una grfica de cmo es el formato de la matriz de valoracin.
URL del sitio Web: http://www.nombredelsitio.cl Ttulo del sitio Web: nombre que aparece en la barra de ttulo de la ventana del explorador Perfil del evaluador: profesin del usuario

Nivel de cumplimiento Aspectos


Nombre de la mtrica (numeracin iin)

Excelente(4)
Descripcin de la mtrica en el sentido de que cumple de forma excelente su identificacin.

Regular(2)
Descripcin de la mtrica en el sentido de que cumple su identificacin al 50%.

Malo(0)
Descripcin de la mtrica en el sentido de que no cumple.

Ptje.
Valor

Nombre del grupo de clasificacin por tipo de mtrica

Suma del puntaje total


Tabla 5. Plantilla para Matriz de valoracin

Valor total

Un ejemplo real del uso de la matriz de valoracin para uno de los sitios web evaluados, en este caso, pasteleriaelparron.cl se muestra a continuacin. El resto de las matrices de valoracin para cada sitio evaluado se encuentra disponible en el Anexo2.

75

Usuario 1 URL del sitio Web: http://www.pasteleriaelparron.cl Ttulo del sitio Web: pasteleriaelparron.cl Perfil del evaluador: Ingeniero de ejecucin en informtica Nivel de cumplimiento Aspectos Lenguaje/ Redaccin (1.1)
Excelente(4)
El sitio Web habla el mismo lenguaje que sus usuarios, tiene opciones de leer en otros idiomas o No hay faltas de ortografa ni errores gramaticales en la informacin escrita. Los colores de fondo, el tipo de letra (son consistentes, fciles de leer y de tamaos variados apropiados para los ttulos y el texto) y los enlaces visitados y no visitados forman una mezcla de colores agradables y no restan valor al contenido y son consistentes en todas las pginas. Las grficas, sonido y/o animacin estn relacionadas al tema/propsito del sitio, su tamao est cuidadosamente seleccionado, son de alta calidad y aumentan el inters o el entendimiento del usuario. Todas las pginas del sitio presentan imgenes alusivas y aportan al entendimiento del sitio. Se incluye una descripcin adecuada y precios de cada uno de los productos y servicios que se ofrecen.

Regular(2)

Malo(0)
Hay ms de 5 errores de ortografa, puntuacin o gramtica en el sitio Web o no se permite escoger el idioma al lenguaje de sus usuarios.

Ptje.
0

Contenido
Hay 1-3 errores de ortografa, puntuacin o gramtica en el sitio Web o tiene opciones de leer en otros idiomas pero no funciona. Los colores de fondo, el tipo de letra (son consistentes y de tamaos variados apropiados para los ttulos y el texto) o los enlaces visitados y no visitados distraen del contenido o no son consistentes en todas las pginas.

Colores, letras, fondo (1.2)

Los colores de fondo, el tipo y tamao variado de letras y los enlaces visitados y no visitados hacen el contenido difcil de leer o distraen al usuario.

Elementos multimedia (1.3)

Presenta elementos multimedios, no todos son de buena calidad y no ayudan a mejorar el entendimiento de la pgina

No presenta elementos multimedios que apoyan el contenido de la pgina

Imgenes (1.4)

Cobertura (1.5)

Algunas pginas del sitio presentan imgenes alusivas que aportan, o presentan imgenes alusivas pero distraen del objetivo del sitio. Se incluye una descripcin adecuada pero no los precios de cada uno de los productos y servicios que se ofrecen.

No se presentan imgenes alusivas.

No se incluye una descripcin ni los precios de cada uno de los productos y servicios que se ofrecen.

76

Interaccin (1.6)

Actualizacin (1.7)

El sitio le ofrece al usuario la opcin de hacerle consultas a travs de algn medio de contacto e indica de qu forma ser usada. Toda la informacin publicada y los enlaces muestran la fecha de publicacin/fecha de la ltima actualizacin. Se percibe claramente que el sitio es propiedad de una empresa y existe alguna va de contacto (email, telfono, direccin). Est mencionado el propsito del sitio Web en la misma pgina (informar, persuadir, vender, entretener, etc.) El tiempo empleado en concretar una transaccin es suficiente. Se informa constantemente al usuario acerca de lo que est pasando cuando realiza una transaccin, por ejemplo, en un proceso de compra. Presenta la opcin de realizar transacciones online (puede ser con carro de compra) y a travs de emails y/o telfono. Presenta la opcin de cotizar el servicio o producto ofrecido antes de comprarlo, y reservarlo. El sitio tiene un atractivo excepcional y una presentacin til. Es fcil localizar todos los elementos importantes. El espacio en blanco,

Si la organizacin requiere informacin de los usuarios, no indica de que forma ser usada. Casi toda la informacin publicada en el sitio muestra la fecha de publicacin/fecha de la ltima actualizacin.

El sitio no ofrece la posibilidad de que el usuario realice consultas usando algn medio de contacto.

Ninguna pgina del sitio muestra informacin con fecha de publicacin/fecha de la ltima actualizacin.

Presentacin Identidad e Informacin de contacto (2.1)


Hay una persona u organizacin responsable de la pgina Web. No existen formas de contacto. El propsito y el tema del sitio son de alguna forma confusos o imprecisos. No existe una persona u organizacin responsable de la pgina Web. No existe una forma de contacto. El sitio carece de propsito y de tema, no se especifica a que se dedica la empresa.

Objetivos (2.2)

Comportamiento Eficiencia (3.1) Control y retroalimentaci n (3.2)


El tiempo empleado en concretar una transaccin es aceptable. Solo se informa al usuario en ciertas transacciones. El tiempo empleado en concretar una transaccin es exagerado o No se hacen transacciones. No se informa al usuario acerca de lo que est pasando cuando realiza una transaccin o No se hacen transacciones.

---

Transaccin online (3.3)

Cotizacin online (3.4)

Presenta la opcin de realizar transacciones online (puede ser con carro de compra) o transacciones a travs de emails y/o telfono Presenta la opcin de cotizar el servicio o producto ofrecido pero no reservarlo.

No presenta la opcin de realizar transacciones.

No presenta la opcin de cotizar productos

Navegacin Funcionalidad (4.1)


Las pginas tienen una presentacin til, pero pueden parecer estar llenas de informacin o ser aburridas. La mayora de los elementos son Las pginas se ven llenas de informacin o son confusas, demasiada publicidad. Es a menudo difcil localizar elementos importantes.

77

Bsqueda (4.2)

Satisfaccin (3.2) Links (4.4)

Enlaces (4.5)

Cliente frecuente (4.6)

los elementos grficos, la publicidad son usados con efectividad para organizar el material, evitndose la sobrecarga informativa que distrae al usuario Presenta una seccin de bsqueda y muestra los resultados de la bsqueda de forma comprensible para el usuario. Muestra opiniones positivas de clientes recomendando la visita del sitio o los productos ofrecidos Los enlaces para la navegacin estn claramente etiquetados, colocados consistentemente, permiten al usuario moverse fcilmente de una pgina a otras relacionadas (hacia delante y atrs), y llevan al usuario donde espera ir, no se pierde. Todos los enlaces que apuntan a otros sitios Web son fidedignos y actualizados. Presenta la opcin de formar parte de la organizacin como cliente frecuente y recibir ofertas y descuentos especiales. El sitio muestra un contador de visitas sin importar el nmero de pginas que vea. Las pginas cargan muy rpido (10 segundos o menos) debido a las grficas pequeas, la buena compresin de sonidos y grficas y la apropiada divisin del contenido.

fciles de localizar.

Presenta una seccin de bsqueda y los resultados de la bsqueda no son comprensibles para el usuario. Muestra opiniones de clientes y la mayora no recomienda la visita al sitio. Los enlaces de navegacin llevan al usuario donde espera ir, pero algunos enlaces necesarios parecen no estar presentes. El usuario algunas veces se pierde.

No presenta una seccin de bsqueda dentro del sitio.

No presenta la forma de recomendar el sitio a otro cliente. Algunos enlaces no llevan al usuario a los sitios descritos. El usuario se siente perdido.

Algunos de los enlaces que apuntan a otros sitios Web son fidedignos y actualizados. Presenta la opcin de formar parte de la organizacin solo para recibir informacin de la organizacin.

No se muestran enlaces a otros sitios Web o existen pero con errores de enlaces, nodos Web muertos. No presenta la opcin de formar parte de la organizacin como cliente frecuente.

Rendimiento Visita (5.1)


Muestra un contador de visitas pero no se actualiza. Una pgina toma ms de 15 segundos en cargar, pero otras cargan un poco ms rpido. No muestra un contador de visitas.

Tiempo de carga (5.2)

Las pginas toman ms de 15 segundos en ser transferidas debido a las grficas grandes, las animaciones, los sonidos, etc.

78

Compatibilidad (5.3)

Este sitio Web ha sido probado y funciona en plataformas "Macs" y "PCs" y en versiones relativamente actualizadas de "Navigator" y "Explorer".

Este sitio Web ha sido probado y funciona en plataformas "Macs" y "PCs", pero es slo mostrada correctamente por un navegador.

Este sitio Web no ha sido probado o es mostrada correctamente slo en un navegador.

Suma del puntaje

42

79

5.5 Implementacin de la matriz de valoracin


Para evaluar las mtricas escogidas y de esta forma obtener los resultados comparativos entre los sitios Web de las PYMEs chilenas escogidos, se debe aplicar la matriz de valoracin creada anteriormente, en la que se establecieron diferentes criterios para realizar una comparacin y evaluacin final ms objetiva, tal como se describir en los puntos siguientes. La matriz de valoracin confeccionada queda como plantilla para la evaluacin de las mtricas, puesto que debe crearse una individual para cada sitio Web escogido. En este punto es conveniente indicar que el proceso de evaluacin, contempla lo que se conoce como test de usuario. Es una tcnica importante que debe ser usada como mtodo de evaluacin en el anlisis de un sitio Web. Tiene como objetivo analizar distintos sitios Web en este caso, a travs de la experiencia e interaccin entre los usuarios y un producto en un contexto particular. Independiente de cmo se haya llevado a cabo la construccin de un sitio, la experiencia de los evaluadores de sitios muestra que existen problemas que slo aparecen cuando el sitio es testeado con usuarios reales. Los test de usuario proveen resultados a corto y largo plazo. El resultado inmediato es un listado de recomendaciones generales y especficas para mejorar el sitio. Adems de descubrir problemas y potenciales mejoras para un sitio web, es la manera ms cercana de aproximarse al uso real de ste. Lo anterior implica que la evaluacin debe ser realizada por tres a cinco potenciales usuarios, sobre todo si son del mismo perfil profesional (con el tercer usuario ya se pueden observar tendencias e ir concluyendo respecto de los errores, falencias y oportunidades que tiene un sitio testeado). Dependiendo del tipo de evaluacin, se analiza la conveniencia de aumentar la cantidad de usuarios [20]. Para este proceso se escogi a un Ingeniero de ejecucin informtico, un Ingeniero Civil en computacin y un Ingeniero Comercial. Cada evaluador debe observar el sitio Web, revisar la existencia de las mtricas y completar la matriz a lpiz y papel. La puntuacin que se usar toma tres estados (0, 2, 4). Una vez que cada usuario haya realizado la evaluacin a cada sitio Web, es conveniente confeccionar una tabla resumen que muestre la puntuacin obtenida por cada sitio Web de acuerdo a su agrupacin respectiva y segn el perfil de cada evaluador. Esto implica que debe existir una misma tabla con los sitios evaluados pero distinta para cada tipo de usuario. Esta tabla contiene tantas columnas como sitios Web existan ms una columna que enumera todas las mtricas existentes (1.1, 1.2, , 5.3).

80

Entonces habra que repetir la misma tabla con esos sitios Web, pero para cada uno de los usuarios con su perfil respectivo, resultando un formato como el que se muestra a continuacin en la Tabla 6. Nmero del Perfil. Profesin del usuario
Mtrica i ... Mtrica in Ptje. total Sitio Web i Ptje. Ptje. Ptje. Sitio Web in Ptje. Ptje. Ptje.

Tabla 6. Evaluacin de sitios por mtrica evaluada segn perfiles de usuario

Para realizar el segundo tipo de evaluacin, cada mtrica debe ser evaluada segn el grado de importancia que le fue asignado de acuerdo a lo establecido en el punto 5.2.2, es decir, se deben clasificar cada una de las 22 mtricas en alguno de los 3 grupos que le corresponde: mtricas imprescindibles, secundarias y dispensables. Lo anterior, permitir ordenarlas segn un grupo de importancia para luego completar una tabla con los puntajes obtenidos por cada una de las mtricas, segn el esquema dispuesto en la Tabla 7. Para proceder a lo anterior, se debe observar la matriz de valoracin creada para el sitio Web en particular, y se anota el puntaje de la mtrica requerida, segn el grupo al que pertenece, en la tabla que se muestra a continuacin. Adems en esta tabla se deber completar el puntaje total obtenido por cada grupo de mtricas y el porcentaje de cumplimiento de mtricas con puntaje mximo, es decir, 4 puntos. Esto ltimo es necesario, ya que segn lo expresado en el punto 5.6, un sitio Web ser considerado Aceptable si cumple determinado puntaje y porcentaje de cumplimiento.
Grupo de mtricas imprescindibles Nombre de la mtrica (iir) Porcentaje de cumplimiento Excelente-Regular-Malo Grupo de mtricas secundarias Nombre de la mtrica (iis) Porcentaje de cumplimiento Excelente-Regular-Malo Grupo de mtricas dispensables Nombre de la mtrica (iit) Porcentaje de cumplimiento Excelente-Regular-Malo Total puntaje

Total puntaje

Total puntaje

Tabla 7. Evaluacin de sitios por grado de importancia

81

5.6 Interpretacin de las evaluaciones


De manera formal, una metodologa se puede definir como un par M=<T, A> siendo T el tipo de sitio y A el conjunto de atributos mnimos que un sitio Web debiera cumplir. M = <T, A> T: tipo de sitio Web A: conjunto de atributos mnimos En particular, se debe determinar que para un conjunto finito de sitios Web existe un M = < T, A>, en que T es un subconjunto de T y A un subconjunto de A. Si descomponemos la tupla mencionada anteriormente, podemos definir una frmula que nos permite formar un mecanismo general de evaluacin de sitios Web, independiente del tipo de usuario, del tipo de sitio Web, del tipo de mtrica, ya que se podrn evaluar diferentes aplicaciones con criterios particulares, pudiendo agregar o eliminar mtricas. Finalmente, la evaluacin de sitios Web puede ser formalizada a travs de la frmula genrica presentada en el punto 4.1 del captulo 4. EvaluacinSitiosWeb= Mindispensables* + Msecundarias* + Mdispensables* Esta frmula puede ser descompuesta para su mayor entendimiento indicando que: - la variable corresponde a un 65% de importancia respecto al total de la evaluacin del sitio. - la variable corresponde a un 25% de importancia respecto al total de la evaluacin del sitio. - la variable corresponde a un 10% de importancia respecto al total de la evaluacin del sitio. Estos factores se multiplican por la sumatoria obtenida por el grupo de mtricas correspondientes. De esta manera, la frmula puede quedar como sigue: EvaluacinSitiosWeb = [ Mtricas_imprescindibles*0.65] + [ Mtricas_secundarias*0.25] + [ Mtricas_dispensables*0.10]

82

Donde: Mtricas_imprescindibles corresponde a la sumatoria de la puntuacin obtenida de 11 mtricas correspondientes a ese grupo, segn lo indicado en el punto 5.2.2 de este captulo. Mtricas_secundarias corresponde a la sumatoria de la puntuacin obtenida de 8 mtricas correspondientes a ese grupo, segn lo indicado en el punto 5.2.2 de este captulo. Mtricas_dispensables corresponde a la sumatoria de la puntuacin obtenida de 3 mtricas correspondientes a ese grupo, segn lo indicado en el punto 5.2.2 de este captulo. Al aplicar esta frmula, se debe contemplar que para que un sitio Web sea considerado como Aceptable, debe cumplir alguno de los siguientes criterios: Si un sitio tiene todos los valores de su medicin en el puntaje medio, es decir, con 2 puntos, lo que equivale a 44 puntos como evaluacin total. Si un sitio tiene como evaluacin total un puntaje entre 62 a 88 puntos. a. 78 a 88 puntos Excelente ACEPTABLE b. 62 a 77 Muy Bueno c. 46 a 61 Bueno d. 30 a 45 Regular e. 0 a 29 Insuficiente

Ambas situaciones son vlidas, siempre y cuando se cumpla lo siguiente: si el grupo de mtricas imprescindibles tienen como mnimo el 70% de las mtricas evaluadas con puntaje 4; es decir, deben existir por lo menos 8 de las 11 mtricas. Si el grupo de mtricas secundarias tienen como mnimo el 60% de las mtricas evaluadas con puntaje 4, deben existir por lo menos 5 de las 8 mtricas. Si en el tercer grupo de mtricas dispensables, tienen como mnimo el 60%, es decir, 2 de 3 de las mtricas evaluadas con puntaje 4 por lo menos.

83

5.7 Resumen de la metodologa de evaluacin de sitios Web


A continuacin se indicarn secuencialmente los pasos a seguir para implementar el Modelo propuesto en esta tesis para la evaluacin de sitios Web. 1. Comprobacin del tipo de sitio Web. Comprobar que la empresa cumple con los parmetros que la clasifican como PYME y que el sitio Web muestre productos o servicios. 2. Evaluacin del sitio segn el grado de cumplimiento. Evaluar el sitio Web mediante la tcnica de la observacin, segn el grado de cumplimiento que presenten cada una de las mtricas propuestas en los distintos criterios de evaluacin definidos. Para recordar, los criterios de evaluacin y las mtricas propuestas son: CONTENIDO: Color/letra/fondo, Lenguaje/Redaccin, Elementos multimedia, Imgenes, Cobertura, Interaccin, Actualizacin. PRESENTACION: Identidad/Informacin de contacto, Objetivos. COMPORTAMIENTO: Eficiencia, Cotizacin online, Control y retroalimentacin, Transaccin online. NAVEGACION: Funcionalidad, Bsqueda, Links, Enlaces, Cliente frecuente, Satisfaccin. RENDIMIENTO: Visita de Usuario, Tiempo de carga, Compatibilidad. Al observar la presencia o no de la mtrica, se debe asignar el puntaje que esta tiene respecto a su cumplimiento, es decir, 4, 2 o 0, lo que equivale a los conceptos de Excelente, Regular y Malo respectivamente. Para registrar esta evaluacin, se utilizan las rbricas o matrices de valoracin, las que se implementan a travs de la herramienta gratuita de Internet Rubistar. Previo a la evaluacin, se disea la matriz de valoracin para el sitio Web a evaluar, tomando en cuenta el esquema de mtricas propuesto, tal como lo muestra la Tabla 5. 3. Evaluacin del sitio por grado de importancia. Evaluar el sitio Web segn el grado de importancia que presenten las mtricas respecto al total de la evaluacin del sitio, obteniendo un segundo puntaje total por cada sitio. La evaluacin por grado de importancia, debe agrupar las mtricas en el grupo respectivo, de acuerdo a la siguiente clasificacin: Mtricas imprescindibles: Funcionalidad, Transaccin online, Links, Cliente frecuente, Cotizacin online, Compatibilidad, Interaccin, Actualizacin, Cobertura, Tiempo de carga, Identificacin/Informacin. Este grupo tendr 84

un 65% de importancia respecto al total de la evaluacin del sitio. Mtricas secundarias: Lenguaje/redaccin, Visita de usuario, Objetivos, Control y retroalimentacin, Enlaces, Bsqueda, Satisfaccin, Eficiencia. Este grupo tendr un 25% de importancia respecto al total de la evaluacin del sitio. Mtricas dispensables: Color/letra/fondo, Multimedia, Imgenes. Este grupo tendr un 10% de importancia respecto al total de la evaluacin del sitio. Posteriormente, los mismos valores obtenidos por cada mtrica en la evaluacin anterior se deben aplicar en la frmula de Evaluacin de Sitios Web que se muestra a continuacin: EvaluacinSitiosWeb = [ Mtricas_imprescindibles*0.65] + [ Mtricas_secundarias*0.25] + [ Mtricas_dispensables*0.10]

OBS. El paso 2 y 3 son evaluaciones que deben ser efectuadas como mnimo por tres potenciales usuarios con igual perfil profesional. 4. Interpretacin de las evaluaciones realizadas En este punto, se debe establecer si el sitio Web es considerado como Aceptable o no. Si as fuera, debe cumplir alguno de los siguientes criterios: Si un sitio tiene todos los valores de su medicin en el puntaje medio, es decir, con 2 puntos, lo que equivale a 44 puntos como evaluacin total. Si un sitio tiene como evaluacin total un puntaje entre 62 a 88 puntos. Ambas consideraciones son legtimas, siempre y cuando en el sitio se observen los requisitos que deben cumplir en su generalidad el grupo de mtricas imprescindibles, el grupo de mtricas secundarias y el grupo de mtricas dispensables, de acuerdo a lo indicado en el punto 5.2.2. En la Figura 15 se muestra en forma resumida y grfica, los pasos a seguir para realizar una Evaluacin de sitios Web.

85

Verificacin del tipo de sitio Web Evaluacin del sitio segn el grado de cumplimiento

Evaluacin del sitio por grado de importancia

Interpretacin de las evaluaciones realizadas

Sitio Aceptable

Sitio Discutible

Figura 15. Metodologa propuesta de evaluacin de sitios Web

86

CAPITULO 6 RESULTADOS
6.1 Evaluacin por mtricas propuestas
Luego de tener definidos los sitios Web, se deben evaluar las mtricas escogidas y de esta forma obtener los resultados comparativos entre ellos, para lo cual se disea la matriz de valoracin para cada uno de los sitios segn cada criterio definido: 1, 2, 3, 4 y 5, y as se procede a la evaluacin respectiva (ver detalle de la construccin de esta matriz en Anexo 2 y el resumen de la evaluacin de cada sitio segn el perfil de usuario en Anexo 3). Una vez evaluados los niveles de cumplimiento para cada sitio Web de cada uno de los criterios, por los tres usuarios adultos con perfiles profesionales distintos, el resumen de la evaluacin da como resultado total la puntuacin mostrada en las tablas que se expresan a continuacin. 6.1.1 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 1
pasteleriaelparron.cl (1) Perfil1 Perfil2 Perfil3 Total Prom. Sabordemar.cl (2) huertosdellago.com (3) Musto.cl (4)

40 30 110 37

50 58 64 2 57

60 50 51

62 50 60

Tabla 8. Puntajes totales de la evaluacin de sitios Web segn criterio 1

La observacin de los resultados muestra que: El sitio que mayor puntaje total obtuvo es musto.cl (siendo coincidente con lo indicado por los usuarios 1 y 3), es decir, es el sitio que tiene el mayor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el ms aceptable dentro de este grupo. El sitio que menor puntaje total obtuvo es pasteleriaelparron.cl (siendo este puntaje concordante con la opinin de los 3 usuarios), es decir, es considerado el sitio que tiene el menor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el menos aceptable dentro de este grupo. El promedio obtenido por cada sitio flucta entre los 37 y 60 puntos, siendo que el mximo total es 88.

87

6.1.2 Resumen de la puntuacin de la Matriz de valoracin segn Criterio 2


Airfresh.cl (5) Ingemetal.cl (6) Qualityingenieros.c l (7) Cuadrosmodernos.c l (8) Ecocolor.cl (9) Obsequios.cl (10)

Perfil1 Perfil2 Perfil3 Total Prom.

54

40 146 49

58 50 158 53

40

66

53

47

44

58

Tabla 9. Puntajes totales de la evaluacin de sitios Web segn criterio 2

La observacin de los resultados muestra que: El sitio que mayor puntaje total obtuvo es obsequios.cl (siendo coincidente con lo indicado por los usuarios 1 y 3), es decir, es el sitio que tiene el mayor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el ms aceptable dentro de este grupo. El sitio que menor puntaje total obtuvo ecocolor.cl (siendo este puntaje concordante con la opinin de los usuarios 1 y 2), es decir, es considerado el sitio que tiene el menor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el menos aceptable dentro de este grupo. El promedio obtenido por cada sitio flucta entre los 44 y 58 puntos, siendo que el mximo total es 88. 6.1.3 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 3
alondra.cl (11) altosuite.cl (12) ayelenaparthotel.cl (13) mayurutour.com (14) hipoterapia-mundoecuestre.es.tl (15) termaschillan.cl (16)

Perfil1 Perfil2 Perfil3 Total Prom.

38 44 51 45 48 55 49

70 194 65

Tabla 10. Puntajes totales de la evaluacin de sitios Web segn criterio 3

La observacin de los resultados muestra que: El sitio que mayor puntaje total obtuvo es termaschillan.cl (siendo coincidente con lo indicado por los usuarios 1 y 2), es decir, es el sitio que tiene el mayor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el ms aceptable dentro de este grupo.

88

El sitio que menor puntaje total obtuvo es altosuite.cl, es decir, es el sitio que tiene el menor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el menos aceptable dentro de este grupo. El promedio obtenido por cada sitio flucta entre los 45 y 65 puntos, siendo que el mximo total es 88.

6.1.4 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 4


caleli.cl (17) ciape.org (18) cirples.cl (19) eventosvaldivia.es.tl (20) minena.cl (21) alturasdecoracion.cl (22)

Perfil1 Perfil2 Perfil3 Total Prom.

45

64 40 56 160 53

43

37

32

47

Tabla 11. Puntajes totales de la evaluacin de sitios Web segn criterio 4

La observacin de los resultados muestra que: El sitio que mayor puntaje total obtuvo es ciape.org (siendo coincidente con lo indicado por los usuarios 1 y 3), es decir, es el sitio que tiene el mayor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el ms aceptable dentro de este grupo. El sitio que menor puntaje total obtuvo es minena.cl (siendo este puntaje concordante con la opinin de todos los usuarios), es decir, es considerado como el que tiene el menor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el sitio discutible dentro de este grupo. El promedio obtenido por cada sitio flucta entre los 32 y 53 puntos, siendo que el puntaje mximo que un sitio pudiera obtener es 88. 6.1.5 Resumen de la Puntuacin de la Matriz de valoracin segn Criterio 5
delifish.cl (23) Perfil1 Perfil2 Perfil3 Total Prom. geomar.cl (24) landes.cl (25) prona.cl (26) pesqueraomega.cl (27)

45

34 124 41

56 156 52

45

42

Tabla 12. Puntajes totales de la evaluacin de sitios Web segn criterio 5

La observacin de los resultados muestra que: 89

El sitio con mayor puntaje total es Landes.cl (siendo concordante esa puntuacin tambin por los 3 usuarios), es decir, es el sitio que tiene el mayor porcentaje de cumplimiento de las mtricas evaluadas y por lo tanto el ms aceptable dentro de este grupo. El sitio con menor puntaje es geomar.cl (siendo slo el usuario 2 quien o concuerda con esa opinin), y como tal es considerado como el de menor porcentaje de cumplimiento de las mtricas evaluadas, y por lo tanto el discutible dentro de este grupo. El promedio obtenido por cada sitio flucta entre los 41 y 52 puntos, siendo que el puntaje mximo que un sitio pudiera obtener es 88.

90

6.2 Evaluacin por grado de importancia


Como cada usuario evalu segn su propio punto de vista, las mtricas pueden tener puntajes de evaluacin distintos y no ser los mismos en general, por lo que se detallar cada uno de los casos para ver si es relevante o no en la decisin de interpretar que sitio Web es ms aceptable que otro. Recordemos, que la evaluacin que obtendr cada sitio Web segn el grupo de importancia en que est clasificada cada mtrica se calcula de la siguiente forma:
EvaluacinSitiosWeb =

[ Mtricas_imprescindibles*0.65] + [ Mtricas_secundarias*0.25] + [ Mtricas_dispensables*0.10]

Para realizar la evaluacin de las mtricas en particular segn el grado de importancia asignado, es necesario enumerar cada una de ellas, de tal manera de poder identificarlas fcilmente en las tablas que muestran los puntajes obtenidos que estn indicadas en el Anexo 2. Es as como en la tabla 13 se resume la identificacin de cada mtrica segn el grupo en el que fue clasificada, de manera de facilitar la evaluacin: Grupo Imprescindible s Mtrica Funcionalidad Transaccin online Links Cliente frecuente Cotizacin online Compatibilidad Interaccin Actualizacin Cobertura Tiempo de carga Identificacin Eficiencia Visita de usuario Objetivos Control y retroalimentacin Enlaces Bsqueda Satisfaccin Identificacin 4.1 3.3 4.4 4.6 3.4 5.3 1.6 1.7 1.5 5.2 2.1 3.1 5.1 2.2 3.2 4.5 4.2 4.3

Secundarias

91

Dispensables

Lenguaje/redaccin Color/letra/fondo Multimedia Imgenes

1.1 1.2 1.3 1.4

Tabla 13. Identificacin de las mtricas evaluadas

Con esta clasificacin, es ms fcil observar el puntaje obtenido por cada mtrica en la evaluacin de cada sitio que realiz cada uno de los usuarios en particular y vaciar los resultados en la frmula descrita en el captulo anterior. Es as como por ejemplo, la Evaluacin de Grupo de sitios segn criterio 1: rubro alimentos para el sitio Pasteleriaelparron.cl que realiz el usuario con perfil 1 es como sigue: Usuario 1: Sitio 1: Pasteleriaelparron.cl Mtricas_imprescindibles = 26 puntos Mtricas_secundarias = 6 puntos Mtricas_dispensables = 8 puntos
EvaluacinSitiosWeb = [Mtricas_imprescindibles*0.65] +

[Mtricas_secundarias*0.25] + [Mtricas_dispensables*0.10] Evaluacin Sitios Web = [26 *0.65] + [6*0.25] + [8*0.10] = 16.9 + 1.5+ 0.8 = 19.2 NOTA. El detalle de la evaluacin del resto de los sitios Web por grado de importancia, segn la apreciacin del usuario 1 y del resto de los usuarios evaluadores, se encuentra en el Anexo 4. A continuacin se despliega la Tabla 14 con el resumen de los puntajes obtenidos por cada sitio Web de acuerdo a su grado de importancia, segn el usuario1. Portal Web Criterio 1 www.pymeschile.cl Rubro Sitios Web de empresa Puntaje 19.2 21.7 25.5 26.8 24.9 17.6 19.6

Alimentos http://www.pasteleriaelparron.cl http://www.sabordemar.cl http://www.huertosdellago.com http://www.musto.cl Variado http://www.airfresh.cl http://www.ingemetal.cl http://www.qualityingenieros.cl

Criterio 2 www.pymeschile.cl

92

http://www.cuadrosmodernos.cl http://www.ecocolor.cl http://www.obsequios.cl Criterio 3 www.chileyellow.com Turismo http://www.alondra.cl http://www.altosuite.cl http://www.ayelenaparthotel.cl http://www.mayurutour.com http://www.hipoterapiamundoecuestre.es.tl http://www.termaschillan.cl http://www.caleli.cl http://www.ciape.org http://www.cirples.cl http://www.eventosvaldivia.es.tl http://www.minena.cl http://www.alturasdecoracion.cl http://www.delifish.cl http://www.geomar.cl http://www.landes.cl http://www.prona.cl http://www.pesqueraomega.cl

26.4 20 29.4 27.9 20.2 21 20.6 17.7 30.4 21.2 34 22.1 22.1 14.3 26.8 16.8 20.4 20.9 18.3 30.1

Criterio 4 www.chileyellow.com Variado

Criterio 5 www.mundopyme.cl

Pesca

Tabla 14. Puntajes totales de la evaluacin de sitios Web segn grado de importancia de mtricas evaluadas por usuario 1

No se aplicar la frmula de evaluacin de sitios para el resto de los usuarios evaluadores, ya que la idea es mostrar slo el procedimiento de cmo debiera hacerse la evaluacin completa de un sitio Web en particular.

93

6.3 Punto de vista de los evaluadores


De las evaluaciones efectuadas por los 3 usuarios con perfiles profesionales distintos, se pueden rescatar varias apreciaciones generales de las mtricas que evaluaron en todos los sitios Web, que muchas veces fueron coincidentes y otras bastantes disimiles, que ayudarn a forjar una idea clara de que sitio es ms aceptable que otro. En este sentido, las indicaciones ms importantes y que son coincidentes entre los 3 usuarios evaluadores para las mtricas de los Sitios Web pertenecientes al Criterio de agrupacin 1 rubro alimentos son: La mtrica Lenguaje/redaccin (1.1) tiene puntaje mnimo en todos los sitios Web evaluados, y la razn es que no se permite escoger el idioma al lenguaje de sus usuarios. La mtrica Cliente frecuente (4.6) tiene puntaje mnimo en todos los sitios Web evaluados, y la razn es que no posee una seccin donde permita al cliente formar parte de los usuarios visitantes frecuentes del sitio. La mtrica Link (4.4) tiene puntaje mximo en todos los sitios Web evaluados, y la razn es que los enlaces para la navegacin estn clara y mente consistentemente colocados, lo que permite al usuario moverse fcilmente de una pgina a otras relacionadas. La mtrica Compatibilidad (5.3) tiene puntaje mximo en todos los sitios Web evaluados, y la razn es que funciona en plataformas Macs y PCs y en navegadores Navigator y Explorer". La mtrica Imgenes (1.4) tiene puntaje medio en todos los sitios Web evaluados, y la razn es que slo algunas pginas del sitio presentan imgenes alusivas que aportan, o presentan imgenes alusivas pero distraen del objetivo del sitio. El resto de las apreciaciones de los usuarios evaluadores para los otros grupos de sitios Web se detallan en el Anexo 5.

94

6.4 Punto de vista del desarrollo


En general, los resultados totales finales en cada una de las evaluaciones son bastantes parecidos, no produciendo mayor dispersin entre los diferentes perfiles de usuarios. Evaluacin de Sitios Web: por mtrica evaluada En la evaluacin realizada a los sitios Web, respecto al mayor puntaje obtenido en total por mtrica evaluada, se puede indicar lo siguiente (esquematizado en la Tabla 16): o En el grupo del criterio 1 rubro alimentos, el sitio es musto.cl o En el grupo del criterio 2 rubro variado, el sitio es obsequios.cl o En el grupo del criterio 3 rubro turismo, el sitio es termaschillan.cl o En el grupo del criterio 4 rubro variado, el sitio es ciape.org o En el grupo del criterio 5 rubro pesca, el sitio es Landes.cl En general, el sitio Web con mayor puntaje fue termaschillan.cl, perteneciente al grupo de sitios del criterio 3 rubro turismo. Los sitios con menor puntaje por mtricas evaluadas en cada uno de los grupos son (esquematizados en la Tabla 17): o pasteleriaelparron.cl del grupo de sitios del criterio 1 rubro alimentos. o ecocolor.cl del grupo de sitios del criterio 2 rubro variado. o altosuite.cl del grupo de sitios del criterio 3 rubro turismo. o minena.cl del grupo de sitios del criterio 4 rubro variado. o geomar.cl del grupo de sitios del criterio 5 rubro pesca. En general, el sitio Web con menor puntaje fue minena.cl del grupo de sitios del criterio 4 rubro variado.
Criterio criterio 1 rubro alimentos criterio 2 rubro variado criterio 3 rubro turismo criterio 4 rubro variado criterio 5 rubro pesca Mayor puntaje en general Sitio www.musto.cl www.obsequios.cl www.termaschillan.cl www.ciape.org www.landes.cl www.termaschillan.cl

Tabla 15. Sitios Web con mayor puntaje por mtrica evaluada

Criterio criterio 1 rubro alimentos criterio 2 rubro variado criterio 3 rubro turismo criterio 4 rubro variado criterio 5 rubro pesca Menor puntaje en general

Sitio www.pasteleriaelparron.cl www.ecocolor.cl www.altosuite.cl www.minena.cl www.geomar.cl www.minena.cl

95

Tabla 16. Sitios Web con menor puntaje por mtrica evaluada

96

Evaluacin de Sitios Web: por grado de importancia En el grupo de sitios correspondientes al criterio 1 rubro alimentos, el sitio con mayor grado de cumplimiento de las mtricas por grado de importancia es musto.cl y el sitio con menor grado de cumplimiento de las mtricas por grado de importancia es pasteleriaelparron.cl. En el grupo de sitios Web correspondientes al criterio 2 rubro variado, el sitio con mayor grado de cumplimiento de las mtricas por grado de importancia es obsequios.cl y el sitio con menor grado de cumplimiento de las mtricas por grado de importancia es ingemetal.cl. En el grupo de sitios Web correspondientes al criterio 3 rubro turismo, el sitio con mayor grado de cumplimiento de las mtricas por grado de importancia es termaschillan.cl y el sitio con menor grado de cumplimiento de las mtricas por grado de importancia es hipoterapia-mundoecuestre.es.tl. En el grupo de sitios Web correspondientes al criterio 4 rubro variado, el sitio con mayor grado de cumplimiento de las mtricas por grado de importancia es ciape.org y el sitio con menor grado de cumplimiento de las mtricas por grado de importancia es minena.cl. En el grupo de sitios Web correspondientes al criterio 5 rubro pesca, el sitio con mayor grado de cumplimiento de las mtricas por grado de importancia es pesqueraomega.cl y el sitio con menor grado de cumplimiento de las mtricas por grado de importancia es delifish.cl.
Criterio criterio 1 rubro alimentos criterio 2 rubro variado criterio 3 rubro turismo Sitio con mayor grado de cumplimiento www.musto.cl www.obsequios.cl www.termaschillan.cl Sitio con menor grado de cumplimiento www.pasteleriaelparron.cl www.ingemetal.cl www.hipoterapiamundoecuestre.es.tl. www.minena.cl www.delifish.cl

criterio 4 rubro variado www.ciape.org criterio 5 rubro pesca www.pesqueraomega.cl Puntajes en general

Tabla 17. Sitios Web con mayor y menor grado de cumplimiento de mtricas por grado de importancia

Resumen de evaluacin de sitios Tomando en cuenta las dos consideraciones de evaluacin de cumplimiento de mtricas y realizando una evaluacin global, se puede indicar lo siguiente: En el grupo de sitios del criterio 1 rubro alimentos, en ambos tipos de evaluacin, los sitios de mayor y menor cumplimiento coinciden en sus puntuaciones, siendo musto.cl el sitio con mayor grado de cumplimiento y pasteleriaelparron.cl el sitio con menor grado de cumplimiento, por lo tanto, 97

no inciden aquellas evaluaciones en que las mtricas presentan puntuaciones mnimas siendo estos mismos sitios el ms aceptable y discutible, respectivamente. En el grupo de sitios del criterio 2 rubro variado, los sitios elegidos con mayor cumplimiento coinciden en ambos tipos de evaluacin, es decir, obsequios.cl. Sin embargo, en la evaluacin de sitios de menor grado de cumplimiento existe una diferencia, pues en el primer tipo de evaluacin obtuvo el menor puntaje el sitio ecocolor.cl y en el segundo tipo de evaluacin lo obtuvo el sitio ingemetal.cl. Entre estos dos sitios, el ltimo fue evaluado con mayor cantidad de mtricas que tuvieron mnima puntuacin y que pertenecan al grupo de las imprescindibles, por lo tanto ingemetal.cl pasa a ser el sitio con menor cumplimiento en este grupo, es decir, el discutible y obsequios.cl para a ser el sitio ms aceptable por tener mayor grado de cumplimiento. En el grupo de sitios del criterio 3 rubro turismo, los sitios elegidos con mayor cumplimiento coinciden en ambos tipos de evaluacin con que el sitio termaschillan.cl tenga el mayor puntaje. Sin embargo, en la evaluacin de sitios de menor grado de cumplimiento existe una diferencia, ya que en el primer tipo de evaluacin es altosuite.cl y en el segundo tipo de evaluacin es hipoterapia-mundoecuestre.es.tl. Entre estos dos sitios, el ltimo fue evaluado con mayor cantidad de mtricas que tuvieron mnima puntuacin y que pertenecan al grupo de las imprescindibles, por lo que hipoterapiamundoecuestre.es.tl. pasa a ser el sitio discutible con menor cumplimiento en este grupo y termaschillan.cl el sitio ms aceptable con el mayor grado de cumplimiento. En el grupo de sitios del criterio 4 rubro variado, en ambos tipos de evaluacin, los sitios de mayor y menor cumplimiento coinciden en sus puntuaciones, siendo ciape.org el sitio con mayor grado de cumplimiento y minena.cl el sitio con menor grado de cumplimiento, por lo tanto, no inciden aquellas evaluaciones en que las mtricas presentan evaluaciones mnimas, siendo ciape.org el sitio ms aceptable de este grupo. En el grupo de sitios del criterio 5 rubro pesca, los puntajes no coinciden en ningn sentido. En el primer tipo de evaluacin, el sitio con el mayor grado de cumplimiento es Landes.cl y en el segundo tipo de evaluacin es pesqueraomega.cl. o En esta evaluacin, se puede hacer una indicacin importante que justifica el que no haya consenso. Las mtricas agrupadas dentro del tercer grupo de mtricas denominadas dispensables, tienen un alto grado de cumplimiento por todos los sitios del quinto criterio, por lo que aunque tienen slo un 10% de incidencia en la evaluacin final, el puntaje siempre es mucho mayor que el puntaje del segundo grupo de mtricas denominadas secundarias, ya que estas ltimas en su gran mayora presentan una evaluacin de 0 puntos.

98

o Al observar la evaluacin de las mtricas pertenecientes a las imprescindibles, de igual manera ambos sitios empatan con la cantidad de mtricas con puntuacin mnima. o Si se observan las mtricas del grupo de las secundarias, el sitio Landes.cl fue evaluado con menos cantidad de mtricas que tuvieron mnima puntuacin, por lo que pasa a ser el sitio con mayor cumplimiento en este grupo y por lo tanto el ms aceptable. o Respecto al menor grado de cumplimiento, en el primer tipo de evaluacin, el sitio es geomar.cl y en el segundo tipo de evaluacin es delifish.cl. Entre estos dos sitios, el ltimo fue evaluado con mayor cantidad de mtricas que tuvieron mnima puntuacin y que pertenecan al grupo de las imprescindibles, por lo que delifish.cl pasa a ser el sitio discutible con menor cumplimiento en este grupo.

En resumen, se puede determinar que sitio Web de empresa es ms aceptable segn las mejores puntuaciones obtenidas en las evaluaciones realizadas: En el grupo de sitios del criterio 1 rubro alimentos el ms aceptable fue musto.cl. o Este sitio presenta 8 mtricas evaluadas con puntaje mximo 4 en el grupo de mtricas imprescindibles, es decir, el 73% que es ms del 70% exigido. o En el grupo de mtricas secundarias, presenta 5 mtricas evaluadas con puntaje mximo, es decir, el 63% que es ms del 60% exigido. o En el grupo de mtricas dispensables, existen 2 de las 3 mtricas con el valor mximo de 4 puntos, o sea el 67% que es mayor al 60% exigido. o Observando el puntaje total del sitio este tiene 62 puntos, lo que es evaluado dentro de la categora de Muy Bueno que est dentro de las opciones para ser aceptable. En el grupo de sitios del criterio 2 y 4 rubro variado el ms aceptable fue obsequios.cl. o Este sitio presenta 9 mtricas evaluadas con puntaje mximo 4 en el grupo de mtricas imprescindibles, es decir, un 82% que es ms del 70% exigido. o En el grupo de mtricas secundarias, presenta 5 mtricas evaluadas con puntaje mximo, es decir, el 63% que es ms del 60% exigido. o En el grupo de mtricas dispensables, existen 2 de las 3 mtricas con el valor mximo de 4 puntos, o sea el 67%, que es mayor al 60% exigido. o Observando el puntaje total del sitio este tiene 66 puntos, lo que es evaluado dentro de la categora de Muy Bueno que est dentro de las opciones para ser aceptable. En el grupo de sitios del criterio 3 rubro turismo el ms aceptable fue termaschillan.cl. 99

o Este sitio presenta 9 mtricas evaluadas con puntaje mximo 4 en el grupo de mtricas imprescindibles, es decir, 82% que es ms del 70% exigido. o En el grupo de mtricas secundarias, presenta 7 mtricas evaluadas con puntaje mximo, es decir, el 88% que es ms que el 60% exigido. o En el grupo de mtricas dispensables, existen 2 de las 3 mtricas con el valor mximo de 4 puntos, es decir, el 67%, lo que es mayor al 60% exigido. o Observando el puntaje total del sitio este tiene 70 puntos, lo que es evaluado dentro de la categora de Muy Bueno que est dentro de las opciones para ser aceptable. En el grupo de sitios del criterio 5 rubro pesca no hubo coincidencia inicial, por lo que se debi evaluar ms finamente que sitio presentaba la menor cantidad de mtricas evaluadas con puntuacin 0, y es as como se lleg a escoger a landes.cl segn lo expresado anteriormente. o Este sitio presenta 6 mtricas evaluadas con puntaje mximo 4 en el grupo de mtricas imprescindibles, es decir, slo el 55% que est muy debajo del 70% exigido. o En el grupo de mtricas secundarias, presenta 3 mtricas evaluadas con puntaje mximo, es decir, el 38% exigido que est muy debajo del 60% exigido. o En el grupo de mtricas dispensables, existen 2 de las 3 mtricas con el valor mximo de 4 puntos, es decir, el 67%, lo que es mayor al 60% porcentaje exigido. o Observando el puntaje total del sitio este tiene 48 puntos, lo que es evaluado dentro de la categora de Bueno que est dentro de las opciones para ser considerado slo regular.

Evaluacin de Mtricas en sitios de un mismo rubro La nica mtrica que presenta bajos niveles de cumplimiento en todos los sitios evaluados, es la mtrica Eficiencia, la que corresponde al grupo de mtricas secundarias, sin embargo, su presencia es ms relevante en sitios que tengan como objetivo prioritario las ventas de bienes o servicios, ya que sta tiene que ver con el tiempo que se demora en realizarse una transaccin y hay varios sitios que no poseen esta alternativa para el cliente. La mtrica Lenguaje y redaccin presenta una evaluacin mnima de 0 por los 3 usuarios, en todos los sitios pertenecientes al grupo de sitios clasificados como criterio 1 rubro alimentos y criterios 2 y 4 rubro variado, es decir, en 16 de 27 sitios lo que representa un 59,3%. Sin embargo, est presente con buena calificacin en los sitios del rubro turismo (criterio 3) y pesca (criterio 5), es decir, en 11 de 27 sitios est evaluada con nota 2 o 4, lo que representa un 40,7%. Esta medicin no afecta mayormente a los sitios en donde no est bien evaluada, ya que en su gran mayora pertenecen a empresas que ofrecen sus productos o servicios para la localidad en la cual estn ubicados, y justamente 100

las empresas que tienen una visin ms global al mercado, y que por lo mismo suponen que tendrn clientes extranjeros, como las tursticas o las pesqueras s la consideran. La mtrica Actualizacin presenta una evaluacin mnima de 0 en varios sitios Web de los distintos grupos de criterios. As por ejemplo, en todos los sitios del criterio 1 rubro alimentos, 2 de los 3 usuarios evaluaron esta mtrica con nota 0. En los sitios del criterio 2 rubro variado, los 3 usuarios evaluaron todos los sitios con nota mnima 0. En los sitios del criterio 3 rubro turismo, del criterio 4 rubro variado y del criterio 5 rubro pesca, 2 de los 3 usuarios evaluaron todos los sitios con nota 0. Esta informacin es relevante, dado que indica que ms del 90% de las empresas evaluadas no considera necesario indicar explcitamente la fecha de publicacin de la informacin que presenta a sus clientes, y debiera ser todo lo contrario, sobre todo si es una empresa que ofrece bienes o servicios, pues el cliente debiera disponer en todo momento de la informacin al da de los precios, productos o servicios ofertados, direccin o ubicacin de la empresa, contactos, etc., ya que sino se indica es ambiguo, afectando por sobre todo la confianza del cliente que supone cierta informacin siendo que la realidad no es la acertada. La mtrica Control y retroalimentacin presenta una evaluacin mnima de 0 en todos los sitios del grupo con criterio 1 rubro alimentos segn 1 de los 3 usuarios. En los sitios del grupo con criterio 2 rubro variado, con criterio 3 rubro turismo y con criterio 5 rubro pesca, 2 de los 3 usuarios evaluaron con 0. En los sitios del grupo con criterio 4 rubro variado, los 3 usuarios evaluaron con 0. Esta informacin afecta principalmente a aquellas empresas dedicadas a la venta de bienes o servicios, dado que implica primero que nada disponer de la opcin de realizar transacciones online y si es as, mantener informado al cliente de cmo va la transaccin que l est realizando va Web hasta terminarla satisfactoriamente. Sin embargo, varias de ellas no presentan esta opcin va online. La mtrica Cotizacin online presenta una evaluacin mnima de 0 en todos los sitios del grupo de criterio 1 alimentos y en los sitios del grupo de criterio 3 rubro turismo segn 1 de los 3 usuarios. En los sitios del grupo de criterio 2 rubro variado, criterio 4 rubro variado y criterio 5 rubro pesca, los 3 usuarios evaluaron con 0. Esta informacin al igual que la mtrica del punto anterior, afecta prioritariamente a aquellas empresas dedicadas a la venta de bienes o servicios y que presenten opcin de realizar transacciones online, ya que si lo permiten, debieran considerar la opcin de cotizar ya que en los tiempos actuales el ahorro de tiempo en la realizacin de trmites es fundamental.

101

Evaluacin de Mtricas en sitios Aceptables independiente del rubro De este estudio, se pudo observar que las caractersticas que presentan en comn los sitios Web clasificados dentro de Aceptables, independiente del rubro de la empresa, pues tenan el mayor grado de cumplimiento, son las siguientes: Las mtricas que todos los sitios evaluaron con el mximo puntaje y que por lo tanto indica que se reflejaba en un 100% son: o Color/letra/fondo, del grupo de mtricas dispensables o Elementos multimedia, del grupo de mtricas dispensables o Interaccin, del grupo de mtricas imprescindibles o Identificacin/Informacin, del grupo de mtricas imprescindibles o Objetivos, del grupo de mtricas secundarias o Funcionalidad, del grupo de mtricas imprescindibles o Links, del grupo de mtricas imprescindibles o Tiempo de carga, del grupo de mtricas imprescindibles o Compatibilidad, del grupo de mtricas imprescindibles La nica mtrica que todos los sitios evaluaron con el puntaje mnimo y que por lo tanto indica que no estaba interpretada dentro de ellos es la de Actualizacin, que pertenece al grupo de mtricas imprescindibles. Por ser slo una mtrica la que todos evaluaron mal no incide en la evaluacin final. La nica mtrica que est evaluada con puntaje medio y que implica que cumple parcialmente su comportamiento es la de Imgenes, que pertenece al grupo de mtricas dispensables.

Evaluacin de mtricas en sitios discutibles independiente del rubro As tambin, las caractersticas similares de los sitios Web que los llevaron a ser catalogados como Discutibles, independiente del rubro de la empresa, pues tenan el menor grado de cumplimiento son las siguientes: Las Mtricas que fueron evaluadas con puntuacin mxima son: o Identificacin/Informacin, del grupo de mtricas imprescindibles o Links, del grupo de mtricas imprescindibles o Tiempo de carga, del grupo de mtricas imprescindibles o Compatibilidad, del grupo de mtricas imprescindibles Las Mtricas que fueron evaluadas con puntuacin mnima son: o Actualizacin, del grupo de mtricas imprescindibles o Eficiencia, del grupo de mtricas secundarias o Control y retroalimentacin, del grupo de mtricas secundarias o Transaccin online, del grupo de mtricas imprescindibles o Cotizacin online, del grupo de mtricas imprescindibles o Cliente frecuente, del grupo de mtricas imprescindibles

102

Al igual que en los sitios Aceptables, la nica mtrica que fue evaluada con puntaje medio, es Imgenes, que pertenece al grupo de mtricas dispensables, lo que indica que su grado de cumplimiento es parcial.

En la Tabla 18, se marcaron aquellas mtricas que tuvieron mayor prevalencia en los sitios Web, segn las evaluaciones recogidas en los sitios Web con mayor y menor grado de cumplimiento, esto es en el caso que se encuentren presenten en en el 100% de los sitios.
OBS: Para ver a que sitio Web pertenece el nmero asignado, revisar la Tabla 4.
Mtricas imprescindibles Funcionalidad Transaccin online Links Cliente frecuente Cotizacin online Compatibilidad Interaccin Actualizacin Cobertura Tiempo de carga Identificacin/Informacin Mtricas secundarias Visita de usuario Objetivos Enlaces Control y retroalimentac. Satisfaccin Bsqueda Eficiencia Lenguaje/redaccin Mtricas dispensables Color/letra/fondo Multimedia Imgenes 4 Sitios Aceptables 10 16 18 25 1 Sitios Discutibles 6 15 21 23

x x x x x x
4

x x x x x x
10

x x x x x x
16

x x x x x x
18

x x x x x x
25

x x x x x
1

x x x x x
6

x x x x x
15

x x x x x
21

x x x x x
23

10

16

18

25

15

21

23

x x

x x

x x

x x

x x

Tabla 18. Mtricas comunes en sitios Aceptables y Discutibles

103

CAPITULO 7 CONCLUSIONES Y RECOMENDACIONES


Una vez aplicada la metodologa de Evaluacin de sitios Web para un conjunto finito de PYMEs chilenas, que permiti obtener informacin basada en las puntuaciones obtenidas por cada uno de los sitios evaluados y procesarla para generar los respectivos anlisis, se obtuvieron resultados que se pueden presentar en el siguiente conjunto de conclusiones: En lo referido a la Investigacin de las mtricas existentes en proyectos de Ingeniera Web en la actualidad mundial, se puede sealar que en la literatura relacionada se encontraron mediciones usadas y consideradas por empresas internacionales y nacionales, que permiten detectar cundo un sitio Web es efectivo, sin embargo muchas de ellas son fruto de la experiencia que a lo largo del tiempo les ha permitido afirmar que deben ser consideradas. En lo referido a la Evaluacin de mtricas encontradas y validadas a la realidad chilena, se puede indicar que los proyectos encontrados slo presentaban algn grado de relacin con el tema, pues especficamente no existe ninguno aplicado a sitios Web de empresa y menos chilenos. Adems en su mayora, presentan ciertas limitaciones que dificultan su aplicacin a procesos de evaluacin genricos que sirvan de base en otros mbitos. Principalmente no estn basados en criterios comunes y en muchos casos estn definidos para dominios especficos que no permiten generalizar para cualquier tipo de empresa. En lo referido a la Definicin de un conjunto finito de sitios Web de PYMEs chilenas para evaluar las mtricas, se puede decir que se us Internet para buscar sitios Web vigentes de empresas chilenas, a travs de ecuaciones de bsqueda que permitieron seleccionar un grupo de ellos para su evaluacin. La clasificacin de los tipos de empresa a utilizar para la evaluacin de sus sitios Web, se puede hacer tambin considerando las ventas anuales y/o el nmero de empleados, de manera de hacer otro tipo de anlisis comparativo. Si bien en la metodologa de evaluacin propuesta se abarcan ms que nada sitios Web de empresa, dado que ese es el objetivo de esta tesis, el modelo formal permite poder adecuarlo a cualquier tipo de sitio Web que quiera ser evaluado. En lo referido a la Evaluacin de mtricas y comportamiento de sitios Web seleccionados, se puede sealar que: o Las mtricas escogidas para la evaluacin son subjetivas, es decir, dependen del punto de vista del evaluador, pero como la metodologa de evaluacin se basa en un modelo formal que es flexible y modular, es posible adecuarlo a cualquier tipo de sitio, 104

cualquier tipo de mtrica y cualquier perfil de evaluador, es decir, es posible adecuarlo a distintas realidades y son siempre medibles. o Por otro lado, en los test de usuarios para la evaluacin de los sitios Web, se consider esta vez un usuario por cada perfil profesional y solo 3 perfiles, dado que la literatura consideraba de 3 a 5 usuarios mnimos. Esto pudiera ampliarse a ms usuarios por perfil y/o ms perfiles, de manera de obtener otro tipo de anlisis comparativo. o Cabe sealar que an cuando se propone una segunda evaluacin de las mtricas por grado de importancia y se asigna factores de ponderacin propios, un futuro evaluador puede usar su propia escala y porcentajes, ya que el modelo formal lo permite. En lo referido a la Depuracin de las mtricas detectadas en teora para compararlas con las evaluadas en la prctica, y definir una propuesta de evaluacin de mtricas, se puede indicar que fue posible definir una propuesta de evaluacin de sitios Web para PYMEs chilenas que permitan definirlo como exitoso con respecto a otro de similares caractersticas. Los sitios Web de empresa, requieren una evaluacin y perodos de prueba mayores que los sitios generales, ya que dependen en mayor medida de las preferencias y experiencias individuales de los usuarios. Es posible afirmar que se demostr la hiptesis investigada, respecto a establecer un conjunto de mtricas que permitan evaluar la efectividad del sitio Web de una PYME chilena, y que este conjunto se pudo aplicar en un proceso de prueba vlido.

105

REFERENCIAS BIBLIOGRAFICAS
[1] CHAFFEY D., ELLIS-CHADWICK F., JOHNSTON K., MAYER R. 2009. Internet Marketing: Strategy, Implementation and Practice. Editorial Financial Times de Prentice Hall. [2] INAN, H. 2002. Measuring The Success Of Your Website: A customer-centric approach to website management. Pearson Education/Prentice Hall, Frenchs Forest. NSW, Australia. [3] STERNE, J. 2002. Web Metrics-Proven Methods for Measuring Web Site Success, John Wiley & Sons, Inc. New York, NY, EE.UU. [4] RODRIGUEZ, N, MARTINEZ, W. Planificacin y evaluacin de proyectos informticos San Jos Costa Rica. 1998. Editorial Universidad Estatal a Distancia. [5] PRESSMAN, ROGER. Ingeniera del software. Un enfoque prctico. Cuarta edicin. 1998. Editorial Mc Grawhill. [6] LAFUENTE, G. 2000. Automatizando mtricas en la Web. Tesis de Licenciatura en Sistemas de Informacin. Universidad Nacional de Lujn. Buenos Aires, Argentina. [7] OLSINA, L. 1999. Metodologa Cuantitativa para la Evaluacin y Comparacin de la Calidad de Sitios Web. Tesis doctoral, Facultad de Ciencias Exactas, UNLP, La Plata, Argentina. [8] HAVENSTEIN, H. Julio 2007. New Web metric likely to hurt Google, help YouTube Computerworld. [9] OLSINA, L., ROSSI G, 2002. A Quantitative Method for Quality Evaluation of Web Sites and Applications, IEEE Multimedia 9(4): 20-29. [10] BECK, S. 1997. The Good, The Bad & The Ugly: or, Why Its a Good Idea to Evaluate Web Sources. Disponible en http://lib.nmsu.edu/instruction/evalcrit.html [11] KAPOUN, J. Five Criteria for Evaluating Web Pages .Cornell University Library. United States. Disponible en http://www.library.cornell.edu/olinuris/ref/research/webcrit.html [12] MANCHN, E. 2003. Problemas en la evaluacin de sitios Web. Disponible en http://www.webestilo.com/guia/articulo.phtml?art=43

106

[13] NIELSEN, J. 2005. Heuristic Evaluation. Disponible en http://www.useit.com/papers/heuristic/ [14] PORRAS, G. 2008. Sitios Exitosos: De los Estndares Web a la Experiencia de Usuario. Disponible en http://downloads.slidesharecdn.com/sitios-exitosos-v201208744420906564-9.ppt [15] What Is Website Evaluation/Web Metrics?. Febrero 2008. Disponible en http://www.usa.gov/webcontent/improving/evaluating/definition.shtml [16] Encuesta de Caracterizacin Socioeconmica Nacional CASEN 2006. Disponible en http://www.mideplan.cl/casen/publicaciones/2006/Resultados_TICs_Casen_2006.p df [17] DE LA NUEZ ALFONSO. CEO de Xperience Consulting. La medicin de la usabilidad web: una ventaja competitiva. Mayo 2003. http://www.e-mass-media.com/0006_cusabili.php [18] NIETO-SANTISTEBAN MARA A. Ingeniera web. Construyendo Web Apps. I Jornadas de Ingeniera Web 01. http://www.informandote.com/jornadasIngWEB/articulos/jiw01.pdf [19] AGUILERA, ARANTXA G. Nielsen/NetRatings medir el xito de los sitios web por tiempo, y no por pginas. Julio 2007. http://www.idg.es/iworld/noticia.asp?id=58741&sec=iworld [20] NIELSEN, J. Why You Only Need to Test with 5 Users. Marzo 2000. Disponible en http://www.useit.com/alertbox/20000319.html [21] Seminario Calidad de Sistemas de Informacin Web (CSIW) del Departamento de Sistemas Informticos y Computacin de la Universidad Politcnica de Valencia. Marzo 2007. Disponible en http://users.dsic.upv.es/~sabrahao/seminario/ [22] Internet y las nuevas Tecnologas como herramientas para las Pymes exportadoras. Noviembre 2008. Disponible en http://www.infoweek.biz/la/2008/11/internet-y-las-nuevastecnologias-como-herramientas-para-las-pymes-exportadoras/ [23] Google, el motor de bsqueda por excelencia. Agosto 2008. Disponible en http://criticalaweb.w2g.com.ar/google-el-motor-de-busqueda-porexcelencia/

107

[24] GONZALEZ, A. Empresas deben despertar al Quinto Poder. Enero 2009. Disponible en http://blog.elsur.cl/2009/01/09/empresas-deben-despertar-al%E2%80%9Cquinto-poder%E2%80%9D/ [25] http://rubistar.4teachers.org [26] http://www.deinterfaz.com [27] http://www.americainternet.cl [28] http://www.diseowebchile.cl/pymes/ [29] Matriz de valoracin. Julio 2002. Disponible en http://www.eduteka.org/MatrizValoracion.php3

108

You might also like