Dissertationen zum Thema „Informationsvisualiseringar“

I och med införandet av WWW (world wide web) så har det visat sig att den stora samling av data i form av bilder på internet ökar risken för plagiat för den enskilda konstnären. Kryptokonsten som är ett relativt nytt fenomen som med hjälp av blockkedjeteknik utgör en digital konsthandel av så kallade NFT-tokens möjliggör till visso att bekämpa detta. Men blockkedjans innebördan i och med dess relativt omogna stadie kan uppfattas som svår att förstå. Med hjälp av informationsvisualiseringen kan man bryta ner komplex data till en lätthanterlig bit av information. Denna studie har därav fokuserat på att med hjälp av grafisk design se hur man kan utveckla en informationsvisualisering gällande just blockkedjebaserade marknadsplatser av digital konst och huruvida fenomenet kryptokonst går att förstå utifrån en informationsvisualisering. Det studien visar på är att det till viss mån går att se en koppling mellan informationsvisualiseringen och en informants förståelse av fenomenet, men att det krävs utveckling kring vissa områden av informationsvisualiseringen som informationsvägledning.

Detta är en undersökning om navigation i tredimensionella miljöer, eller

mer specifikt, om att navigera i en miljö som presenterar en molekylmodell

av ett nätverk. Arbetet har täckt både konstruktion av modellen och

en undersökning av mänskliga spatiala förmågor, metaforer och mentala

modeller.

Undersökningen är kvalitativ och består av två delar, observation och en

tänka-högt metod. Resultat från undersökningen gav intressanta resultat

angående både gränssnittet och kopplingen mellan försökspersonernas

mentala modeller och den presenterade metaforen.

Som en del av forskningsprojektet Young Operator 2020 så syftar den här studien till att vara ett första steg mot en produkt, som med hjälp av av tekniken augmented reality ska vara en del av framtidens tillverkningsindustri. Studien utgår från kognitionsvetenskap och människa-datorinteraktion för att ha användaren och användarens interaktion med prototypen i fokus. Eftersom olika typer av användare kan behöva olika saker av ett system, kommer den här studien också att utgå från teorier om kompetensnivåer. Ett system som är användbart för exempelvis en novis behöver inte nödvändigtvis vara användbart för en expert. En prototyp har skapats som en del av ett annat projekt och den utgår från det arbetssätt som operatörer på Volvo GTO i Skövde har idag. Prototypen använder sig av augmented reality för att visualisera instruktioner. Det är tänkt att prototypen bland annat ska hjälpa noviser att närma sig expertanvändare. Ett kompetitivt användbarhetstest har gjorts där prototypen jämförts med nuvarande system på Volvo GTO. Resultatet av studien visar att prototypen i dagsläget inte kan anses vara användbar. Flera rekommendationer har dock presenterats som ett bidrag till vidareutveckling av prototypen.
Young Operator 2020

Detta projekt har blivit utfört i samarbete med Senion AB för att ta fram en pappersrapport som presenterar information över bokningsdata för ett kontorsmiljös användning. Projektet har bestått av två övergripande delar. Första delen bestod av att utveckla en metod för att samla och formatera bokningsdata tillhandahållen från en av Senions kunders kontor. Andra delen bestod av att visualisera informationen härledd från den data som blev framtagen från första delen. Den informationsvisualisering som designades testades i användartester för att få djupare insikt i vad som är effektiv presentation av detta projekts bokningsdata. Användartesterna gav insikt i vilka representationer som fungerade bra och hur vissa kan bli korrigerade till det bättre. De kvantitativa mätningarna hade ingen statistisk signifikans så diskussionen av resultatet är huvudsakligen centrerad kring de kvalitativa mätningarna. Baserat på resultat av tänka-högt och semi-strukturerade intervjuer så diskuteras fördelen med några multimodala visualiseringar, stapeldiagram och tilltalande visualiserings estetik. Projektet har också presenterat vikten av att informationsvisualisering gynnas av att vara grundad i kognitionsvetenskapliga principer om perception och uppmärksamhet. Vidare så belyser texten hur användarcentrerad informationsvisualisering kräver starkare empiriska grunder och standardiserade mått för att testa kvalitet och effektivitet.

A new phenomenon on the Internet is the online audience response. Mentimeter is a web-based tool where you can create online polls. The users can then cast a vote and the result is shown in real time. We want to test the information visualization in Mentimeter and we base our hypothesis, that a better graph design is possible, on the work of Edward Tufte and Stephen Few. Edward Tufte is an emeritus at Yale University, where he held courses in statistical evidence and information design and has created theories about how visual information should be designed. Stephen Few is a known information designer and he has based a lot of his theories on the work of Tufte. We compare Tufte and Fews design principles against the Mentimeter tool with user testing. We can see that Tufte and Fews theories still stand strong when it comes to the comparisment with Mentimeter and that a redesign of their graphs could raise the quality and the user experience of the tool. But Mentimeter is also a tool that functions the way it is supposed to.

The purpose of this thesis was to examine how an information visualisation about what happens in the human body of type 1 diabetics for children can look like. Initially, theory about information visualisation, principles of information design, image rethorics and different theories around what makes a good information image was studied. Following, four pre studies were conducted to support the reason for the main study to be conducted, develop criteria for how an information visualisation should and must be, examine in what context children are used to see pictures and to get confirmation on what metaphors and explanations are used to explain diabetes type 1. The results from the pre studies were brought into a design process as foundation for the further work. The design process began with brainstorming, sketching and a valuation of the produced concepts. The two concepts which performed best during the valuation were designed and brought into another valuation fase with the target group of this thesis where one of the design solutions performed better. The conclusion of this thesis is that an information visualisation about what happens in the human body of type 1 diabetics for children can be a joyful children's book, where the pages are designed with help of design principles for information design. The images on the pages should be large enough for the children to understand what is illustrated. 15cm x 15cm has proven to be a reasonable size for the pages.
Syftet med denna studie var att undersöka hur en informationsvisualisering om vad som händer i kroppen vid diabetes typ 1 för barn kan se ut. Inledningsvis studerades teori gällande informationsvisualisering, principer inom informationsdesign, bildretorik och olika teorier kring vad som är en bra informationsbild. Sedan följde fyra stycken förstudier för att underbygga anledningen till varför denna studie skulle genomföras, ta fram kriterier för hur en informationsvisualisering måste vara, undersöka i vilka sammanhang barn brukar se bilder och få bekräftelse på vilka liknelser ochförklaringsmodeller som används för att förklara diabetes typ 1. Resultaten av förstudierna togs med in i en designprocess som underlag för det vidare arbetet. Designprocessen inleddes med brainstorming, skissering och värdering av de framtagna koncepten. De två koncept som presterade bäst under värderingen formgavs och togs vidare in i en värderingsfas med studiens målgrupp, där en designlösning presterade bättre. Slutsatsen av denna studie är att en informationsvisualisering om vad som händer i kroppen vid diabetes typ 1 för barn kan vara en lustfylld barnbok där sidorna är utformade med hjälp av designprinciper för informationsdesign. Bilderna på sidorna bör vara så pass stora att barnen kan förstå vad det är på bilderna. 15cm x 15cm har visat sig vara en bra storlek på sidor.

This thesis examines information visualization, infographics, as a method of advertising. To answer the initial research question of what makes infographics an appropriate method for print advertising, a practical infographic-based advertising campaign has been designed. This, together with three other campaigns, has been the basis for an analysis focused on function, appeal and persuasion. The result tells us that there are benefits to using infographics for an advertising purpose, because the method can act both attention-grabbing and convincing, depending on how it is used and designed.

Problem består ofta av flera variabler som behöver sammanvägas för att vi ska kunna fatta ett beslut om vilket alternativ som är bäst. Detta gör vi var och varannan dag. Med detta arbete görs ett försök att skapa en integrerad webblösning som hämtar information och visualiserar den på ett sätt som förenklar ett beslutsfattande. Till hjälp för detta användes parallella koordinater.

There exists a great need among companies and other organizations to be able to visualize statistics. It’s also increasingly common to ask for web-based solutions for increased flexibility and accessibility for users. This paper describes how large amounts of geovisual data, for a large number of regions, can be visualized in an interactive and well-presented manner. The paper let’s you walk through two application scenarios, developed in a Flash environment, using the GeoViz component library for visualization.

 

The first application has been developed for Statistics Sweden (SCB), to give a solution on how to visualize statistics for Sweden’s zip code regions. The number of zip code regions, a total of 9019, is too high to be able to visualize with today’s computers. This paper gives an example of a solution to this problem, where the regions are being split up according to their respective counties and one county is visualized at a time. The user may freely switch between the different counties, to be able to access statistics for the whole of Sweden.

 

The second application scenario is a prototype for a road weather prediction system, developed at SMHI for The Swedish Road Administration. They have about 750 weather stations placed along the roads of Sweden, continuously monitoring and reporting road- and weather conditions. Using theses data, together with SMHI:s forecasts, the application may give information on were there is an elevated risk for slippery roads, frost, condensation or strong winds at present time, but also up to 24 hours into the future. The user is given an overview over the status of all stations, but also the possibility to study certain stations in more detail. The application facilitate descision making on, for example, where and when to send out road maintainance vehicles, in good time before the road conditions gets to bad.

Det är vanligt att svenska medborgare inte känner till vad som bör göras i en krissituation. Om en krissituation drabbar samhället är det mycket viktigt att information finns snabbt tillgänglig. Allmänheten behöver veta vad som bör göras om man själv eller någon annan befinner sig i en sådan allvarlig situation så att rätta åtgärder kan utföras. Detta arbete kommer att inleda en utvecklingsprocess för att ta fram designprinciper för kartor anpassade för krissituationer. Designprinciperna testas genom en prototyp för presentation. Designprinciperna grundar sig på teori av informationsvisualisering, kriskommunikation och kartografisk design samt lärdomar från fallstudier utav Oroville samt Bodens kommuns utvecklingsarbete för krishantering. Designprinciperna fungerar som hjälpande riktlinjer och ger ett grundande underlag för framtagning av kartor anpassade för kris- och evakueringssituationer. Principerna kan byggas vidare på för att ta hänsyn till fler aspekter och ge förbättrad vägledning för designprocessen.
It’s common among Swedish citizen not to know what to do if they find themselves in an emergency situation. If an emergency would happen upon our society it’s crucial to find information as soon as possible. Citizen need to know the proper actions to keep themselves and others safe, else they might hurt themselves or even others. This report will conduct a development process to create principles fordesigning geographical maps adjusted for emergency situations. The design principles are founded on theory of information visualization, crisis communication, cartographic design and interaction design. In addition with lessons from case studies from the Oroville dam and the municipality of Boden, Sweden, development to improve their crisis preparation. With this foundation a prototype is presented for testing uses and defining conclusions. The design principles developed functions as helping guidelines which gives a foundation for production of maps designed for crisis and evacuation situations. With further development the principles can be improved to consider additional relevant aspects and improve guidelines for the design process.

This report documents the research, implementation and result for a master thesis in Media Technology and Engineering at Linkoping University. The aim of the project was to develop a personalized visualization application of blog statistics to be implemented on a web based community for blog authors. The purpose of the application is to provide the users with a tool to explore statistics connected to their own blog. Based on a literature study in usability and information visualization the application design was developed and implemented. The implementation resulted in a JavaScript based application, BlogVis, that allows the users to compare their own blog statistics with others, as well as compare periods of time in the statistic history of the blog.

As the Internet grows larger and the use of it expands, more people are developing for the web. This rapid development is making it more clear how important it is to think of the intended user. Twingly works with blog tools towards several different customers. Twingly wants to offer their customers the use of a dashboard with visualizations of customer-specific data. It would also be used to attract new customers.

Beslut fattas av såväl privatpersoner som av verksamheter och i dagens samhälle där information produceras i ofantliga mängder i en hastighet som knappt går att mäta så finns det mycket information att ta till sig som stöd när dessa beslut ska fattas. Ett sätt att tackla all denna information eller data är att använda visualisering som stöd när beslut ska fattas, det är vad denna studie undersökt, den har undersökt beslutsfattares sätt att se på beslutsprocesser i en konsultverksamhet samt hur denna process använder sig av visualisering. Studien har besvarat frågeställningen: ”Hur används visualisering av information i affärsmässigt beslutsfattande inom en konsultverksamhet på taktisk nivå?”. För att undersöka saken tillämpades en fallstudie som undersökningsmetod eftersom det var det faktiska användandet som skulle undersökas är det just beslutsfattare som fått besvara detta. Tidigare litteratur tar upp visualisering som positivt men det främsta som undersökts har gjorts i litteraturstudier, vilket denna studie inte kommer att göra. Det upplevs ett gap när det kommer till vad beslutsfattare själva anser samt hur visualisering används praktiskt. Studien har genomförts på en konsultverksamhet och har inriktat sig mot taktiska beslut som en avgränsning. Utav vad som framkommit i studien och med stöttande litteratur så är inställningen till visualisering positiv samtidigt som den faktiskt inte används i stor utsträckning.

Att uppnå situationsmedvetenhet kan helt avgöra ifall en person klarar av att lösa en specifik uppgift eller inte. Dagens ledningssystem har ofta som uppgift att stödja användaren att upp nå situationsmedvetenhet och därmed klara av att lösa sina uppgifter. Detta examensarbete syftar till att undersöka vilka potentiella brister det kan tänkas finnas inom de militära och civila ledningssystemen. Att lista dessa problem är av intresse då det är av stor vikt att kunna se hur dessa system skulle kunna tänkas förbättras. Både utvecklare och användare har intervjuats i syfte att samla in viktiga åsikter. Resultatet blev en lista där de största problemen redovisades samt vilken inverkan de kan tänkas ha på användaren och dennes arbetsuppgifter.

Människor utsätts för mer information än någonsin tidigare. För att underlätta processandet av information är det viktigt att presentera informationen på rätt sätt - anpassat efter användaren. Detta projekt genomfördes i samarbete med Linköpings kommun och det övergripande syftet var att undersöka hur man kan utforma ett gränssnitt för de återkopplingsrapporter som ska nå ut till anställda på företaget. För den första frågeställningen “Vad önskar förvaltningarna för information/data i en återkopplingsrapport?” valdes en kvalitativ ansats och en tematisk analys utfördes utifrån data från nio intervjudeltagare som arbetade på kommunen. Analysen visade att den data förvaltningarna var mest intresserad av handlade om volym, kategorier, vidarekopplingar, service och jämförelser med andra förvaltningar. Resultaten av den tematiska analysen lade även grunden för att besvara resterande två frågeställningar - “Hur bör denna information visualiseras för att den lättast ska kunna förstås och användas?” samt “Hur skulle ett gränssnitt för återkopplingsrapporten till förvaltningarna kunna se ut?”. För att besvara dessa frågeställningar presenterades tidigare forskning om hur rapporter utformas idag och teori kring existerande gestaltlagar samtidigt som det producerades en persona, kontextscenarier, en kravspecifikation samt skisser och en temporär prototyp av dashboard-karaktär.

Studien som beskrivs i rapporten handlar om visualisering av data i prototyper och har genomförts med hjälp av en organisation i Skövde. Den ökande mängd information som skapas, lagras och hanteras har lett till att forskningsområdet informationsvisualisering växt avsevärt. De traditionella designprocesserna leder till problem med användbarheten vilket öppnar upp för frågan om det finns processer från andra områden som stödjer framtagningen av prototyper som visualiserar data på ett mer användbart sätt. För att undersöka problemet har två prototyper utformats, en med hjälp av en innehållsinriktad designprocess och en annan med en användarcentrerad designprocess från det tvärvetenskapliga området User Experience Design. Prototyperna har sedan jämförts med hjälp av en heuristisk utvärdering och en analys av hur arbetet med processerna varit för att urskilja vad det fanns för olika för-och-nackdelar. Jämförelsen av designprocesserna visade att större funktionella användbarhetsproblem kunde undvikas med den användarcentrerade designen. Den innehållsinriktade designprocessen innehöll fler antal problem samt problem som påverkade användbarheten mer negativt.

Uppsatsen undersöker huruvida visualisering kan vara en lämplig metodför att väcka uppmärksamhet och medvetenhet kring samhällsproblemetmental ohälsa. Syftet är att genom litteraturstudier och praktiskundersökning fördjupa kunskaperna inom visualisering av information.Syftet är även att genom kvalitativa fokuserade gruppintervjuer undersökaom visualisering av mental ohälsa har potential att öka förståelsen fördetta fenomen, med teoretisk utgångspunkt i visuell perception ochkognition. Slutsatsen är att visualisering av mental ohälsa kan vara enmycket effektiv metod för ändamålet eftersom att det ger möjlighet attuppmärksamma ett ämne inom vilket ord inte upplevs räcka till för attförklara. Detta tack vare bildens omedelbara kommunikation som genomen visuell och kognitiv process gör det möjligt för mottagaren att få enbild av problemet.
The essay explores whether visualization can be a suitable method toincrease people’s awareness of mental illness. The purpose of this paperis, through literature studies and practical examination, to increase theknowledge of visualization of information. The purpose is also to, withthe help of a focus group, examine whether visualization of mental illnesshas the potential to increase people’s awareness of this phenomenon. Theconclusion is that visualization of mental illness can be a very effectivemethod by providing the opportunity to draw attention to a subject inwhich words are not perceived to be enough to explain. This is thanks tothe instant communication capability of an image through which a visualand cognitive process makes it possible for the viewer to get a picture ofthe problem.

Detta arbete utforskade olika designförslag för utvecklandet av ett drönarflygledningssystem för drönarflygledning i städer med hjälp av ämnesområdena informationsvisualisering, semiotik, och sonifiering. Arbetet skedde iterativt i sprintar och i varje sprint konceptskissades och byggdes prototyper som sedan användartestade de designförslag som hade tagits fram under sprintarna och kunde vägleda designarbetet. De lärdomar som arbetet gav visade att det är viktigt att drönarflygledningssystemet (UTM systemet) använder sig av flera olika informationsvisualiserings- och teckenrepresentationer som stödjer och kompletterar varandra. Kombinationen av olika representationer underlättar för drönarflygledaren att skapa sig en förståelse över drönartrafiksituationen i luftrummet och därigenom skapar bättre kontrollmöjligheter. Sonifieringens ljudikoner bör bestå av simpla men innehållsrika ljudsignaturer som tillåts att kombineras i ett dynamiskt ljudlandskap men inte upplevs irriterande. I och med att utvecklingen av UTM system är i ett tidigt utvecklingsstadium bör de designförslag som presenteras i arbetet ses som inspirations- och diskussionsunderlag och inte som färdiga designlösningar för utvecklingen av ett UTM system. Då utformningen av UTM systemet beror på vilka arbetsuppgifter och vilket ansvar drönarflygledare i framtiden kommer att ha, vilket det fortfarande råder osäkerhet om.

Data is an incredibly resourceful commodity these days, but it has to be analyzed before it becomes really valuable. Visualizations add a layer of abstraction, making the data more presentable and easier to analyze – a much needed tool with the emergence of Big Data. Recent developments and innovations in mobile devices has led to a shift in how we do our work-related and everyday computing, creating challenges for data visualization designers. More research is needed on data visualizations for mobile devices – especially when dealing with large datasets. By developing a prototype and conducting usability tests this study set out to test different interactive charts on a mobile device and find potential problems and give recommendations on how to avoid them. The results showed that overviews, detailed views, and over-cluttering were common problem areas, which coincides with related research. Although the ability to intelligible display large amounts of data differed between the charts, the users of this study were able to accurately finish the tasks asked of them with the help of interactive elements such as zoom, panning and filtering. While some issues were reported, like the sensitivity of the zoom function and panning, the overall results were good and interaction proved to be a vital tool in the user’s ability to accurately read the data.

Detta examensarbete har syftat till att utforma ett informativt budskap om ITP 2 ålderspension. Målet har varit att lyfta fram specifik information om ITP 2 ålderspension för vår uppdragsgivares anställda. Budskapet har visualiserats genom en animerad informationsfilm och ska fungera som ett komplement till redan befintlig information. Baserat på tidigare forskning och resultat från intervjuer som vi genomfört har vi funnit riktlinjer som legat till grund för de designval och beslut vi tagit under processens gång. Resultatet blev en animerad informationsfilm med en avskalad och enkelt utformad design.
This project has aimed to design an informative message regarding ITP 2 retirement pension. The goal has been to highlight specific information regarding ITP 2 retirement pension for the employees of our client. The message has been visualized as an animated information video and will serve as a complement to existing information. Based on previous research and results from our conducted interviews, guidelines have been obtained which have formed the basis for the design choices and decisions we have taken during the process. The outcome of this project is an animated information video with a clean and simple design.

Visualizing information is a large field focussed on using a visual display of information to change or facilitate the user’s thinking. However, creating and interpreting data visualizations is still seen as a task for experts and can even be seen as a daunting task by the general public. Techniques like storytelling with data aim to make visualization more accessible for these users. A fitting application of this approach is to eParticipation, which are processes during which citizens get involved in society and governmental decision making, through a digital medium. In order to enhance the access that all groups have to the progress and results of these participations, an interesting lead is the visualization of the eParticipation processes and results. This would provide participants with insights towards the effect their participation had. Additionally, it would provide decision makers with deeper insight into the opinions and views of the people that will directly be affected by their decisions. This project used the power of information visualization and storytelling with data, to design a concept that achieves this deeper insight into eParticipation results. This report describes the design, usability test and evaluation of a tool that shows the results from an eParticipation in a dashboard, while using a story format to help communicate the key insights. The goal was to accomplish a higher level of accessibility for this type of data for non data analysis experts, i.e., making the visualization easier to understand by everyone.
Att visualisera information är ett stort fält fokuserat på att använda en visuell presentation av information för att ändra eller underlätta för användarens tänkande. Att skapa och tolka datavisualiseringar ses dock fortfarande som en uppgift för experter och kan även ses som en svår uppgift för allmänheten. Tekniker som berättande med data strävar efter att göra visualisering mer tillgänglig för dessa användare. Ett passande tillämpning av denna metod är e-deltagande, som är processer under vilka medborgare engagerar sig i samhället och regeringars beslutsfattande, genom ett digitalt medium. För att öka alla gruppers tillgång till framsteg och resultat av sitt deltagande, är ett intressant spår visualisering av e-deltagande processer och resultat. Detta skulle ge deltagarna insikter om effekterna av sitt deltagande. Dessutom skulle det ge beslutsfattare fördjupad insikt i åsikter och synpunkter från människor som direkt kommer att påverkas av deras beslut. Detta projekt använde kraften i informationsvisualisering och berättande med data för att utforma ett koncept som uppnår denna djupare insikt i resultat av e-deltagande. Denna rapport beskriver design, användartester och utvärdering av ett verktyg som visar resultaten från ett e-deltagande i en instrumentpanel, när en berättelse formad för att kommunicera viktiga insikter används. Målet var att åstadkomma en högre grad av tillgänglighet för denna typ av data för icke-experter, vilket gör visualisering lättare att förstå för alla.

Understanding the structure of a network is an essential part in understanding the behavior of the system it represents, but as the system becomes really large, a visualization of the full network looses its potential to reveal important structural relationships. Then we need ways to simplify and highlight the important structures of the network while the details are filtered out, just like good maps do. We have developed an interactive application that utilizes mathematical methods based on network and information theory to reveal the important patterns hidden in huge amount of interaction data. The application gives the professional as well as the nonprofessional user the ability to load his or hers own file containing the network data, from mobile phone networks and social online networks to transport networks and financial networks and lets you explore the data and generate a customized map which highlights the influential patterns in your data. A demo application is also developed to demonstrate the mathematical and information-theoretical principles behind the map generation.

För att koppla form till funktion är nätverk ett oumbärligt verktyg, men när systemen blir riktigt stora förlorar nätverken sin förmåga att avslöja viktiga strukturella samband. Då behövs det kraftfulla metoder för att förenkla och framhäva de viktiga strukturerna i nätverken samtidigt som detaljerna filtreras bort, precis som bra kartor gör. Vi har utvecklat en interaktiv applikation som utnyttjar matematiska metoder baserat på nätverks- och in- formationsteori för att avslöja viktiga mönster som ligger dolt i myllret av interaktionsdata. Du kan läsa in din egen fil med nätverksdata, från telekommunikationsnätverk och sociala online-nätverk till transportnärverk och finansiella nätverk, och få tillbaka en skräddarsydd karta som låter dig upptäcka de inflytelserika mönstren i nätverket. En demo-applikation är också utvecklad för att demonstrera de matematiska och informationsteoretiska principerna bakom kartgenereringen.

With the development of service digitalization and the increased adoption of web services, modern large-scale software systems often need to support a large volume of concurrent transactions. Therefore, performance testing focused on evaluating the performance of systems under workload has gained greater attention in current software development. Although there are many performance testing tools available for providing assistance in load generation, there is a lack of a systematic evaluation process to provide guidance and parameters for tool selection for a specific domain. Focusing on business operations as the specific domain and the Nasdaq Central Securities Depository (NCSD) system as an example of large-scale software systems, this thesis explores opportunities and challenges of existing open- source performance testing tools as measured by usability and feasibility metrics. The thesis presents an approach to evaluate performance testing tools concerning requirements from the business domain and the system under test. This approach consists of a user study conducted with four quality assurance experts discussing general performance metrics and specific analytical needs. The outcome of the user study provided the assessment metrics for a comparative experimental evaluation of three open-source performance testing tools (JMeter, Locust, and Gatling) with a realistic test scenario. These three tools were evaluated in terms of their affordance and limitations in presenting analytical details of performance metrics, efficiency of load generation, and ability to implement realistic load models. The research shows that the user study with potential tool users provided a clear direction when evaluating the usability of the three tools. Additionally, the realistic test case was sufficient to reveal each tool’s capability to achieve the same scale of performance as the Nasdaq’s in-house testing tool OMEXUS and provide additional value with realistic simulation of user population and user behavior during performance testing with regard to the specified requirements.
Med utvecklingen av tjänste-digitalisering och ökad användning av webbtjänster behöver moderna storskaliga mjukvarusystem ofta stödja en stor mängd samtidiga transaktioner. Prestandatestning med fokus på att utvärdera prestanda för system under arbetsbelastning har därför fått större uppmärksamhet i den aktuella programvaru utvecklingen. Även om det finns många verktyg för prestandatestning tillgängliga för att ge hjälp i belastnings generering, saknas det en systematisk utvärderingsprocess för att ge vägledning och parametrar för verktygsval för en viss domän. Med fokus på affärsverksamhet som den specifika domänen och Nasdaq Central Securities Depository (NCSD) -systemet, som ett exempel på storskaliga mjukvarusystem, utforskar denna avhandling möjligheter och utmaningar med befintliga verktyg för prestandatestning med öppen källkod mätt med användbarhets- och genomförbarhet mått. Avhandlingen presenterar ett tillvägagångssätt för att utvärdera prestandatestverktyg avseende krav från företagsdomänen och det system som testas. Detta tillvägagångssätt består av en användarstudie utförd med fyra kvalitetssäkringsexperter som diskuterar allmänna prestandamått och specifika analytiska behov. Resultatet av användarstudien gav bedömningsmåtten för en jämförande experimentell utvärdering av tre verktyg för prestandatestning med öppen källkod (JMeter, Locust och Gatling) med ett realistiskt testscenario. Dessa tre verktyg utvärderades i termer av deras överkomlighet och begränsningar när det gäller att presentera analytiska detaljer om prestandamått, effektiviteten i lastgenereringen och förmågan att implementera realistiska belastningsmodeller. Forskningen visar att användarstudien med potentiella verktygsanvändare gav en tydlig riktning vid utvärdering av användbarheten av de tre verktygen. Dessutom var det realistiska testfallet tillräckligt för att avslöja varje verktygs förmåga att uppnå samma skala av prestanda som Nasdaqs interna testverktyg OMEXUS och ge ytterligare värde med realistisk simulering av användarpopulation och användarbeteende under prestandatestning med avseende på de angivna kraven.