Ar geriau testuoti tikrame įrenginyje ar simuliatoriuje?

Abu variantai turi savo pranašumus ir trūkumus, ir pasirinkimas priklauso nuo testavimo tikslų ir turimų išteklių.

Tikrame įrenginyje geriausia atlikti:

• Veikimo našumo testus (įkėlimo greitį, sąsajos reagavimą).
• Darbo su aparatine įranga testus (kamera, GPS, Bluetooth, jutikliai).
• Sąveikos su kitomis programėlėmis ir pranešimais testus.
• Elgsenos testus realiose tinklo sąlygose (dažnas Wi-Fi ir mobiliųjų duomenų perjungimas, silpnas signalas).
• Vartotojo patirties ir patogumo naudoti testus realiomis sąlygomis.
• Regresijos testus svarbiausiuose įrenginiuose, siekiant įsitikinti suderinamumu su populiariausiais modeliais.

Simuliatoriuje/emuliatoriuje geriausia atlikti:

• Greitus iteracinius testus kūrimo metu (sutrumpina "kodas-test" ciklą).
• Testus skirtingų ekranų dydžių ir raiškų.
• Pagrindinės funkcionalumo ir logikos testus.
• Automatinius testus (dažnai lengviau konfigūruoti emuliatoriuose).
• Testus OS versijose, kurioms nėra fizinių įrenginių.
• Kodo derinimą (platesnės derinimo galimybės).

Santrauka:

Kriterijus	Tikras įrenginys	Simuliatorius/Emuliatorius
Imituojamos tikslumo lygis	Aukštas (tikroji aparatinė įranga)	Vidutinis (aparatinė emuliacija gali skirtis)
Veikimo našumas	Atstovaujantis (reprezentatyvus)	Gali skirtis nuo tikrojo
Aparatinė parama	Pilnas palaikymas	Imituojama, dažnai nevisiška
Tinklo sąlygos	Tikros	Imituojamos, dažnai idealios
Derinimo patogumas	Iš dalies ribotas (gali reikėti specialių papildymų)	Aukštas (integruotas su IDE)
Testų greitis	Lėčiau dėl surinkimo, įdiegimo ir pan.	Greičiau, ypač bazinių testų atveju
Kaina	Reikalauja įsigyti ir prižiūrėti įrenginius	Paprastai nemokama arba įtraukta į IDE
OS versijų prieinamumas	Ribotas, priklausomai nuo įrenginių	Lengvai prieinama daugybė versijų

Idealus požiūris — derinti testavimą emuliatoriuose/simuliatoriuose greitiems iteracijoms ir derinimui su testavimu tikruose įrenginiuose, siekiant patikrinti našumą, aparatūros suderinamumą ir naudotojo patirtį.