Automatizované funkční testování Siebelu 8

V poslední době se stává v českých končinách populárním Siebel, jakožto CRM nástroj. Je to poměrně rozsáhlá webová aplikace, která kombinuje více technologií (ActiveX, Java applety, vlastní webový protokol), a proto se velmi špatně testuje nástroji pro automatizované testy - pokud ovšem nástroj nemá přímo uvedenou podporu pro Siebel.

Siebelový webklient může "fungovat" ve 2 režimech:

1) "Standard-interactivity" - jedná se o klasickou "nenáročnou" internetovou aplikaci složenou ze standardních webových ovládacích prvků, takže se dá dobře automatizovat v jakémkoliv nástroji podporujícím web technologie (stránka je složená z klasického HTML kódu + javascriptů). Poznávací znamení = běží i ve Firefoxu, od verze 8 se ale používá sporadicky.

2) "High-interactivity" - tohle je oříšek, kterého se bude týkat další text.


Jak funguje Siebel klient v High-interactivity módu

Složení webstránky


Pokud máte zobrazenou hlavní stránku (například zobrazení "Accounts") a zkoumáte HTML kód v prohlížeči, dojdete k následujícím závěrům:

1. stránka obsahuje ActiveX komponenty, případně Java applety (např. panel pro callcentrum), které mají navíc nedokumentované (a neintuitivní) interfacy, takže je zautomatizujete jen těžko.

2. jednotlivé screeny jsou v prohlížeči přednahrané; aktuálně zobrazený screen poznáte podle toho, že u příslušného framu je Height > 0

3. pokud změníte například text v editboxu, tak se na Siebel Server posílá požadavek "změň hodnotu v editboxu na hodnotu xxx", Siebel Server ji změní v příslušné business komponentě a zpátky vrátí "změť znaků" ve svém vlastním protokolu, který je zpracován buď javascriptem, nebo kódem volajícího ActiveX objektu. Na základě tohoto kódu se updatne hodnota na HTML stránce, případně se skriptem vyžádá jiná stránka.

Jak vidíte, automatizace "konvenčními" nástroji pro automatizované testování webových aplikací není snadná.

Proto je od verze Siebelu 7.7 k dispozici tzv. Siebel Test Automation Framework (Siebel STA), který umožňuje testovat Siebel z příslušných automatizačních nástrojů, které tento framework podporují. Framework prakticky funguje tak, že se do testovacího počítače stáhne přes prohlížeč "testovací COM objekt" a tyto nástroje volají metody tohoto objektu, čímž simulují akce v Siebelu.

Co tedy budete potřebovat?

1) licenci na Siebel Test Automation Framework
- ač se to nezdá, tato licence se prodává k Siebelu samostatně a musíte si ji dokoupit od Oracle (zadává se jako licenční klíč do Siebel Administration - Licenses, podobně jako třeba licence na Siebel Tools). Pokud ji nebudete mít, testovací nástroje "podporující Siebel" se nechytnou.

2) nakonfigurován Siebel, aby používal tento framework - v konfiguraci Siebel serveru nastavte EnableAutomation = TRUE a AllowAnonUsers = TRUE


3) Pro přihlášení do Siebelu přidejte za URL parametr SweCmd=AutoOn, například http://SiebelServer/ecommunications_enu/start.swe?SWECmd=AutoOn

Některé nástroje přidají tento parametr za URL automaticky - například QuickTest Pro, pokud nahráváte test s aktivovaným pluginem pro Siebel.

4) Kontrola konfiguracie prohlížeče - pokud jste vše udělali správně, po přihlášení do Siebelu bude systém chtít stáhnout do prohlížeče ActiveX knihovnu pro automatizaci (povolte to) a následně se mezi procesy v operačním systému objeví "SiebelAx_Test_A"

5) Můžete začít automatizovat testy ve zvoleném nástroji - pozor, k některým nástrojům si musíte přikoupit "plugin" pro automatizaci Siebelu, případně jej v nástroji "aktivovat". 

Mezi nástroje, které můžete použít patří například QuickTest Pro, IBM Rational Functional Tester, Borland SilkTest nebo Oracle Application Test Suite (součást Oracle Enterprise Manageru). TestComplete si bohužel se Siebelem neporadí.

Nástroje nepodporující testování Siebelu - workaroundy

Pokud máte nástroj, který nemá uvedenou podporu Siebelu, můžete zkusit tyto přístupy.

1) klasická detekce HTML elementů a ActiveX objektů (třeba přes identifikátory s_?_?_? to jde docela dobře - první hodnota za s_ udává číslo appletu na stránce a někdy se může měnit, když se přehazuje pořadí načtení appletů; ostatní konstanty jsou pevné). Pozor - labely (elementy zobrazující pouze neinteraktivní text) někdy identifikátor nemají, takže je budete muset někdy na stránce hledat způsobem "najdi na webstránce text xxx".

Pokud se necháte zlákat třeba vepsáním hodnoty do editboxu (element.Text = hodnota) a odešlete formulář do Siebelu, Siebel se tváří jako kdyby nedostal v elementu žádnou hodnotu, i když v prohlížeči je tato zobrazena. 
Řešení - po nastavení hodnoty elementu musíte na daný element navíc "kliknout", jen tak to zafunguje (při programovém nastavení obsahu ovládacího prvku se totiž do Siebelu neposílá automaticky "update", když element ztratí fokus - Siebel si vždy synchronizuje to, co je zobrazeno v browseru s business komponentou/objektem na serveru).

2) funkce v javascriptu, které si Siebel nahrává do hidden frame-u webstránky (získání appletu, nastavení hodnoty v ovládacím prvku...) - seznam funkcí hledejte buď zjištěním dostupných metod ActiveX "xxxScript" objektu v nějakém nástroji, nebo v Siebel Object Interfaces Reference (záleží jestli přistupujete k javascript objektu přímo nebo přes shadow - například přes Script.App() nebo Script.App().shadow).

3) metody příslušných ActiveX objektů na stránce (bohužel u většiny ovládacích prvků chybí vhodné metody - například výběr 3.položky ze seznamu v comboboxu neprovedete)

4) Siebelový interface pro portály umožňuje použití XML ke komunikaci se Siebelem - zobrazený obsah se vám vrátí jako XML dokument místo HTML, navíc můžete do Siebelu posílat různé příkazy například pro zápis záznamů. Je to vhodný způsob pro zobrazování/zápis Siebelových dat - bohužel ním není možné spustit třeba task v Task UI , což je u Siebelu 8 prakticky showstopper (starší verze Task UI nemají..). 

S čím jsem si v TestComplete 7 neporadil, jsou komponenty:
1) CSSCoUINavCtrl ("záložky" na přepínání zobrazení; nedá se detekovat "vnitřek" ActiveX - tedy jednotlivé záložky)
2) SSJannaList (seznamy-tabulky, které mohou obsahovat jiné komponenty, například comboboxy - opět není možné přistoupit k vnitřku) 
3) picklisty SSJGenCtrl (nedetekovatelné "minitlačítko" vedle editboxu, takže nelze zobrazit následné "vyskakovací okno"). 
Pokud jste podobný problém řešili a úspěšně jste ho vyřešili, uvítám tipy :-)
 
Poučení nakonec - pokud nemáte v nástroji specifickou podporu Siebelu, tak se radši o automatizaci ani nepokoušejte, ušetříte si hodně času a  nervů.


UPDATE: Pokud k testování Siebelu 8 používáte komerční nástroje využívající testovací framework Siebelu od Oracle, tak stejně budete mít problémy - konkrétně na Siebelu verze 8.0.0.7 jsem zkoušel použít IBM Rational Fuctional Tester, QuickTest Pro 11 a Oracle Application Testing Suite a bohužel, i když tyto nástroje podporují nové Siebel 8 features jako je Task UI, nepodporují eConfigurator (konfigurátor produktů).
Já jsem si vylámal zuby konkrétně na výběru produktu z produktového katalogu a konfiguraci existujícího produktu na zákazníkovi.

Důvodem je, že aktuální testovací framework od Oracle (který tyto nástroje plně využívají) nepodporuje objekt konfigurátora - ve výsledku tak nástroj sice detekuje všechny typy ovládacích prvků Siebelu na stránce, ale kromě eConfiguratora. Ten vám rozezná jako "klasickou webovou aplikaci" - změť HTML tagů, které jsou obtížně detekovatelné (jelikož jsou dynamicky generované, nedá se ničeho spolehlivě "chytit" - pokud znáte způsob, jak to obejít, podělte se o něj).

Pokud chcete tudíž automatizovat Siebel 8, tak momentálně jediná schůdná cesta je přes HTTP protokol a korelaci parametrů (tak jak se dělají zátěžové testy...) - tam ale nemáte možnost dávat kontrolní body (zobrazování javascriptových hlášek atd.), takže na funkční automatizované testy Siebelu 8 zatím spíš zapomeňte.