Kuvatud on postitused sildiga MSSQL. Kuva kõik postitused
Kuvatud on postitused sildiga MSSQL. Kuva kõik postitused

13. nov 2008

MSSQL : Sinu igapäevased help protseduurid...

Nii, ükspäev vaatasin, milliseid süsteemseid protseduure enim kasutan ja tegin nö järjestuse.

1. sp_helptext - nö protseduur, mis võimaldab protseduuride, funktsioonide, trigerite sisu vaadata (sp_helptrigger).
2. sp_monitor - tagastab üldise serveri info ntx palju cpu hõivatud, palju pakette saadetud, mitu ühendust loodud.
3. sp_who2 - näitab, kes serverisse loginud, kus arvutist, millal viimane batch. Enamasti kasutasin seda, et kiiresti näha, kes keda blokeerib.
4. sp_lock - näitab lukustusi, natuke täiustasin väljundit

declare @abimees table (
spid smallint,
dbid smallint,
ObjId int,
IndId smallint,
Type nchar(4),
Resource nchar(16),
Mode nvarchar(8),
Status nvarchar(20))


insert into @abimees
exec sp_lock

select spid,DB_NAME(dbid) as dbname,object_name(ObjId) as object,IndId,
case
when Type='DB' then 'Database'
when Type='FIL' then 'File'
when Type='IDX' then 'Index'
when Type='PG' then 'Page'
when Type='KEY' then 'Key'
when Type='TAB' then 'Table'
when Type='EXT' then 'Extent'
when Type='RID' then 'Row identifier'
end as typestr,
Resource,Mode,Status
from @abimees


5. sp_helpfile - annab ülevaate andmebaasi failidest.
6. sp_depends - protseduur, mis annab infot selle kohta, millised teised andmebaasi objektid sõltuvad etteantud objektist.
7. sp_helpdb - annan infot kõikidest andmebaasidest, nende suurusest, staatustest jne
8. sp_helprotect - annab ülevaate kõikidest objektidele omistatud õigustest; kes tohib exec sooritada, kes select jne Sellele protseduurile soovitan ikka vaadeldava objekti nime ette anda @name=ntxmingitabel. Muidu kuvatakse kõik protseduurid, tabelid jne nende õigustega.
9. sp_helprole - kuvab vaikimisi valitud andmebaasis defineeritud kasutajate rollid.



Seniks ... nägelemiseni...

4. nov 2008

MSSQL : DDL trigger ehk paneme pirukasse muna

Üldiselt tavaolukorras ei ole DDL triggereid eriti vaja, ainus hea rakendus neile on andmebaasis toimunud muudatuste logimiseks. Olen seda vaid kasutanud testimisel , üks lihtne näide.


create trigger ainultadminn
on database
for DDL_TABLE_EVENTS
-- DDL_DATABASE_LEVEL_EVENTS
as
begin
declare @xmldat xml
declare @event nvarchar(128)
declare @sql nvarchar(max)
set @xmldat=EVENTDATA()
set @event=isnull(@xmldat.value('(/EVENT_INSTANCE/EventType)[1]', 'nvarchar(128)'),'')
set @sql=isnull(@xmldat.value('(/EVENT_INSTANCE/TSQLCommand/CommandText)[1]','nvarchar(max)'),'')

if (CURRENT_USER not in ('dbo','sa')) and (@event in ('ALTER_TABLE','DROP_TABLE'))
begin
raiserror('--- Viga: Sa tegeled vale asjaga',16,1)
rollback
end
end;


Sündmuste tüüpide kirjelduse saab siit :
http://msdn.microsoft.com/en-us/library/bb510452.aspx

Ps. DDL triggerid on toetatud alates MSSQL 2005



Soovitan ka tutvuda Logon triggeritega, ala ntx. kasutaja Karu saab siis sisselogida, kui kasutaja Mesitaru on väljas jne

Logon Triggers

1. nov 2008

MSSQL: näita andmebaasi avatud transaktsioone

Täna olen MSSQL 2008 lainel, seetõttu veel näiteid...

Üldiselt Microsoft on ka palju toredaid näiteid kokku pannud, aga enamasti ei leia neid õigel hetkel.

Üks disainiviga, mis võib ilmneda halbadel juhtudel on avatud transaktioon ehk rollbacki - commitit ei järgne. Kaks SQLi:



-- seda kasutaks mina, näitab kõiki avatud transaktsioone
SELECT convert(varchar(5000),s.context_info) as sessioonisonum, s.*
FROM sys.dm_exec_sessions AS s
WHERE EXISTS
(
SELECT *
FROM sys.dm_tran_session_transactions AS t
WHERE t.session_id = s.session_id
)



Microsofti näide oli, seal kuvatakse transaktioone, mis IDLE ehk üldse midagi ei toimu...

SELECT convert(varchar(5000),s.context_info) as sessioonisonum, s.*
FROM sys.dm_exec_sessions AS s
WHERE EXISTS
(
SELECT *
FROM sys.dm_tran_session_transactions AS t
WHERE t.session_id = s.session_id
)


AND NOT EXISTS
(
SELECT *
FROM sys.dm_exec_requests AS r
WHERE r.session_id = s.session_id
)



Nii, teeme nüüd näite, mis võite katsetada testserveril !

declare @vb varbinary(128)
set @vb=cast('adminn, ma näen sind' as varbinary)
set context_info @vb
begin tran


Ja, kui adminn esimest päringut sooritab, võite kindel olla, et Teile helistatakse ;))



Üldiselt, kui last_request_start_time näitab, et transaktsioon avatud rohkem, kui 15 min...oleks arukas see lõpetada.

kill on Sinu sõber



Lõpetuseks veel üks hea SQL Microsofti poolt, vägagi efektiivselt leiab päringud, mis serverit koormavad !!!



SELECT TOP 55 total_worker_time/execution_count AS [Avg CPU Time],
SUBSTRING(st.text, (qs.statement_start_offset/2)+1,
((CASE qs.statement_end_offset
WHEN -1 THEN DATALENGTH(st.text)
ELSE qs.statement_end_offset
END - qs.statement_start_offset)/2) + 1) AS statement_text
FROM sys.dm_exec_query_stats AS qs
CROSS APPLY sys.dm_exec_sql_text(qs.sql_handle) AS st
ORDER BY total_worker_time/execution_count DESC;

MSSQL : Fail varbinary/image kujul, tahaks lugeda tema sisu...

Redaktorites ja enamus utiliitides on blobide lugemine suht vaevaline, tihti lihtsam see blob salvestada. Kui ntx andmebaasis hoitakse tekstifaile, tahaks ju mõnikord pilgu peale heita.


Üks triviaalne sql:


declare @p varbinary(max)
declare @c varchar(max)

select @p=failikeha
from failid
where faili_id=1787449
/*
muutuja on ise varchar max tüüpi, aga ma ei soovi kogu faili "dumpi"
ainult esimesed 8000 märki, kui kõike vaja kirjutage 8000 asemel max
*/

set @c=convert(varchar(8000),@p)


select @c



varchar(max) on kasutusel alates MSSQL 2005 !

17. okt 2008

MSSQL : ja limit ?

Mysql sõbrad teavad, et limit käsk aitab neid alati. Limit 0,5 ... esimene offset teine mitu kirjet peale seda. Kuigi Mssqli pean ühte lihtsamaks ning võimsamaks andmebaasiks on seal ka natuke puudusi, just see sama limit. Tahad teha lehekülgi, kus kirjed kuvatud vahemike kaupa, tüüpiline veebinduse teema.

select top 45 * from kliendid top annaks lihtsalt esimesed 45 klienti vastavalt sorteeringule.

Kuidas ikka saada kirjete vahemikud ilma temptabeleid ja muud keemiat kasutamata.


select b.recnr,b.kliendi_id,b.eesnimi,b.perekonnanimi
from
(select top 1000 row_number() over (order by perekonnanimi asc) recnr,kliendi_id,eesnimi,perekonnanimi
from meiekliendid) as b
where b.recnr between 1 and 50

üldiselt over klauslis peate määrama mille järgi on sorteeritud subselect !

That's It!

23. mai 2008

MSSQL : kui üldse kursoreid kasutad, siis kasuta kiireid

Ütleme nii, et kui vähegi võimalik, võiks kursoritest hoiduda. Reaalsuses pole see võimalik. Siin üks näide kursorist, mis serveris suht kiire.


set nocount on

create table #test1(a varchar(25))
insert into #test1(a)
values('esimene')
insert into #test1(a)
values('viimane')

declare @pintcurs cursor,
@amuutuja varchar(25)


set @pintcurs=cursor fast_forward for
select a
from #test1

open @pintcurs
fetch from @pintcurs
into @amuutuja

while (@@fetch_status=0)
begin
select @amuutuja

fetch from @pintcurs
into @amuutuja
end

close @pintcurs
deallocate @pintcurs

24. apr 2008

MSSQL : Kuidas queryt analüüsida, kui profilerit pole?

Kui pole korralikke graafilisi vahendeid MSSQL jaoks serveril, siis konsooli kaudu saab query execution plani järgnevalt kätte (mysqlis siis vastavalt explain käsk).

SET SHOWPLAN_TEXT ON
GO
SELECT *
FROM articles
WHERE title like '89%'
GO
SET SHOWPLAN_TEXT OFF
GO

26. märts 2008

MYSQL imelikud päringud

Feedreader Connect serverit arendades avastasin (MYSQL) omapärad

Mitu kirjet väljastab esimene SQL ja mitu teine ;)


select title
from articles
where deleted=0
limit 0,5
union all
select title
from articles
where deleted=0
limit 0,2;


select s.title
from (select title
from articles
where deleted=0
limit 0,5) as s
union all
select s.title
from (select title
from articles
where deleted=0
limit 0,2) s;

____________________

s.id unknown column ? aga miks või olen harjunud MSSQL mugavustega. Jah lause rumal, aga süntaks vägagi õige.



select s.title,s.id
from articles s
where (select count(*)
from (select s1.title
from articles s1
where s1.id=s.id) as ptt)>0
limit 0,5;

____________________

Ühel päringul kasutati fulltable scani, sunnime MYSQL indeksit kasutama

select *
FROM articles FORCE INDEX (IDX_Articles_modified)
where modified<'2005-01-01';

____________________

Ajutiste tabelitega on MYSQL tiimil veel tööd teha;
jah dokumentatsioonis ka öeldud, et see päring hetkel ei tööta...aga miks ...


create temporary table if not exists test(a int) engine = memory

insert into test(a)
select a
from test

30. jaan 2008

MSSQL : sunnime serveri kasutama õiget indeksit

Nonii...mõtlesin, et miks hoida infot endale, kuna ma vist 8 aastat MSSQL peal toimetanud, siis igapäevaseid hinte võin meeleldi jagada.

Viimati tekkis probleem ühe päringuga Feedreader Connect juures, mõtlesin, nii index pihta saanud. Päringud venisid, pöördusin vanade sõprade juurde...

DBCC INDEXDEFRAG
DBCC DBREINDEX

Ei mingit tolku ja siis vaatasin execution plani päring rõõmsalt lasi mööda primary indexit...ja mis lahendus...anna indeks ise ette ja kõik BRO:)))

select * from articles WITH (INDEX = delindx) where deleted=0

Ennem oli probleem selles, et andmeid polnud palju server "näris" läbi, seetõttu ei saanudki aru...mis toimub....

Jälle targem...olen mässanud protseduuridega, mis ilma WTH RECOMPILE määranguta töötavad 1 min....peale seda 20 sek...

12. jaan 2008

Arvamusi tarkvara maailmast...ja käekäigust

Nüüd vist võib juba sõna võtta - ametlikult olen programmeerimisega seotud olnud maagilised 13 aastat.

Suuremad muutused, mis tarkvaraga toimunud:

1) programmeerimine on aastatega aina lihtsamaks läinud (keeled;.netC#/Java)
2) tugev avatud lähtekoodi pealetung (kummardus ka Linuxi poole)
3) enam ei müü toodet see, kellel parem kvaliteet vaid suurem HAIP

--------------------------

Nüüd võtame täpsemalt need pidepunktid vaatluse alla

1) Jah .net tõesti hea keel, nüüd kus saad ka Unicodet kasutada ilma trikke tegemata, ennekõike on minu arust kõige kasulikum olnud asp.net osa.
Varem kulutasin suht palju aega veebide visuaalse poolt koostamiseks ja siis koodi kirjutamiseks. Huvitav, miks Ajaxit varem ei kasutatud:)))
Java suhtleliselt lihtne keel oma moodulite ja võimaluste hulgaga, ei pea ise eriti miskit juurde leiutama.

Viimase suurim probleem on tema kohmakus ja nagu alati intepretaator keeltega probleem kiirusega. Mis mind hämmastab, on viimasel ajal nagu rõhu panek uutele kelladele ja viledele, mitte kiirusele.

.net, sama lugu - kiirem, kui Java, aga siiski on aeglasem, kui Delphi/C++ app'd.

Nähtamatu sõda on alanud Java ja .net vahel, saan ka aru MS soovist siduda kliendid ühe kindla platvormiga, pakkudes selles väga "maitsvaid komme".
Linuxi all on .net emulaatoreid, aga jah...uimane teema oli, proovitud.

.Net "sööb" Java turult välja...

Miks ma rõõmus pole, kui need keeled olemas...põhjus väga lihtne. Olles vana kooli programmeerija, kes alustas ASMiga ajasin taga igat bitti, mis mälus paiknes.
Ka rakendasin algoritme, et kasvõi 1 millisekund võita.

Tahan öelda mugavad programmeerimiskeeled rikuvad app'de kiirused.
Nüüd, kus arvutid 2>ghz ning 1gb mälu, ei pööra keegi enam tähelepanu, et kas miskit vaja optimiseerida või palju mälukasutus. Masin närib ju kõik läbi...ja see suhtumine annab meile lõpetuseks uimased arvutid.


Pole nali, olen testinud ka programme ning mulle öeldud, et mul liialt aeglane arvuti ? 1.8ghz / 512mb aeglane ühe app jaoks... "No tule taevas appi", nagu ütles klassik.

"Garbage collector ", pigem programmeerijate vaenlane, kui süsteem tegeleb sinu mäluhaldusega 100% muutub ta lohakaks ja sellest palju näiteid, kuidas inimene C++/Delphi unustab mälu vabastamata.

Tüüpide täpse kirjeldamise nõue teeb küll rõõmu,
samuti objektorienteeritud struktuur.

2) Avatud lähtekood ja üldse vaba tarkvara tulek on tervitatav nähtus.

Nüüd saan rahus koodist lugeda, et mida ta ka teeb, samuti vigu parandada.
Samas on ka halb moment, kui korraga mitu isikut seda koodi mudib,peab ka olema muudatuste kontroll , nö ka quality check, seda tavaliselt ei ole.


Nüüd ka huvitav teooria, avatud tarkvara pealetulek on väljasöönud mitmeid väikefirmasid, kes sarnast tarkvara arendasid, me ei räägi suurtest monopolidest.

Oletame, teete tarkvara mingile firmale, hoitakse kliendi andmeid, koosolekute tähtaegu jne. Nüüd tuleb isik X, kes teeb sama asja, võimalik väikeste nüansidega ning avaldab lähtekoodi. Sisuliselt tõmmati sinu firmale vesi peale, miks peaks klient seda enam sinult ostma, kui ta saab sama asja tasuta...

Jah, see sunnib sind rohkem pingutama uusi lahendusi pakkuma.
Kahjuks lahenduste kopeerimine (kasvõi kaudselt) vägagi "in".

Ellu jäävad firmad, näiteks Eestis, kes omavad ka arvutite müüki või tegevad veel muul alal. Samuti need, kes riigihangetele pidevalt panevad käpa peale, sest riigihangete seadus nii kirjutatud, väikestel pole väiksemat võimalustki osaleda. Näiteks: käibenõue....

Varem oli veebilehed / CMS väga hea raha allikas, tuli igasugu vabavara (avatud tarkvara) peale, enam ei pidanud suurt disain teenust ostma. Samuti see osa kukkus ära. Õnnetud kliendid, kellel koduleht X firma serveris ja peab iga kuu teenustasu maksma ning lähtekoode ei saa.

Ehk ellu jäävad tulevikus ainult suurfirmad, kes seotud mitme valdkonnaga. Või väikefirmad, kes tegelevad väga spetsiifilise valdkonaga ala lennukimootorite juhtploki kontrollerite programmeerimisega.

Kokkuvõte, jah kasulik seetõttu, et tõi kiiremat innovatsiooni arvutimaailma, samas on ka juba ohvreid nõudnud ning nõuab ka tulevikus...
Vaadake ka suurte heitlust, kuidas pakutakse võidu teenuseid, MS vs Google vs Yahoo (kes kahjuks sörgib järgi).


Küsime ka nüüd nii, mitu tarkvara firmat Eestis järgi jääks, kui kaoksid ära riigitellimused...kus liiguvad suured rahad.

3) HAIP, selles lühidalt. Kui varem kiideti tarkvara ja tema omadusi, siis turule on tekkinud niipalju tooteid, kus kiidetakse ennast taevani. Erinevatesse portaalidesse sisestatakse oma reklaami jne jne . Juhul, kui tarkvara kohta keegi halvasti ütleb, siis on massipsühhoos peal, see parim toode, mida sa räägid. Mitte keegi ei lähe reaalselt proovima toodet, mis sellest isegi 2x parem, sest pole piisavalt haipi.
Haip on minu arust reklaami erivorm...

Tihti ma öelnud, mind ei huvita mida toode võiks teha, tahan näha, mida toode ka reaalselt suudab ja kui ei suuda, siis money back...tihti seda võimalust ei pakuta, huvitav miks;)



Ok levi lõpp tänaseks...pea php,javat,delphit,mssql proc. koodi nii täis, et valutab...;) Korraga mitut keelt kasutada päris sürr, sest kui pea väsib, kirjutan java's delphi koodi, php's mssqli ja mssqlis javat :))))



Ennustan seda, et programmeerija kui selline amet kaob ära 10 aasta pärast...4'nda põlvkonna programmeerimiskeelte tõttu....

2. dets 2007

Nonii, olen portimise maailmameister...

Ehk avastasin, et olen teinud Feedreader backendile toetuse nii Firebird peale, MSSQL ja nüüd ka MYSQL... Kõige omapärasem on see, et Oracle peale pole veel asja portinud; põhjus suht lihtne, puuduvad käsud, top,limit või first. Rownumber ja subselectid ei sobi, samuti Autonumbrite loomine (sequences). Ju ta vist nii olegi, et suurtel omad puudused.....
Tahaks veel postgre toetuse ka anda. Aga krm ADO + ODBC draiver ja UTF8 = pain in .... piip, toimub märkide teisendamine valeks, isegi kui set names utf8 ja muud parameetrid seadistatud.
Aga, kui kuidagi ei saa, siis kuidagi ikka alati saab;))

24. okt 2007

Väike tehtud tööde referens

Ükspäev tuttav küsis, et kas ma mäletan kõik projekte ja programme,
mida olen teinud...ja natuke aega mõtlesin, pidin tunnistama, et ei mäletagi.

Lõpuks suvatsesin kirja panna kõik...mööda arhiivide katalooge liikudes

---------------------------------------------------------------



www.feedreader.com
- Kogu feedreaderi backend. Parimad palad kirjutan lahti.
Täiustasin idhttp, panin ntml ja digesti authoriseerimise tööle.
Ehitasin keeruka multithreaded järjekorra süsteemi, mille kaudu töid tehakse.
Kirjutasin ümber Firebird draiveri, tekitasin universaalse wrapperi, mille kaudu saab FR backendist olla, Firebird,MySql või MSSQL. Samuti olemas andmebaasi objektide pooling süsteem ja ühenduste taastamine. Wrapperid klassid meilide (smtp) ja failide (ftp) saatmiseks. Ma ei kasuta seal ei MAPI't ega Wininetit, mis iseenest oleks tore, aga liialt MS sõltuvus tekiks. Ftp'sse lisasin võimaluse, et http proxy kaudu ka töötaks asi.

Siis "võimsamad tooted" - serverid. Seal oli puhas mäng serviste tasemel, servistes lisasin failide allalaadimise võimaluse (async queue). Ka automaatse meilide saatmise süsteemi. Kõige huvitavam oli IMAP serveri kirjutamine sinna, kuna Indy Imap oli suht algeline, tuli asi suht 0 kirjutada. IMAP + andmebaas andis ikka laheda elamuse.

Kuna feedreader kasutab smartfiltreid, siis loogika kirjutamine, mis oskaks vastavalt kliendi koostatud kriteeriumitele optimaalseid päringuid teha oli ka paras pähkel.

Kõige "karmim" oli veebi/feedide indekseerimine, omamoodi pisikese Google tegemine.
stemmer, skip words, ligatures, weights jne...oleks märksõnad seal. Päris keeruline oli, selle seletamine võtaks aega, aga sain kõvasti targemaks.

Utiliidid, sisuliselt FR on multilanguage app. siis tegin programmi, mis käib elemendid läbi, koostab vajalikud failid tõlgete muutmiseks online modes.
Palju kavalaid trikke, ei mingit teksti parsimist;)


---------------------------------------------------------------
(3 tk)
IE objektidel baseeruvad rakendused, ka BHO; kahjuks konfidentsiaalsuse tõttu ei saa ma nende tööpõhimõtteid avalikustada.


---------------------------------------------------------------

* Töötajate õiguste süsteem andmebaasis (ala õiguste maatriksid)

* EE's näidufailide sisselugemise moodul - vist 8 erinevat formaati minimaalselt + service, mis ka automaatselt neid töötleb. Samas programmis oli ka 2 tüüpi arvestuste massgenereerimist.

* Automaatne kliendi tarkvara uuendamise moodul, täitsa huvitav oli (ala nagu
windows update). (FTP/lokaalsete failide baasil)

* Üks programm, kus sai võlgaste päringuid teha , see oli vaid üks leht, tegemist oli isegi päringumootoriga pigem, kus klient sai teha väga keerukaid päringuid vaid mõne klikiga. Aruandeid seal vähemalt 12 tükki. Kuna EE'le tehtud tarkvara, siis ei saa programmi omadustest täpselt rääkida.

* Ojaaa, siis tuli EE e-arve..paljud e'sid kas pole...see oli lahe projekt...2000 aastal loodud, siiani töötab nagu vana mees (nvarchar ODBC lahendus üleküla kärbes seal, pooling, heavy load cached jne jne). XSL süntaks vist Eesti pikim:))))

* Järgmiseks, Microsoft peaks trummipõrina tegema, vana hea ISAPI lahendus, mille kaudu EE töötajad saavad näite sisestada. Asi tehtud 1999 juba, siiani töötab, tema loogika täielikult Asp.neti eelase oma, väikesed Ajax poiss ideed ka seal sees.
Dünaamilist javascripti seal ka jagus...

* siis TAPI, tore asi, tegin vahekihi, oli üks karbike, kes istus com pordis ja küsis telefonijaamalt numbreid ja siis dll tegi teistele programmidele kogu andmevoo söödavaks. Sel hetkel, kui tegin oli Tapi alles lapsekingades, dokumentatsiooni ikka otsisin nagu kullapuru silmas.

* siis soojuse arvestuste programm, uh seal oli igasugust nänni sees, arvestusi, aruandeid jne jne jne. See oli üks esimesi tõsiseid programm, mis kasutas ADO't, BDE hakkas vanaks jääma vaimult. Seal programmis ka eksperimenteerisin veelgi. Kliendi UI's kasutasin IE activeX objekti, et programm näeks sisuliselt välja nagu veebileht. Kaudne taotlus oli see,et vajadusel saaks kiiresti minna veebi peale üle.

* oli ka üks programm, millega andministraatorid täitsid andmetabeleid. Palju dbgride ei miskit innovatiivset.

* mis veel, küsitluste moodul tore asi 3 osa, service, UI klient, (dün)veebileht.
Tegemist oli jublakaga, millega sai inimestele pakkumisi saata. Samuti teavitab see jublakas kliente elektrikatkestustest. Saadab emaile,sms ja ka prinditud kujul kirju. Seal ka küsitluse võimalus, töötaja koostab küsimused, siis süsteem saadab automaatselt klientidele ekirjad, kus link sees lehele, kus küsimustele saab vastata. Päris töömahukas süsteem oli.

* SQL protseduure erinevate backendide jaoks >150 kindlasti.