Statistik über die rel. Häufigkeit von Mono/Bi/Trigrammen

statistik/Leipzig/README.txt

@@ -0,0 +1,22 @@
+Diese Dateien basieren auf der von der Uni Leipzig erstellten Liste der 10000
+häufigsten Wörter (bzw. Wortformen) der deutschen Sprache¹.
+Groß- und Kleinschreibung sowie Sonderzeichen (Bindestriche, Leerzeichen,
+Apostrophe, Buchstaben mit Akzenten, Zahlen, …) wurden ignoriert.
+Gemäß des Zipfschen Gesetzes² wurden die Häufigkeiten der Wörter annähernd
+rekonstruiert (a=0,83).
+
+Anschließend wurden die Häufigkeiten des Auftreten einzelner Buchstaben sowie
+Bi- und Trigramme mit den Zipf-Wahrscheinlichkeiten gewichtet, aufsummiert,
+sortiert und auf 100% renormiert.
+
+Somit verstehen sich die Zeilen in allen Dateien als relative Häufigkeit und Name
+des Mono/Bi/Trigramms.
+
+
+¹ http://wortschatz.uni-leipzig.de/html/wliste.html
+  Die Uni Leipzig weist jedoch selbst darauf hin, dass die Reihenfolge von der
+  Auswahl der Quelle abhängt
+² http://de.wikipedia.org/wiki/Zipfsches_Gesetz
+  Dabei treten Fehler sowohl bei den häufigsten Wörtern auf, deren berechnete
+  Häufigkeit zu hoch liegt, als auch bei den seltenen Wörtern, da bereits die
+  häufigsten 10000 Wörter auf 100% gesetzt werden.

statistik/Leipzig/häufigsteBigramme10000de.txt

@@ -0,0 +1,607 @@
+.04703305278479975786 en
+.04613736969188666450 er
+.02892163979683170408 de
+.02891071350565818516 ch
+.02263800725294676935 ei
+.02256985404256709896 te
+.01944144091322538897 in
+.01906085062482859170 ie
+.01846555802070439798 ge
+.01424827799538490963 un
+.01413357037137130169 st
+.01411438958934484532 be
+.01400731150581963675 nd
+.01229243229247876870 an
+.01220038158744303738 he
+.01198611609880036933 re
+.01190030162176290330 ne
+.01159319527616997111 es
+.01053053312465937213 ic
+.00985191771596990491 ng
+.00985095302956477436 it
+.00984053096155205812 sc
+.00979194523169699047 se
+.00957541192604693351 di
+.00888854812405202609 le
+.00861494551967516635 au
+.00799301114110983232 li
+.00786331631774975332 is
+.00754231640964024219 el
+.00725342568990764409 nt
+.00721533557051413925 on
+.00716282381611443971 al
+.00642810664933952863 we
+.00618852567182730955 ar
+.00614349363020888683 ll
+.00604168944736541224 da
+.00603945286770661844 me
+.00599562434036715684 ht
+.00596817478469635093 rt
+.00590883250071837054 si
+.00567212472150422949 ti
+.00557819165606128734 et
+.00555543107525421852 or
+.00554145495195342618 hr
+.00543184122148371205 ha
+.00538155451806060939 zu
+.00535992802251593381 ra
+.00506956781596793794 ve
+.00503587399391011508 ig
+.00496116219433376238 as
+.00496103426429932278 ss
+.00494685674283220223 vo
+.00493332762383769067 ri
+.00476684280798398291 us
+.00475168506002205213 at
+.00470359385858746039 em
+.00465689201504535304 mi
+.00452478237179530910 wi
+.00445730843573127428 nn
+.00442372030658083336 eh
+.00438832236579087950 ni
+.00426135557661075771 ur
+.00410876415236847479 lt
+.00403483139568622080 rd
+.00403332191974087886 la
+.00401139243725750506 ta
+.00397773760483260750 ma
+.00392356065605338324 eg
+.00390261384050940442 ns
+.00384996552263931819 rs
+.00374607800433390305 ze
+.00367986888430961128 na
+.00355037525205120545 so
+.00334950952714603600 ol
+.00331947157169343774 ag
+.00326161779971308533 il
+.00322483690462441061 eu
+.00311562482582841462 tr
+.00310541727241661194 uf
+.00309537107415626005 ut
+.00309289407068602281 ab
+.00306925247165976591 ru
+.00305747608765953495 am
+.00303129997756981176 ts
+.00302846676498732246 fe
+.00297186977805972136 ro
+.00294478026812757021 wa
+.00292810710321806486 ac
+.00286359115664182943 eb
+.00282788808173891035 tz
+.00280337404411554918 ah
+.00279428615416699832 rn
+.00278746677915127610 ke
+.00275719989229136160 pr
+.00274914748688784967 hl
+.00271810797705809417 um
+.00266299868905233175 tt
+.00260937139975991134 im
+.00257524804627647027 ed
+.00255609044758548930 ür
+.00249537396887769675 fü
+.00246283165607510867 sa
+.00245478314476930230 ft
+.00239560378339900213 sp
+.00237095160502735167 hi
+.00234541342950356589 mm
+.00225015204991819850 gt
+.00223324024397215795 ko
+.00219627925933530498 io
+.00210467857793154505 kt
+.00210109320305234374 ir
+.00210011983253321229 ka
+.00209757983901714787 hn
+.00209045624206568563 rk
+.00208089205356483106 fr
+.00205514405108508907 gr
+.00204395107041606526 rg
+.00195482713029578049 uc
+.00195023314813679822 ls
+.00193813783872551241 wo
+.00190563533785643288 fa
+.00190147656088758175 om
+.00188573136701929230 ga
+.00185911301629730665 tu
+.00183510371694609884 nz
+.00171053398884111219 rb
+.00169607644594011090 nu
+.00168897769483949151 oc
+.00168132067342343469 ba
+.00167995425003144916 bi
+.00167627586809897846 rl
+.00160543017403805146 ih
+.00156721697582888137 ck
+.00156358526762794304 ec
+.00152043666088167011 üb
+.00151684229403792583 än
+.00151625384811706752 zi
+.00149107405239501938 tl
+.00148483052981779579 du
+.00147721651267046655 ef
+.00146850034129879209 af
+.00146825797191428848 nk
+.00145180785670932603 gi
+.00144953608117140445 ew
+.00143892046307819179 ue
+.00141559895081985757 rü
+.00141524878321863472 ja
+.00140948496052776805 fo
+.00138945808557664388 lu
+.00138106040230924610 no
+.00137443586848834368 ff
+.00136791505567209468 gl
+.00135218443405541692 rh
+.00134995476239934567 to
+.00134341510743848726 pa
+.00132837168085942128 os
+.00132518838195577356 ün
+.00132417352554233764 je
+.00130030881057140002 rf
+.00128335414155905630 kl
+.00127575613207967519 ho
+.00126739634917548475 lä
+.00126418322861417643 br
+.00122888948214116014 id
+.00118529675619384608 nf
+.00118474998386457693 zw
+.00118061685543672259 ße
+.00117617195955228679 ät
+.00117256809869866195 hm
+.00116638982576581263 rz
+.00115919637144737261 do
+.00115223560793116203 hä
+.00114701989481305081 ek
+.00114490295709760130 bu
+.00112586474841406348 vi
+.00112151167383811877 rm
+.00112072907263957796 zt
+.00111939560717299945 dr
+.00111641288508670666 oh
+.00110784962513901268 ik
+.00107102581245790166 bl
+.00106355913084954244 fi
+.00104058952091641960 ku
+.00103993766561292252 mu
+.00103268523005586165 tä
+.00100731541561924782 po
+.00100695625176002194 rä
+.00100648635874523320 üh
+.00100296361872184303 ad
+.00099895551947292271 kr
+.00099580922932075123 ld
+.00097859847061124532 pe
+.00097416378272598475 lo
+.00096273753084557006 ot
+.00095928486855912457 tw
+.00093429854502022183 är
+.00091835555841461055 ob
+.00091613238679214938 gu
+.00091090436794747464 äh
+.00090616846671659109 ug
+.00090566196550391001 of
+.00090175908399809863 hs
+.00088738506326459497 mo
+.00087978533098985531 rc
+.00086174654918815217 su
+.00085592291754330501 gs
+.00084955899670449483 pi
+.00083250576527999761 rw
+.00081177714646013181 mt
+.00080133249769490368 hu
+.00080035751119690024 od
+.00079368119875882857 lb
+.00077019093939655747 ön
+.00076581603069199081 wu
+.00076209093150022063 ib
+.00073378815283440452 bt
+.00073221046994962220 hö
+.00072375963788936914 üc
+.00072185370198110771 kö
+.00070559355981199448 th
+.00070224941236375645 rr
+.00069858318058824174 iv
+.00069092787257352584 ak
+.00066526283582371840 wä
+.00066048133631295941 ia
+.00065555120772567068 op
+.00065436563797973982 ul
+.00064762006354163556 pl
+.00064539478348468565 bs
+.00064536443913580436 ör
+.00062958792699997135 lg
+.00062257886304652639 og
+.00062057871630312335 mü
+.00061035852775502330 hw
+.00060345228683571529 fl
+.00059846997482721253 ez
+.00057166200692143838 pf
+.00056848347906728477 sg
+.00056837575856863291 bo
+.00054561981327030694 oz
+.00054294039660737546 äc
+.00053636375629751695 sl
+.00053633908825170059 ki
+.00053228450745428633 fu
+.00053121784134185755 mp
+.00051866786048288137 ea
+.00050710150503489494 if
+.00050538640065740597 äs
+.00050379712095111855 dt
+.00050280727130937016 ep
+.00050101964091650488 äu
+.00049353270493946428 ub
+.00048944176722091109 ju
+.00048833297427088030 üs
+.00048511493364199547 eß
+.00047348235230776610 tg
+.00047078608251069779 lf
+.00046902005649578509 ap
+.00046829468109939439 äl
+.00046246526514748688 oß
+.00046232742144598438 nl
+.00045779280837973699 dl
+.00045769614483731205 tü
+.00045245480466413895 nb
+.00045231928698888204 pt
+.00045053924092761726 mb
+.00044216507513290908 mö
+.00043991996744884651 kü
+.00043730919987122503 nh
+.00043628223856912898 ai
+.00043615421637612583 nc
+.00042473332545763432 iz
+.00042435043739894200 sh
+.00041242569972204523 aa
+.00040887363441738179 ud
+.00040798259045721507 ln
+.00040606244686272549 uß
+.00040317856309647042 nä
+.00039953289803773389 pu
+.00039241952411731165 ms
+.00038872718838335026 uh
+.00038633108687853537 up
+.00038383608388099572 rö
+.00037244378405482008 pp
+.00036790414103778482 wü
+.00036717455335225684 za
+.00036389523630254175 ös
+.00036258916196980196 ee
+.00035752737480015691 ög
+.00034549366700898668 äf
+.00034526079276576585 bü
+.00034469470371066289 nm
+.00034444908537520317 ds
+.00034386992892076736 sw
+.00032426733247508953 ex
+.00032012018970484115 sr
+.00031856270436019217 öf
+.00031647561088981632 pä
+.00031475612257579744 nw
+.00031209857261846463 fg
+.00030501294134440910 mä
+.00030435407949453520 ua
+.00030432890519491543 lc
+.00030355678733025708 fä
+.00029890821331450770 öh
+.00029763321301715515 äg
+.00028766742962208709 ow
+.00028660084558417630 ßt
+.00027837777246044522 va
+.00027759522943366390 ok
+.00027735251548048868 sä
+.00027562522456290609 iß
+.00027452183820414837 aß
+.00027192200403841412 gn
+.00027123769601199392 bg
+.00026854601836752731 uk
+.00026845647639807140 sk
+.00026554182029618748 rp
+.00026330454234807814 zl
+.00026267489529300950 ks
+.00025704656147515780 sm
+.00025027561033899814 sb
+.00024259490381903948 lö
+.00024044161000583469 ev
+.00023712599719445523 dn
+.00023579482889679812 az
+.00023320645234127161 lm
+.00023145336615453868 öl
+.00022862602430352920 üg
+.00022616265224011794 öß
+.00022320625552497923 fn
+.00022242502671703832 tn
+.00022141273576202922 dm
+.00021347253817039277 lk
+.00021301567777881927 tm
+.00020291964968852467 eo
+.00019824008119138830 ül
+.00019636441947476956 qu
+.00019520787775705273 nü
+.00019438828673398373 ph
+.00019430119390763980 ml
+.00019070767986309359 gk
+.00018781205868405496 sz
+.00018756177399181694 go
+.00018462080345321767 äm
+.00018418255205041480 dü
+.00018403496207444791 zo
+.00018360111941444356 äd
+.00018333461753477384 sy
+.00018306191760411714 üt
+.00017964659159626934 lü
+.00017909791203521795 ys
+.00017235269007270550 jo
+.00017192037856639561 ov
+.00017107564582654354 av
+.00017046367917371071 hk
+.00016930148240974730 ye
+.00016790051817198307 öt
+.00016291652394032219 ce
+.00016270272463523664 rv
+.00016101100466942981 zä
+.00015968942929516808 iu
+.00015924710902866857 pd
+.00015768370514867430 td
+.00015543235605746492 nr
+.00015487640775429248 tf
+.00015413197578636228 tö
+.00015336955033627922 nv
+.00015090625082796495 ay
+.00015066504278839199 ßl
+.00014922189480824949 dw
+.00014788274688048578 öc
+.00014674052855058001 kf
+.00014592679101509030 hü
+.00014573026342220408 gä
+.00014281793272435315 üd
+.00013486656609994116 lz
+.00013037844132634433 kä
+.00012820309001594789 ip
+.00012749135916662560 kn
+.00012717763741566007 sf
+.00012330994883125673 äi
+.00012299906609720459 bh
+.00012216180763486399 ou
+.00012145098006231679 jü
+.00012137335946154766 bn
+.00011783377072804977 gü
+.00011749868545933048 mg
+.00011687855460783203 vö
+.00011545322895146711 fs
+.00011455620276047524 sü
+.00011059951552199447 sd
+.00011031985319030998 wö
+.00011001740755549673 uv
+.00010876597335446585 bw
+.00010721498968197471 mf
+.00010715371066108194 ae
+.00010625053865125252 dp
+.00010450710232313863 cd
+.00010381677962043848 tb
+.00010381292838117906 co
+.00010322597322770765 xi
+.00010316198282960970 hz
+.00010146476498754958 oa
+.00010066616972640251 nö
+.00009827538598809127 ly
+.00009663801694261532 dg
+.00009438844636936673 hd
+.00009374628331672472 xt
+.00009247952977344155 bz
+.00008968617436746118 kg
+.00008728417453555940 lr
+.00008694233157868919 sn
+.00008665158093321825 üf
+.00008597845202663750 bö
+.00008580415136025968 uz
+.00008336970019545326 xp
+.00008282527311071616 sv
+.00008116766520970199 jä
+.00007862037437026282 bä
+.00007737654635670888 sö
+.00007684441217427807 zö
+.00007593757387550635 hf
+.00007592124796737932 hb
+.00007574287153568895 kz
+.00007471450472796849 fb
+.00007434451236814650 öd
+.00007366946486168299 ax
+.00007305905358103068 mw
+.00007183066599067130 ty
+.00006966167562951900 oj
+.00006839838069786235 ym
+.00006488268958564274 yp
+.00006455480856084307 gf
+.00006318184279303005 mr
+.00006197109284158564 ps
+.00006176074290197853 tv
+.00006155503605007350 fö
+.00006146440025381781 fz
+.00005934866953696986 zü
+.00005901880044679733 tp
+.00005840151058150429 uw
+.00005797956247636007 cl
+.00005632761445552250 dd
+.00005583590659321535 lv
+.00005580823310120435 zd
+.00005569488980478092 lp
+.00005490497192764166 gm
+.00005402656422410669 ßb
+.00005334545143922794 mn
+.00005203281613923643 bj
+.00005181252925692557 hg
+.00005051984329717917 rj
+.00004981264644285596 md
+.00004952946203085974 ca
+.00004806846950249704 ök
+.00004765182074012440 fh
+.00004682335484313897 kh
+.00004606783104070048 yo
+.00004589422833665983 fd
+.00004501943522377083 oo
+.00004401420333764192 df
+.00004379653671446840 ßn
+.00004361103699142626 lh
+.00004272489160878505 gh
+.00004256928498323561 kk
+.00004189653567396003 uo
+.00004151410025741374 km
+.00004001030389710458 ßi
+.00003971133966366708 sj
+.00003962230094183649 üm
+.00003957543363158857 oe
+.00003935453335055495 üß
+.00003897571294036469 eq
+.00003892245139299008 zm
+.00003881253083434011 dh
+.00003813587568094217 gg
+.00003803977235581434 äß
+.00003797281030972536 iw
+.00003791609883826909 cs
+.00003780883720358556 lw
+.00003728500601838862 ii
+.00003713848816320928 fm
+.00003636122909471024 dc
+.00003592332549726315 bb
+.00003465602248435862 zb
+.00003433573358627282 wj
+.00003410824796412591 dä
+.00003369613283429786 öp
+.00003271595395627263 pü
+.00003037142353474926 eä
+.00002914203662750031 np
+.00002878689106485890 tk
+.00002872649012180657 xa
+.00002813794482749430 aw
+.00002769468551925491 gb
+.00002763283981308672 gz
+.00002756113446500093 oi
+.00002694971377136513 aj
+.00002673505503855361 öm
+.00002661332340503645 kb
+.00002628320481958981 hh
+.00002619029234243965 hy
+.00002612001897727892 xe
+.00002537568422938958 gö
+.00002493624273332185 yt
+.00002483928827813551 pz
+.00002480137952143461 dk
+.00002436121967465432 fk
+.00002427494050340493 bf
+.00002345028504543858 cu
+.00002344075887566385 yl
+.00002318770660335662 ry
+.00002275818491196258 nj
+.00002250689926728106 ßs
+.00002201695434401701 fw
+.00002187224518505801 xu
+.00002187025633943668 gd
+.00002181690488229178 ao
+.00002166950472842499 hj
+.00002158438202065004 bm
+.00002121052399649390 ny
+.00002098552441746298 mz
+.00002074876623339898 fp
+.00002031898172134443 uu
+.00002018074103084486 äb
+.00001990989163490603 gy
+.00001967764473969763 yc
+.00001917973222203634 yr
+.00001872521100424786 fc
+.00001788052709313096 mk
+.00001742747719434972 ui
+.00001726159905022465 eö
+.00001716356929683365 by
+.00001674224083765169 db
+.00001649875736554393 vw
+.00001606836678532010 vg
+.00001587585115821381 öb
+.00001572399935922427 kw
+.00001562372116768214 oy
+.00001531688806933161 iö
+.00001499354765403034 bv
+.00001493518141774404 ci
+.00001491129402615796 ßu
+.00001420688923442301 bk
+.00001410225707974906 pk
+.00001404471203373715 ux
+.00001381834573225216 vf
+.00001331455623722613 ww
+.00001318020981967807 my
+.00001308299554026980 ws
+.00001288438960003538 pö
+.00001284162350368940 dy
+.00001269111996318995 ßg
+.00001265906383726540 cr
+.00001252000593835438 tc
+.00001246445325455124 wm
+.00001240931396059918 kp
+.00001205992759744951 gj
+.00001205730556734680 ej
+.00001202858773474414 ey
+.00001182548078709527 dö
+.00001142504863747680 zf
+.00001134522963544948 fx
+.00001113063958072646 üp
+.00001101997521268184 pg
+.00001100294324077608 xr
+.00001079274849157105 äe
+.00001055392720767278 tj
+.00001050207157437764 zz
+.00001007974204670996 eü
+.00000994643640977520 wd
+.00000985703068160508 yk
+.00000943979109416868 pc
+.00000922918545027948 fv
+.00000918569922441839 ix
+.00000882431392188224 wf
+.00000878239315497399 jö
+.00000865114634106615 zg
+.00000755982284096487 yw
+.00000694928815445497 vä
+.00000686482209832939 yn
+.00000608012003769061 äz
+.00000600479046847198 öw
+.00000578797645579875 dz
+.00000578199654147198 vu
+.00000557726169918236 yd
+.00000552869494182014 gw
+.00000541183032332547 ßz
+.00000538558600691961 cq
+.00000531621728535270 qm
+.00000531511456035316 nq
+.00000510022026185188 aq
+.00000505585673735381 ßv
+.00000504256574617123 hv
+.00000496678111743381 zy
+.00000492259537282449 ßm
+.00000487152073588133 dv
+.00000485430291915507 ßh
+.00000484574421265951 ßr
+.00000484439587799082 zp
+.00000460598626506059 wt
+.00000459836230414212 zn
+.00000454928089874443 tq
+.00000454654456846511 ox
+.00000445674057623278 bd
+.00000443961700686664 rx

statistik/Leipzig/häufigsteBuchstaben10000de.txt

@@ -0,0 +1,30 @@
+.13614198231629818742 e
+.09402309119792435210 n
+.07924951385645386004 r
+.07801991864401680528 i
+.06303012939890110137 t
+.05946729644040345143 s
+.05758881535747300834 a
+.05574998878287417806 d
+.04703061432989120435 h
+.03912361573716742715 u
+.03733547217190935458 l
+.03403343919792429063 g
+.02939113559322628542 c
+.02772838146482130187 o
+.02713136093641746914 m
+.02334074788159042638 b
+.01817895413635094794 f
+.01715330695099015944 w
+.01555025233254056480 k
+.01468527683004375028 z
+.01119488768725717499 v
+.00943455226116358030 p
+.00786429308661513737 ü
+.00724864301561530759 ä
+.00344969317582006664 j
+.00344173810307049926 ö
+.00210183503527608515 ß
+.00068763438642019628 y
+.00042653300262057162 x
+.00019689668892325465 q