when I trained the model, the words in topic 0 are more than other topics, why?
lrjocean opened this issue · 2 comments
other topic words is only 1/50 of topic 0 words
like this
o@algodev01v ~/workspace/LightLDA/example/data]$ head -1 nytimes/server_0_table_1.model
0 0:1807667 1:98167 2:95826 3:97072 4:98881 5:98440 6:95921 7:97827 8:98170 9:97458 10:96996 11:96863 12:96636 13:97364 14:97602 15:97181 16:97531 17:96992 18:97568 19:97016 20:96917 21:97311 22:97602 23:95911 24:97268 25:98387 26:97422 27:96709 28:99428 29:97658 30:96920 31:97526 32:97220 33:97402 34:99355 35:98229 36:97189 37:97940 38:97184 39:97481 40:97254 41:96488 42:96647 43:97134 44:97565 45:96490 46:98509 47:99715 48:97869 49:97838 50:98728 51:97013 52:98281 53:97303 54:96978 55:96794 56:97459 57:97051 58:99113 59:97164 60:98265 61:97893 62:98341 63:96607 64:97969 65:97182 66:98111 67:97387 68:97801 69:96816 70:97293 71:97569 72:98307 73:97387 74:97601 75:96763 76:98455 77:98741 78:96799 79:97818 80:99177 81:97586 82:96977 83:97994 84:97114 85:96652 86:97436 87:97769 88:97769 89:97019 90:96703 91:97045 92:97252 93:98118 94:96098 95:96596 96:98201 97:98256 98:98235 99:97966 100:98446 101:97168 102:97644 103:97362 104:97019 105:97943 106:95938 107:97578 108:95890 109:98069 110:99719 111:97889 112:95925 113:98092 114:97445 115:98161 116:97846 117:98561 118:98189 119:97006 120:97494 121:98548 122:98264 123:97564 124:98130 125:98841 126:97447 127:96736 128:97402 129:98339 130:98339 131:96941 132:97410 133:98596 134:96510 135:97899 136:96560 137:97337 138:97568 139:96506 140:98562 141:96876 142:97135 143:98126 144:96664 145:97646 146:96980 147:97529 148:97282 149:97398 150:98227 151:97921 152:97463 153:98101 154:97239 155:96283 156:97148 157:97889 158:97592 159:98579 160:98317 161:97995 162:98986 163:97172 164:97441 165:97678 166:99130 167:97559 168:97899 169:97549 170:96549 171:97580 172:97584 173:96647 174:96156 175:96850 176:97830 177:98626 178:97733 179:98603 180:97681 181:97982 182:97359 183:97892 184:97845 185:97171 186:97651 187:98211 188:96705 189:98595 190:97380 191:98596 192:97380 193:98916 194:96592 195:97453 196:98715 197:97394 198:98003 199:97798 200:97325 201:97945 202:98691 203:95158 204:97177 205:96915 206:98580 207:96518 208:98591 209:96770 210:96745 211:100063 212:97383 213:97664 214:98104 215:97928 216:98153 217:95972 218:97142 219:97268 220:97016 221:97312 222:99022 223:97719 224:98308 225:97951 226:98240 227:96910 228:97627 229:96140 230:97213 231:98258 232:98397 233:98027 234:98087 235:96425 236:97958 237:96907 238:97009 239:97584 240:98206 241:97402 242:97367 243:98372 244:98132 245:97104 246:97425 247:96925 248:97897 249:98777 250:97470 251:98288 252:97422 253:97362 254:96519 255:98026 256:96715 257:96419 258:98950 259:98433 260:97295 261:97188 262:97457 263:97924 264:98302 265:97178 266:98345 267:96729 268:97196 269:97864 270:97992 271:97529 272:98025 273:98053 274:98686 275:98397 276:97538 277:97658 278:97820 279:97911 280:96762 281:96894 282:98021 283:96586 284:96499 285:97342 286:97434 287:96489 288:95266 289:97086 290:97618 291:96791 292:98849 293:97621 294:97543 295:97861 296:97054 297:98742 298:96812 299:98507 300:98216 301:97705 302:98348 303:98172 304:96853 305:96973 306:98453 307:97757 308:100389 309:98194 310:98073 311:99309 312:98033 313:96871 314:98848 315:97872 316:98174 317:99746 318:97159 319:98077 320:97947 321:97374 322:98475 323:98179 324:97476 325:96879 326:97793 327:97592 328:97421 329:96329 330:97620 331:97187 332:97521 333:97140 334:97668 335:97177 336:98304 337:97163 338:97350 339:97053 340:98307 341:97846 342:97769 343:97670 344:96999 345:97825 346:96680 347:96707 348:97851 349:98190 350:97121 351:97943 352:97279 353:97601 354:98163 355:97587 356:98344 357:97966 358:97057 359:97632 360:98018 361:97772 362:97320 363:96681 364:97752 365:98061 366:96269 367:97420 368:98064 369:98736 370:97412 371:96583 372:98506 373:96445 374:98489 375:98542 376:97651 377:96375 378:97808 379:98215 380:97097 381:98175 382:95454 383:97823 384:98832 385:97312 386:96829 387:97164 388:98101 389:97903 390:99852 391:97642 392:96823 393:97912 394:98074 395:97106 396:96723 397:97348 398:98048 399:97821 400:97084 401:97352 402:98505 403:97079 404:97806 405:97714 406:97943 407:96454 408:96882 409:96718 410:98696 411:98441 412:96717 413:96422 414:98181 415:97530 416:98620 417:98174 418:96962 419:96976 420:96539 421:97432 422:98296 423:98035 424:96652 425:97972 426:96648 427:98673 428:98223 429:98202 430:98121 431:96158 432:96959 433:98363 434:97717 435:98163 436:97249 437:97850 438:97365 439:97448 440:97138 441:97490 442:98971 443:98216 444:97395 445:98088 446:99012 447:96215 448:98358 449:97985 450:97540 451:97223 452:97756 453:98097 454:98251 455:97148 456:98075 457:96550 458:98374 459:98038 460:97051 461:97129 462:97874 463:98565 464:97158 465:99342 466:97066 467:97378 468:97079 469:98065 470:99221 471:96261 472:97724 473:98409 474:98395 475:97620 476:98216 477:98365 478:97801 479:97693 480:96259 481:97037 482:98466 483:97763 484:98003 485:98602 486:98172 487:97524 488:97723 489:98462 490:97272 491:97209 492:97384 493:96985 494:98131 495:98730 496:97147 497:99088 498:97823 499:96174 500:98099 501:97234 502:96859 503:97374 504:96924 505:97725 506:96373 507:98406 508:98240 509:98156 510:96311 511:98119 512:97783 513:98616 514:95890 515:98861 516:96470 517:96964 518:97638 519:97689 520:97595 521:98011 522:97834 523:97350 524:97067 525:98543 526:96599 527:97352 528:97860 529:96477 530:99289 531:97160 532:95804 533:98757 534:98403 535:99695 536:98731 537:97469 538:96504 539:99507 540:97474 541:96276 542:96904 543:97367 544:97374 545:97781 546:98564 547:97658 548:97002 549:97481 550:96525 551:97457 552:97157 553:96217 554:97373 555:97331 556:98204 557:96995 558:97349 559:97470 560:97242 561:98563 562:97776 563:98668 564:96295 565:96743 566:97880 567:97255 568:97784 569:96334 570:97817 571:97274 572:98327 573:97128 574:97132 575:97076 576:97964 577:98086 578:98346 579:97873 580:97856 581:98688 582:97246 583:95952 584:97531 585:96973 586:98813 587:97457 588:97044 589:97560 590:96017 591:97055 592:98312 593:99135 594:97311 595:97186 596:97865 597:97916 598:97925 599:96788 600:98856 601:98220 602:97085 603:97503 604:98320 605:97038 606:98092 607:97447 608:96685 609:96825 610:98044 611:98370 612:98426 613:97339 614:96512 615:97413 616:98917 617:96700 618:98117 619:97398 620:97385 621:96489 622:97802 623:96203 624:99168 625:96389 626:97315 627:98639 628:97710 629:96813 630:98722 631:98176 632:97995 633:99224 634:95970 635:97272 636:97973 637:98014 638:97218 639:97896 640:97011 641:96779 642:97578 643:97103 644:97120 645:97303 646:97003 647:98111 648:99445 649:98001 650:97902 651:97792 652:98152 653:97729 654:97067 655:97775 656:99073 657:96403 658:97906 659:97222 660:97011 661:97531 662:97139 663:97958 664:96031 665:97582 666:98785 667:98328 668:96667 669:98790 670:97852 671:98120 672:97088 673:96375 674:98149 675:98550 676:98580 677:96468 678:96774 679:98621 680:97656 681:96524 682:96619 683:96525 684:96221 685:97542 686:97966 687:97035 688:97959 689:96679 690:96303 691:97469 692:99423 693:97945 694:97439 695:96947 696:97446 697:97384 698:98059 699:96099 700:98097 701:97440 702:96880 703:98044 704:97537 705:97446 706:97444 707:97819 708:98014 709:97764 710:97026 711:96116 712:97076 713:98234 714:98706 715:98490 716:96316 717:99233 718:97990 719:96979 720:97695 721:97898 722:98511 723:95962 724:98749 725:98436 726:98102 727:99089 728:98298 729:96737 730:99210 731:96635 732:97020 733:95852 734:97601 735:97749 736:96130 737:96399 738:97319 739:98348 740:97679 741:98204 742:97535 743:96224 744:96757 745:97705 746:96548 747:97008 748:98496 749:99033 750:98029 751:96883 752:97815 753:96914 754:97828 755:97487 756:98189 757:96996 758:97145 759:97954 760:97843 761:96966 762:98986 763:96538 764:96989 765:96244 766:97450 767:97496 768:96831 769:98027 770:97474 771:96982 772:97114 773:96690 774:96782 775:97949 776:97518 777:97727 778:97594 779:97908 780:98118 781:98100 782:98094 783:97277 784:97958 785:95970 786:98023 787:97205 788:98012 789:96928 790:98145 791:97460 792:97613 793:96089 794:97778 795:97690 796:97831 797:98165 798:96270 799:98555 800:96555 801:98452 802:97606 803:97318 804:98896 805:96737 806:98847 807:95741 808:96803 809:96717 810:97960 811:97379 812:97282 813:95901 814:96545 815:97457 816:98562 817:96693 818:98997 819:99253 820:98066 821:97339 822:97209 823:97250 824:98722 825:98464 826:97313 827:97897 828:97153 829:98836 830:96857 831:98195 832:97824 833:97714 834:97645 835:98179 836:97525 837:97399 838:96469 839:97952 840:98127 841:96888 842:97847 843:98746 844:97835 845:97778 846:98122 847:96912 848:96699 849:98368 850:97351 851:96950 852:97168 853:97748 854:96567 855:96548 856:98329 857:96042 858:96449 859:97866 860:97057 861:96713 862:98892 863:98753 864:96872 865:97136 866:97845 867:98301 868:97751 869:96643 870:96782 871:98172 872:97567 873:97872 874:98073 875:97701 876:97662 877:96475 878:97454 879:97860 880:95129 881:97870 882:98016 883:97095 884:98926 885:96744 886:99546 887:97422 888:96977 889:97466 890:97173 891:96435 892:97790 893:96786 894:98703 895:97482 896:98017 897:98614 898:96522 899:97654 900:98133 901:97577 902:97600 903:97837 904:99153 905:97879 906:98308 907:97058 908:96860 909:98174 910:97155 911:98120 912:98096 913:97003 914:96591 915:98011 916:98608 917:97052 918:96610 919:96634 920:95934 921:97606 922:98048 923:96934 924:98687 925:97058 926:95974 927:97987 928:96415 929:96847 930:97513 931:97465 932:97434 933:98052 934:97654 935:98764 936:96523 937:96539 938:98415 939:98017 940:98563 941:97751 942:96974 943:96428 944:97474 945:98623 946:96469 947:97409 948:96402 949:97159 950:97242 951:98220 952:97597 953:100083 954:97626 955:97825 956:97360 957:98229 958:98413 959:96626 960:98763 961:97813 962:98677 963:97864 964:98568 965:97574 966:98464 967:96332 968:96058 969:96884 970:97204 971:98798 972:97503 973:97146 974:96874 975:96980 976:98156 977:97205 978:97665 979:98411 980:98161 981:97306 982:97735 983:98887 984:95252 985:98060 986:97291 987:97813 988:96664 989:96661 990:99223 991:97149 992:97776 993:96642 994:96837 995:97778 996:96633 997:97328 998:98618 999:96429
Has anyone solved this problem???