Creation of a Russian Stop Word List

Abstract—

This article describes three identifying characteristics of stop words—statistical, semantic, and morphological—and postulates new principles for the creation of stop word lists based on these characteristics. The application of the principles is demonstrated by creating a Russian-language general stop word list based on the analysis of existing sources and frequency distributions in the Russian National Corpus. The resulting list contains 535 stop words.

APPENDICES

APPENDIX A

Modified Porter’s List, 312 Terms

#а, без, бесспорно, более, больше, будем, будет, будете, будешь, будто, буду, будут, будучи, будь, бы, бывало, был, была, были, было, быть, вам, вами, вас, вдруг, ведь, вероятно, весь, видимо, видимому, во, возможно, вон, вообще, вот, впрочем, вряд, все, всё, всегда, всего, всей, всем, всеми, всему, всех, всею, всю, вся, вы, где, говорил, говорила, говорили, говорят, да, даже, два, для, до, должен, должна, должны, другой, его, едва, ее, её, ей, ему, если, есть, еще, ею, ж, же, за, зачем, здесь, и, из, или, им, имевший, имеем, имеемый, имеет, имеете, имеешь, имей, имейте, имел, имела, имели, имело, именно, иметь, имею, имеют, имеющий, имея, ими, иногда, их, к, кажется, кажись, казалось, как, какая, какой, когда, конечно, короче, который, кроме, кстати, кто, куда, ли, лишь, лучше, между, меня, мне, много, мной, мною, мог, моги, могите, могла, могли, могло, могу, могут, моему, можем, может, можете, можешь, можно, мой, мочь, моя, мы, на, над, надо, наконец, нам, нами, наоборот, например, напротив, нас, нашему, не, него, нее, неё, ней, ней, нельзя, нему, несомненно, нет, нею, ни, нибудь, никогда, ним, ними, них, ничего, но, ну, нужно, о, об, обычно, один, однако, он, она, они, оно, опять, от, откуда, отчего, очевидно, перед, по, под, поди, пожалуй, позволь, позвольте, помилуй, помилуйте, помимо, после, потом, потому, похоже, почему, почти, при, примерно, про, прочим, проще, раз, разве, разумеется, с, сам, сама, сами, самим, самими, самих, само, самого, самой, самом, самому, самою, саму, свою, себе, себя, сегодня, сейчас, сказал, сказала, сказали, сказать, сколько, скорее, следовательно, случайно, смог, смоги, смогите, смогла, смогли, смогут, сможем, сможете, сможешь, со, собой, собою, собственно, совсем, судя, та, так, такой, там, твоему, те, тебе, тебя, тем, теми, теперь, тех, то, тобой, тобою, тогда, того, тоже, той, только, том, тому, тот, точнее, тою, ту, тут, ты, у, уж, уже, хоть, чего, чей, чем, через, что, чтоб, чтобы, чуть, эта, эти, этим, этими, этих, это, этого, этой, этом, этому, этот, этою, эту, я.#

APPENDIX B

Full List of Russian-Language Stop Words, 535 Terms

#а, алло, без, безусловно, бесспорно, близко, более, больше, будем, будет, будете, будешь, будто, буду, будут, будучи, будь, бы, бывает, бывало, был, была, были, было, быть, в, вам, вами, вас, ваш, ваша, ваше, вашему, ваши, вверх, вверху, ввиду, вдруг, ведь, везде, вернее, верно, вероятнее, вероятно, весь, видимо, видимому, видишь, видно, вне, вниз, внизу, внутри, во, возможно, вокруг, вон, вообще, вот, вперёд, вперед, впрочем, вряд, все, всё, всегда, всего, всей, всем, всеми, всему, всех, всею, всю, всюду, вся, вы, г, где, говорил, говорила, говорили, говорит, говоря, говорят, да, давно, даже, далеко, дальше, данным, действительно, дело, для, до, довольно, должен, должна, должно, должны, допустим, другая, другие, других, другого, другое, другой, е, ё, его, едва, ее, её, ей, ему, если, есть, еще, ещё, ею, ж, же, жаль, за, затем, зато, зачем, здесь, значит, знаете, знаешь, значит, и, из, известно, или, им, имевший, имеем, имеемый, имеет, имеете, имеешь, имей, имейте, имел, имела, имели, имело, именно, иметь, имею, имеют, имеющий, имея, ими, иначе, иногда, их, к, каждая, каждое, каждые, каждый, кажется, кажись, казалось, как, какая, какой, кем, когда, кого, ком, кому, конечно, короче, которая, которого, которой, которые, который, которых, кроме, кругом, кстати, кто, куда, ли, лишь, лучше, м, мало, между, меня, мимо, мне, мнению, много, мной, мною, мог, моги, могите, могла, могли, могло, могу, могут, мое, моему, моё, можем, может, можете, можешь, можно, мои, мой, мочь, моя, мы, на, наверно, наверное, наверху, над, надо, назад, наконец, нам, нами, наоборот, например, напротив, нарочно, нас, наш, наша, наше, нашему, наши, не, него, недалеко, недавно, нее, неё, ней, некоторая, некоторого, некоторой, некотором, некоторому, некоторую, некоторые, некоторый, некоторым, некоторых, некоторых, нельзя, нем, нём, нему, несомненно, нет, нею, ни, нибудь, низко, никакой, никогда, никого, никому, никто, никуда, ним, ними, них, ничего, ничему, ничто, но, ну, нужно, нх, о, об, оба, обе, обеим, обеими, обеих, обоим, обоими, обоих, обычно, общем, однако, однажды, оказывается, около, он, она, они, оно, опять, особенно, от, отовсюду, отсюда, отчего, очевидно, очень, перед, по, под, поди, пожалуй, пожалуйста, позади, позволь, позвольте, позже, пока, помилуй, помилуйте, помимо, понятно, попросту, пор, пора, поскольку, после, посреди, потом, потому, похоже, почему, почти, поэтому, при, примерно, примеру, про, просто, против, прочим, прочь, проще, раз, разве, разумеется, раньше, с, сам, сама, сами, самим, самими, самих, само, самого, самой, самом, самому, самою, саму, самый, свое, своё, своего, своей, свои, своих, свой, свою, своя, себе, себя, сегодня, сейчас, сзади, сих, скажем, сказал, сказала, сказали, сказать, сколько, скольку, скорее, следовательно, слишком, случайно, слушай, слушайте, смог, смоги, смогите, смогла, смогли, смогло, смогут, сможем, сможете, сможешь, смотри, смотрите, сначала, снова, со, собой, собою, собственно, совсем, соответственно, спасибо, сразу, став, ставший, стал, стала, стали, стало, становимся, становитесь, становится, становиться, становишься, становлюсь, становятся, судя, суть, сути, сущности, считаю, считал, считаешь, считали, считаем, считаете, считает, считают, сюда, т, та, так, такая, также, такие, таким, такими, таких, такого, такое, такой, такому, там, твое, твоё, твоей, твоему, твои, твоим, твоих, твой, твоя, те, тебе, тебя, тем, теми, теперь, тех, то, тобой, тобою, тогда, того, тоже, той, только, том, тому, тот, точнее, тою, ту, туда, тут, ты, у, уж, уже, хоть, хотя, хочу, хочешь, хотите, хочет, хотим, хотят, частности, часто, чего, чей, чем, чему, через, что, чтоб, чтобы, чуть, эта, эти, этим, этими, этих, это, этого, этой, этом, этому, этот, этою, эту, я, являемся, являетесь, является, являешься, являюсь, являются, якобы.#