0x1-classification - История изменений

StasFomin в 21:47, 25 сентября 2021

2021-09-25T21:47:42Z

StasFomin в 20:38, 9 декабря 2019

2019-12-09T20:38:28Z

StasFomin в 07:19, 27 ноября 2019

2019-11-27T07:19:33Z

StasFomin в 07:11, 27 ноября 2019

2019-11-27T07:11:28Z

StasFomin в 06:48, 27 ноября 2019

2019-11-27T06:48:28Z

StasFomin: /* Categories _ */

2019-11-27T06:40:18Z

‎Categories _

StasFomin: /* Categories _ */

2019-11-27T06:40:06Z

‎Categories _

StasFomin: Новая страница: « ;addcss: * { font-family: «Segoe Print» !important; } .resc img { width:…»

2019-11-27T06:39:35Z

Новая страница: «<noinclude> <slideshow style="virtuozzo" scaled="true" headingmark="_" incmark="(...)"> ;addcss: * { font-family: «Segoe Print» !important; } .resc img { width:…»

Новая страница

<noinclude>
<slideshow style="virtuozzo" scaled="true" headingmark="_" incmark="(...)">
;addcss: * { font-family: «Segoe Print» !important; } .resc img { width: 500px; height: auto !important; } pre { font-family: Consolas !important; } #pagehistory { font-family: Consolas !important; line-height: 1.0; } #pagehistory li { margin: 0; }
;title: Задача классификации 0x1.tv
;author: Stas Fomin
</slideshow>
</noinclude>

=== Есть сайт 0x1.tv _ ===

=== Технически — MediaWiki _ ===

== MediaWiki Понятия _ ==
;Page: Atom of Content
* ID = Name = Title = URL
** No more ID ≠ File ≠ Section Title
** Названия несут семантику

* Linking by name!
** Not crazy URLs like «googledocs.php?id_doc=384357239&ctd=545654…»
** Rename pages with redirections
** Can link to nonexisting articles
** Create any new page by typing name in browser URL
*** «Write fast, improves later if need» — easy to create big documentation

== MediaWiki Concepts: Birds view ._ ==

<graph>
digraph G{
rankdir=LR; ranksep=0.5;
node[style="filled" shape="component" fillcolor="cornsilk"] edge[color="blue"]
Objects
node[style="filled" shape="component" fillcolor="yellow"]

Objects->Pages
Objects->Users
Objects->File

node[shape="note" fillcolor="lavender"]
Pages->Namespaces
node[shape="folder"]
Namespaces->Main
Namespaces->Category
Namespaces->File
Namespaces->Templates
Namespaces->User
edge [style="dashed"]
Users->User
}
</graph>

== MediaWiki Concepts: Namespace ._ ==
;Main: Regular namespace.
;File: Binary files — images, documents, PDF, SVG, any blobs
* Can be uploaded with any name
* Supporting authomatic thumbnail/preview generation (even for PDF/docs).
* Link to such file, include it
<pre><nowiki>
[[File:Page history diff.png|640px|center]]
</nowiki></pre>
;Category: Categories. Main tool for structuring MediaWiki content.

…
a tens of others (Blogs, Quizzes, ACL, …)

== Categories _ ==
* Page in "Category" namespace.
** Can have content like any other page.
{{SideBar|[[File:Pages in category.png|256px]]}}
* All pages linked to this page, "belongs" to it.
<pre><nowiki>
[[Category:VzLinux]]
</nowiki></pre>
* A category can belongs to several other categories.
* It is like Web2.0 "tags", but {{!|structured}} and {{!|self-described}}.

@@ Строка 98: / Строка 98: @@
 === Датасет ===
-* http://video.ispras.ru/channels/misc/datasets/0x1tv-dataset.pickle
+* http://video-sky.0x1.tv/channels/misc/datasets/0x1tv-dataset.pickle
 * Python pickle
 ** Два списка — статьи и категории

@@ Строка 97: / Строка 97: @@
 ** Большие категории (высокоуровневые, в которых вкладывается много более узких), должны котироваться слабее.
-=== Чтобы сделать? _ ===
+=== Датасет ===
-* Какой-то прототип
+* http://video.ispras.ru/channels/misc/datasets/0x1tv-dataset.pickle
-* Какие данные нужны?
+* Python pickle

← Предыдущая		Версия 07:19, 27 ноября 2019
Строка 7:		Строка 7:
	</noinclude>		</noinclude>

		+	{{vimeoembed\|366000415\|800\|450}}

	=== Есть сайт 0x1.tv _ ===		=== Есть сайт 0x1.tv _ ===

@@ Строка 52: / Строка 52: @@
-== MediaWiki Concepts: Namespace ._ ==
+== MediaWiki Concepts: Namespace _ ==
 ;Main: Regular namespace.
 ;File: Binary files — images, documents, PDF, SVG, any blobs
@@ Строка 77: / Строка 77: @@
 * It is like Web2.0 "tags", but {{!|structured}} and {{!|self-described}}.
-=== Страница 0x1.tv ===
+=== Страница 0x1.tv _ ===
 * Заголовок, часто длинный.
 * Аннотация — наверное самый основной источник для классификации.
@@ Строка 85: / Строка 85: @@
 * Иногда тезисы — много текста!
-=== Что хотелось бы ===
+=== Что хотелось бы _ ===
 * Предложить категории для страницы — максимально узкие и походящие, может несколько. Из существующих.
 * Возможно дополнительно показать близкие статьи — чтобы уже вручную создать новые категории.
 * http://0x1.tv/img_auth.php/generated/categorygraph.svg
-=== Тут явно ML ===
+=== Тут явно ML _ ===
 * C элементами NTLK
 ** Т.е. надо и парсить текст, убирать стоп слова.
@@ Строка 96: / Строка 96: @@
 ** Большие категории (высокоуровневые, в которых вкладывается много более узких), должны котироваться слабее.
-=== Чтобы сделать? ===
+=== Чтобы сделать? _ ===
 * Какой-то прототип
 * Какие данные нужны?

← Предыдущая		Версия 06:48, 27 ноября 2019
Строка 76:		Строка 76:
	* A category can belongs to several other categories.		* A category can belongs to several other categories.
	* It is like Web2.0 "tags", but {{!\|structured}} and {{!\|self-described}}.		* It is like Web2.0 "tags", but {{!\|structured}} and {{!\|self-described}}.
		+
		+	=== Страница 0x1.tv ===
		+	* Заголовок, часто длинный.
		+	* Аннотация — наверное самый основной источник для классификации.
		+	* Ссылка на автора
		+	* Ссылка на видео на ютубе и vimeo (не поможет в классификации)
		+	* Одна или несколько категорий, иногда вообще нет, иногда слишком общее.
		+	* Иногда тезисы — много текста!
		+
		+	=== Что хотелось бы ===
		+	* Предложить категории для страницы — максимально узкие и походящие, может несколько. Из существующих.
		+	* Возможно дополнительно показать близкие статьи — чтобы уже вручную создать новые категории.
		+	* http://0x1.tv/img_auth.php/generated/categorygraph.svg
		+
		+	=== Тут явно ML ===
		+	* C элементами NTLK
		+	** Т.е. надо и парсить текст, убирать стоп слова.
		+	** И как-то отклассифицировать, учесть имеющиеся категории
		+	** Большие категории (высокоуровневые, в которых вкладывается много более узких), должны котироваться слабее.
		+
		+	=== Чтобы сделать? ===
		+	* Какой-то прототип
		+	* Какие данные нужны?

@@ Строка 72: / Строка 72: @@
 * All pages linked to this page, "belongs" to it.
 <pre><nowiki>
-[[Category:VzLinux]]
+[[Category:SAAS]]
 </nowiki></pre>
 * A category can belongs to several other categories.
 * It is like Web2.0 "tags", but {{!|structured}} and {{!|self-described}}.

@@ Строка 70: / Строка 70: @@
 * Page in "Category" namespace.
 ** Can have content like any other page.
 * All pages linked to this page, "belongs" to it.
 <pre><nowiki>