Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Скорректирован README.md #82

Open
wants to merge 1 commit into
base: master
Choose a base branch
from
Open

Скорректирован README.md #82

Changes from all commits
Commits
Show all changes
1 commit
Select commit
File filter

Filter by extension

Filter by extension
Conversations
Failed to load comments.
Loading
Jump to
Jump to file
Failed to load files.
Loading
Diff view
Diff view
14 changes: 7 additions & 7 deletions README.md
View file
Open in desktop
Original file line number Diff line number Diff line change
@@ -1,15 +1,15 @@
# datatasks
Задачи для волонтеров/стажеров/всех желающих по работе с открытыми, большими данными. А также всеми иными задачами связанными с темами краудсорсинга, понятного языка и электронной архивации
Задачи для волонтеров/стажеров/всех желающих по работе с открытыми и большими данными, а также со всеми иными задачами, связанными с темами краудсорсинга, понятного языка и электронной архивации.


# Пример задачи, новые необходимо делать по этому шаблону
# Пример задачи. Новые необходимо делать по этому шаблону


## Цель

На сайте управления Росстата http://obdx.gks.ru/ публикуются результаты обследования домохозяйств с 2003 по 2012 годы, в форматах NESSTAR (http://www.nesstar.com/), Excel и описанием структур данных в DOC файлах.
На сайте управления Росстата http://obdx.gks.ru/ публикуются результаты обследования домохозяйств с 2003 по 2012 годы, в форматах NESSTAR (http://www.nesstar.com/), Excel и с описанием структур данных в DOC файлах.

Собрать данные из базы данных сайта управление статистики уровня жизни и обследований домашних хозяйств Федеральной службы государственной статистики (Росстат) и перенести на хаб открытых данных
Собрать данные из базы данных сайта управление статистики уровня жизни и обследований домашних хозяйств Федеральной службы государственной статистики (Росстат) и перенести на хаб открытых данных.

## Задача
* написать парсеры и выгрузить данные структуры данных в форматах CSV и JSON
Expand All @@ -26,13 +26,13 @@
* реализация в виде программы командной строки или веб-приложения
* возможность запуска на MacOSX
* использовать скриптовые языки такие как Python, Perl, R и другие.
* преобразовать данные из формата NESSTAR в форматы удобные для работы, такие как CSV и загрузить их в github и/или хаб открытых данных
* преобразовать данные из формата NESSTAR в форматы, удобные для работы, такие как CSV, и загрузить их в github и/или хаб открытых данных

## Оценки трудоёмкости
Ожидаемое время на задачу должна занять не более 1-3 дня (8-24 часа).
Ожидаемое время, затраченное на решение задачи, не должно превышать 1-3 дня (8-24 часа).

## Вспомогательные материалы:
* Хаб открытых данных - http://hubofdata.ru
* хаб открытых данных - http://hubofdata.ru
* документация API CKAN - http://docs.ckan.org/en/latest/api/index.html
* сайт управления Росстата - http://obdx.gks.ru/
* библиотеки разбора HTML кода. LXML - http://lxml.de/ и BeautifulSoup - http://www.crummy.com/software/BeautifulSoup/