Entware-3x - новые репозитории Entware для устройств, использующих новые ядра.

Сообщение **Zyxmon** » 26 июл 2016, 18:10

Немного истории
В 2011 году, около 5 лет назад был выпущен в public репозиторий пакетов Entware. Вот, что о нем тогда писал Александр Рыжов:

Коллеги, начиная с r3727 основным источником ПО для роутера является наш собственный репозиторий пакетов Entware.

Он призван заменить собой Optware и сделать доступным для большого круга пользователей репозиторий OpenWRT
- наиболее популярного и объёмного набора ПО на сегодняшний день.

Его можно использовать на тех прошивках, где раньше было предусмотрено использование Optware, включая TomatoUSB, DD-WRT, asuswrt и клоны, Padavan'овскую и другие.

Для компиляции репозитория использовался тулчейн т.н. "прошивки энтузиастов" для маршрутизаторов компании Asus на чипсете бродком. Прошивки этих маршрутизаторов использовали бинарные блобы компании Broadcom и были основаны на древнем ядре linux версии 2.6.22. Благодаря усилиям многих программистов в ядро были сделаны бекпорты из более свежих ядер. На аналогичном ядре выпущены прошивки AsusWRT (by merlin), Tomato-usb (by Shibby) и разные клоны. Время течет, новые устройства на mipsel чипсетах Broadcom уже не выпускаются. Почти все современные устройства используют более свежие версии ядер linux (2.6.36, 3.4, ....). Ядро 2.6.22 (но другое) используют сейчас и некоторые маршрутизаторы ZyXEL Keenetic. C ядром Keentic ситуация похуже, бекпортов сделано меньше. Выяснилось, что некоторые приложения специальной версии Entware для кинетиков собрать невозможно, а некоторые собираются, но не работают.
Именно эта ситуация и послужила толчком к созданию клона Entware для устройств с современным ядром. В этом топике описан такой клон, который основан на ядре 3.4.112 (для mipsel) и 3.2.40 (для arm и intel). Entware-3x будет работать на маршрутизаторах с прошивкой Падавана, на ZyXEL Keenetic (прошивка 2.07 или старше), на DD-WRT (прошивки с ядрами 3.x и 4.x) для mipsel устройств и на многих НАСах и железках на Android (arm и intel).
Этот клон позволяет собирать и запускать приложения, которые ранее не работали (или не собирались) в Entware-ng. В качестве примера - раньше в Entware-ng torrent клиент deluge собирался, но не работал (речь о mipsel). Теперь работает.

Сообщение **Zyxmon** » 26 июл 2016, 18:10

Чем этот репозиторий отличается
Недавно было проведено сравнение 2х репозиториев для mipsel устройств. Один на основе системной библиотеки Glibc, другой на Uclibc (используется для mipsel в Entware-ng). Несмотря на бытующее мнение, что приложениям, собранным с glibc требуется больше памяти, оказалось, что это не так - uclibc vs glibc - сравниваем потребление памяти (ram)
Да, безусловно, сама библиотека glibc требует заметно (мегабайта на 3

) больше места на внешнем носителе и поэтому почти не используется при разработке прошивок роутеров, где каждый мегабайт флеш памяти на счету. В случае, когда приложения устанавливаются на usb носитель или hdd (НАСы) это не важно. Поэтому (цитирую) "так как используется внешний носитель, то лучше использовать полноценную версию стандартной библиотеки". В отличии от урезанных musl и uclibc общепризнано, что ошибок в glibc меньше, т.к. проект ведет большая и сильная команда.
Поэтому в Entware-3x решено использовать glibc в качестве системной библиотеки и для архитектуры mipsel. Для arm и intel в Entware-ng и раньше использовалась библиотека glibc.
Еще одно нововведение связано с подходом, который был использован тут - http://www.zyxmon.org/2015/05/10/ustana ... -zhelezki/ и позднее применен при адаптации Entware для маршрутизаторов keenetic. Коротко объясню и это новшество.
При создании приложений Entware мы стремимся, чтобы все, что нужно пакету находилось в папке /opt. Это не всегда возможно и некоторые общесистемные файлы (/etc/hosts, /etc/resolv.conf ...) используются и Entware и основной прошивкой. Часто такие файлы нельзя изменить (readonly файловая система). В Entware-3x некоторые файлы, используемые в частности, при авторизации пользователей (/etc/passwd, /etc/shaddow, /etc/group, /etc/gshadow, /etc/shells, /etc/localtime) перенесены в папку /opt/etc. При начальной установке "на нормальные устройства" создаются символические ссылки на файлы в папке /etc (например /opt/etc/passwd --> /etc/passwd) и все работает как и раньше в Entware-ng. На некоторых устройствах (андроид железки, кинетики) такие ссылки не создаются и в Entware используются свои пользователи, которые не зависят от прошивки, свои пароли, используется отдельная своя авторизация. Часто это удобно использовать и на "обычных устройствах", позже объясню когда это так. Этот подход позволил собрать общий репозиторий и для нестандартных устройств и для стандартных. Отличия тут только в установщике. В отличии от Entware-ng сейчас в обязательном порядке устанавливается пакет busybox.Если по каким либо причинам Вам нравится прошивочный вариант апплета, то не удаляйте пакет busybox и ссылки-апплеты в /opt/bin и /opt/sbin, просто направьте нужные Вам ссылки на прошивочный вариант. Некоторые пакеты Entware теперь используют приложения именно из /opt/bin и /opt/sbin. Как и ранее (Entware-ng для arm и intel) в entware используется свой набор локалей, который не зависит от поддержки и набора локалей основной прошивки. Итак подведем итоги, чем отличается Entware-3x от Entware-ng.

1. Новое ядро - позволяет собирать и запускать новые приложения.
2. Системная библиотека glibc (только для mipsel. glibc раньше использовалась для arm и intel). Лучшая совместимость, меньше глюков.
3. Возможность (обычно опционально) использовать независимых от прошивки пользователей со своими паролями и системой авторизации. Суперпользователь в этом случае всегда root (не admin, как бывает).
4. Независимый от прошивки набор локалей (это новость только для устройств mipsel).
5. Обязательная установка busybox.
6. Есть и другие, менее значимые отличия.

Сообщение **Zyxmon** » 26 июл 2016, 18:11

Установка

Перед установкой убедитесь, что Ваше устройство имеет ядро 3.x (команда в консоли `uname -a`). Очень желательно, чтобы версия ядра была бы не ниже 3.4.112 для mipsel устройств и 3.2.40 для остальных. Этим требованиям заведомо удовлетворяют прошивки Падавана, прошивки ZyXEL Keenetic 2.07 и старше, прошивки Synology 5.2 и старше, прошивки Qnap 4.2.1.

Общие сведения об установке (важно для тех, кто будет устанавливать на устройства, которые далее не описаны)

После установки Entware пользователь должен иметь возможность устанавливать дополнительные пакеты и использовать дополнительные приложения из репозитория. Таким образом установка должна обеспечивать использование приложений Entware интерактивно, в интерактивных сессиях. Этот функционал реализуется добавлением /opt/bin и /opt/sbin в переменную PATH и установкой дополнительных переменных окружения. Все, что для этого необходимо, расположено в файле-скрипте /opt/etc/profile. Некоторые пакеты Entware являются сервисами-демонами. Они запускаются скриптами /opt/etc/init.d/S* и их следует запускать после загрузки устройства. Для этого необходимо, чтобы после запуска устройства выполнялся скрипт /opt/etc/init.d/rc.unslung с параметром start (а при выключении с параметром stop).
Ну и самое главное - после старта устройства должна быть доступна на запись папка /opt, в которую устанавливается Entware. Это реализуется на разных устройствах по разному - созданием символической ссылки, монтированием носителя с указанной меткой в точку монтирования /opt, подмонтированием в /opt (mount -o bind) и другими способами. Используемая файловая система должна поддерживать символические ссылки и права доступа. На ntfs некоторые приложения Entware могут не работать.
Если для Вашего устройства не описан способ установки, Вы можете взять за основу следующие скрипты:
(armv5,std) - http://entware-3x.zyxmon.org/binaries/a ... all_std.sh
(armv5,alt) - http://entware-3x.zyxmon.org/binaries/a ... all_alt.sh
(armv7,std) - http://entware-3x.zyxmon.org/binaries/a ... all_std.sh
(armv7,alt) - http://entware-3x.zyxmon.org/binaries/a ... all_alt.sh
(mipsel,std) - http://entware-3x.zyxmon.org/binaries/m ... all_std.sh
(mipsel,alt) - http://entware-3x.zyxmon.org/binaries/m ... all_alt.sh
(mips,std) - http://entware-3x.zyxmon.org/binaries/m ... all_std.sh
(mips,alt) - http://entware-3x.zyxmon.org/binaries/m ... all_alt.sh
(x64,std) - http://entware-3x.zyxmon.org/binaries/x ... all_std.sh
(x64,alt) - http://entware-3x.zyxmon.org/binaries/x ... all_alt.sh

Списки имеющихся пакетов (armv5,armv7,mipsel,x64):
http://entware-3x.zyxmon.org/binaries/a ... kages.html
http://entware-3x.zyxmon.org/binaries/a ... kages.html
http://entware-3x.zyxmon.org/binaries/m ... kages.html
http://entware-3x.zyxmon.org/binaries/x64/Packages.html

Внимание В репозитории mipsel находятся 6 пакетов с архитектурой keenle-3x, они предназначены для установки на маршрутизаторы ZyXEL Keenetic. Если они не поддерживаются, Вы будет получать об этом предупреждение при работе opkg. Не обращайте на него внимание.

Установка на прошивки Падавана

инструкция

Установка на ZyXEL Keenetic (прошивки 2.07 или старше)

Стандартной установки нет, альтернативная установка со своими паролями аналогична Entware-ng и описана тут.
Крaтко: на подготовленный носитель в папку install скопировать архив. В web-интерфейсе устройства на вкладке OPKG выбрать носитель и нажать кнопку "Применить".
Установочный архив можно взять здесь для mips и здесь для mipsel
Список пакетов см. выше для mips(el)

Установка на DD-WRT

Описание от пользователя - Entware-3x - новые репозитории Entware для устройств, использующих новые ядра.
На просторах интернета найден следующий скрипт установки на dd-wrt - https://raw.githubusercontent.com/tsyni ... e-setup.sh
Попробуйте его, но замените в предпоследней строке ссылку на установщик Entware-3x нужной архитектуры.

Установка на NAS Qnap

Проверьте (команда `uname -a`), что ядро, используемое прошивкой не меньше 3.2.40. Если у Вас установлен один из пакетов Optware, Entware-arm, Entware-ng - удалите его.
Для стандартной установки используйте qpkg пакет - http://entware-3x.zyxmon.org/binaries/o ... 99std.qpkg , он автоматически определяет архитектуру.
Для альтернативной установки используйте qpkg пакет - http://entware-3x.zyxmon.org/binaries/o ... 99alt.qpkg , он автоматически определяет архитектуру.
Если Вы использовали альтернативный вариант установки, то рекомендуем зайти на NAS и поставить один из ssh серверов Entware (dropbear или openssh-server). Инструкция по установке ниже в теме. После установки можно зайти на НАС по ssh (порт 2222)- root/12345 и поменять пароль.

Установка на NAS Synology

Наиболее полная известная мне инструкция - http://www.synology-forum.ru/index.php? ... entry57866 подходит и для установки Entware-3x. Начните читать эту инструкцию начиная с п 3. Установка новой системы «Entware-ng». По сравнению с инструкцией для Entware-ng нужно использовать скрипты установки, которые приведены выше в сообщении. К п 3.2.3 дополнение, создайте файл /etc/rc.local, если его нет. По п. 3.3.4 мне прислали такое исправление - в DSM 6 следует редактировать не /root/.profile, а /etc/profile.
Если Вы использовали альтернативный вариант установки, то рекомендуем зайти на NAS и поставить один из ssh серверов Entware (dropbear или openssh-server). Инструкция по установке ниже в теме. После установки можно зайти на НАС по ssh (порт 2222)- root/12345 и поменять пароль.

Установка на Android устройства

Установка аналогична описанной тут - http://www.zyxmon.org/2016/04/17/entware-ng-na-android/
Только следует заменить скрипт установки android_install.sh на http://entware-3x.zyxmon.org/binaries/a ... all_alt.sh

Сообщение **Zyxmon** » 26 июл 2016, 18:11

Преимущества и недостатки альтернативной установки
Недостатком альтернативной установки является ее непривычность. Вы привыкли, что суперпользователь Вашего устройства admin, а теперь нужно заходить с логином root, да и пароль может быть другим.
А вот преимуществ множество. Рассмотрим некоторые из них. Предположим, Вы поставили на устройство сервис, который может запускаться только от определенного пользователя. Некоторые прошивки не позволяют создавать дополнительных пользователей, тут всё "суши весла" - ничего не выйдет. Предположим дополнительного пользователя создать можно. Создадим его, запустим сервис. Казалось бы все отлично.... Но тут возникает другая проблема - новые пользователи хранятся в файлах /etc/passwd и /etc/group, которые расположены в памяти (tmpfs) и не сохраняются при перезагрузке. Для решения этой проблемы придется создавать скрипт, который должен запускаться раньше нужного сервиса и который будет создавать необходимых пользователей при загрузке. Это неудобно.
Возьмем другой пример - Вы хотите суперпользователю НАСа задать bash (из entware) в качестве шелла. Казалось бы все хорошо, все файлы на hdd, бери и редактируй. Но я бы не рекомендовал менять руками файлы на НАСе в папке /etc. Если Entware "слетит" или при обновлении сломается bash - опять "суши весла". Консольный доступ пропал, для восстановления нужно все переустанавливать. Даже если ничего не слетает, большинство таких измененй на НАСах пропадает при обновлении прошивки. Отдельные пользователи Entware в папке /opt эти проблемы решают.
Третий пример. На последних прошивках QNAP 4.2.1 с архитектурой arm наблюдается проблема с вводом русских букв в консоли. Скорее всего криво собран прошивочный busybox (в прошивках 4.2.0 и более ранних я эту проблему не наблюдал). Использование альтернативной установки Entware эту проблему полностью решает.

Сообщение **Zyxmon** » 26 июл 2016, 18:50

FAQ
Вопрос. Будет ли прекращена поддержка Entware-ng?
Ответ. Конечно, НЕТ! Пока в эксплуатации находятся устройства на древнем ядре 2.6.22, Entware-ng будет развиваться и поддерживаться. Через несколько лет Entware-ng перейдет на новые ядра, когда устройств с 2.6.22 останется мало. Можно считать Entware-3x тестовым полигоном будущих версий Entware, где "обкатываются" разные решения.

Вопрос. Как добавить локаль в Entware? Например, китайскую.
Ответ. Скачайте и установите файлы из архива, запустите localedef.new для добавления локали:

Код: Выделить всё

wget -qO- http://pkg.entware.net/sources/i18n_glib223.tar.gz | tar xvz -C /opt/usr/share/
localedef.new  -c -f UTF-8 -i zh_CN zh_CN.UTF-8

Проверить список устанвленных локалей можно с помощью команды `locale.new -a`:

Код: Выделить всё

# locale.new -a
C
en_US.utf8
POSIX
ru_RU.utf8
zh_CN.utf8

Вот так выглядят даты в mc при текущей китайской локали

mc-ch.png

Вопрос. Как поменять переменную окружения PATH в интерактивном сеансе Entware-3x?
Ответ. Задание переменной окружения PATH несколько отличается от Entware-ng (для некоторых устройств). Поскольку возможны разные (стандартная и альтернативная) установки, разные ssh серверы (из прошивки, из entware, dropbear, openssh), разные интерпретаторы (shells из прошивки или entware), то переменная PATH зафиксирована (не зависит от предыдущего значения PATH на момент начала сеанса) и задана в /opt/etc/profile. Отредактируйте этот файл, если необходимо.

Вопрос. Приложения Entware показывают неправильное время, можно ли это исправить?
Ответ. Да можно, установочный скрипт настраивает "правильно время", если это возможно. Если время неправильное, установите нужные для своего региона файлы временных зон (opkg install zoneinfo-xxxx)

Код: Выделить всё

zoneinfo-africa - 2016f-1 - Zone Information (Africa)
zoneinfo-asia - 2016f-1 - Zone Information (Asia)
zoneinfo-atlantic - 2016f-1 - Zone Information (Atlantic)
zoneinfo-australia-nz - 2016f-1 - Zone Information (Australia-NZ)
zoneinfo-core - 2016f-1 - Zone Information (core)
zoneinfo-europe - 2016f-1 - Zone Information (Europe)
zoneinfo-india - 2016f-1 - Zone Information (India)
zoneinfo-northamerica - 2016f-1 - Zone Information (NorthAmerica)
zoneinfo-pacific - 2016f-1 - Zone Information (Pacific)
zoneinfo-poles - 2016f-1 - Zone Information (Arctic, Antarctic)
zoneinfo-simple - 2016f-1 - Zone Information (simple)
zoneinfo-southamerica - 2016f-1 - Zone Information (SouthAmerica)

Зоны для Европы и Азии уже установлены (при начальной установке). Создайте символическую ссылку на свой регион, например

Код: Выделить всё

ln -sf /opt/share/zoneinfo/Europe/Moscow  /opt/etc/localtime

Другая возможность - задайте переменную TZ в /opt/etc/init.d/rc.unslung и /opt/etc/profile так

Код: Выделить всё

export TZ=":/opt/share/zoneinfo/Europe/Moscow"

Вопрос. Как установить bash в качестве оболочки (shell)?
Ответ. Для стандартных установок это не всегда возможно. Для альтернативных это делается так. Поставим пакет bash (opkg install bash). Добавим строку `opt/bin/bash` в файл /opt/ect/shells. Зададим (для удобства) переменную PS1 в фале .profile пользователя (/opt/root для root), например, `export PS1="[\h@\w]>"`. Отредактируем файл /opt/etc/passwd и зададим bash нужному пользователю (последний параметр).

Вопрос. У меня стандартная установка, как мне перейти на альтернативную?
Ответ. Рекомендую предварительно поставить dropbear или openssh из Entware, настроить, проверить. Удалите файлы (некоторых может не быть) /opt/etc/passwd, /opt/etc/shaddow, /opt/etc/group, /opt/etc/gshadow, /opt/etc/shells и скопируйте на их место следующие файлы

Код: Выделить всё

cp -f /opt/etc/passwd.1 /opt/etc/passwd
cp -f /opt/etc/group.1 /opt/etc/group
cp -f /opt/etc/shells.1 /opt/etc/shells

При следующем заходе по ssh (с использованием ssh сервера из Entware) используйте логин root, пароль 12345. Измените этот пароль командой passwd.

Вопрос. У меня альтернативная установка, как мне перейти на стандартную?
Ответ. Удалите файлы (некоторых может не быть) /opt/etc/passwd, /opt/etc/group, /opt/etc/shells и создайте симлинки, как показано в следующем фрагменте установочного скрипта

Код: Выделить всё

ln -sf /etc/passwd /opt/etc/passwd
ln -sf /etc/group /opt/etc/group
ln -sf /etc/shells /opt/etc/shells
if [ -f /etc/shadow ]
then
    ln -sf /etc/shadow /opt/etc/shadow
fi
if [ -f /etc/gshadow ]
then
    ln -sf /etc/gshadow /opt/etc/gshadow
fi

Добавьте в файл .profile прошивочного супрепользователя последней строку

Код: Выделить всё

source /opt/etc/profile

для задания переменных окружения интерактивных сеансов.

Сообщение **Zyxmon** » 28 июл 2016, 17:33

Установка dropbear (Entware)
Выполните (установка dropbear и редактора nano)

Код: Выделить всё

/opt/bin/opkg install dropbear 
/opt/bin/opkg install nano

Если запущен прошивочный ssh сервер на 22 порту, отредактируйте файл /opt/etc/init.d/S51dropbear:

Код: Выделить всё

/opt/bin/nano /opt/etc/init.d/S51dropbear

Замените в 5й строке число 22 на другое, например 2222. Сохранение файла в nano - F3, выход Ctrl-x. Если нужно, запустите dropbear

Код: Выделить всё

/opt/etc/init.d/S51dropbear start

Внимание! Если прошивка Вашего устройства так же использует dropbear (например, прошивка Падавана), то скрипт Entware может по ошибке управлять dropbear из прошивки. В этом случае рекомендуем заменить скрипт другим:

Код: Выделить всё

wget http://entware-3x.zyxmon.org/binaries/other/S51dropbear -O /opt/etc/init.d/S51dropbear
chmod +x /opt/etc/init.d/S51dropbear

Проверьте и замените в скрипте порт, который использует dropbear.

Установка openssh (Entware)
Выполните (установка редактора nano, сервера, генерация ключей, создание пользователя sshd):

Код: Выделить всё

/opt/bin/opkg install openssh-server
/opt/bin/opkg install nano
/opt/bin/ssh-keygen -A
/opt/sbin/adduser -h /opt/tmp -s /opt/bin/false -D -H sshd

Если запущен прошивочный ssh сервер на 22 порту, отредактируйте файл /opt/etc/ssh/sshd_config:

Код: Выделить всё

nano /opt/etc/ssh/sshd_config

Замените строку `#Port 22` на `Port 2222.
Замените строку с `#PermitRootLogin prohibit-password` на `PermitRootLogin yes`. Сохранение файла в nano - F3, выход Ctrl-x.
Если нужно, запустите openssh сервер командой `/opt/etc/init.d/S40sshd start.

Сообщение **Zyxmon** » 30 июл 2016, 11:18

Опубликована первая инструкция по установке (на прошивки Падавана). Скоро будут опубликованы и другие инструкции. Тема открывается для комментариев.

Vladimir · Сообщение **Vladimir** » 30 июл 2016, 22:07

Ждем инструкцию по установке на Keenetic Giga3.

ElectroPositiv

Круто. В скором времени опробую. У меня как раз Падаван.

DeXterX · Сообщение **DeXterX** » 02 авг 2016, 23:55

Zyxmon, приветствую! Перебрался со своим Omni на версию 2.08.
Качаю новый установщик, запускаю установку на роутере - установщик не дорабатывает. Лог тут: http://pastebin.com/a8D0TGPW
2 разные флешки, с ext2 и ext3 - на них в мае мы успешно с Вами запускали новый репозиторий, все работало как часы.

Форумы Zyxmon`а

Entware-3x - новые репозитории Entware для устройств, использующих новые ядра.

Кто сейчас на конференции