Блоги: заметки с тегом linux

Замена больших вложений в email на ссылку

Копытов Иван — Mon, 31 Mar 2025 11:45:17 +0500

Устанавливаем MIMEDefang:

apt update
apt install mimedefang -y

Правим файл /etc/default/mimedefang:

SOCKET=/var/spool/postfix/mimedefang/mimedefang.sock
MD_ALLOW_GROUP_ACCESS=yes

Добавляем пользователя postfix в группу defang:

usermod -aG defang postfix

Так как postfix работает в chroot-окружении, создаем папку для сокета mimedefang:

mkdir /var/spool/postfix/mimedefang

Правим /etc/postfix/main.cf:

milter_default_action = accept
milter_protocol = 6
smtpd_milters = unix:mimedefang/mimedefang.sock
non_smtpd_milters = unix:mimedefang/mimedefang.sock

Теперь нужно добавить следующее в конец функции filter в файле /etc/mail/mimedefang-filter:

# Если файл больше указанного размера, он удаляется из письма,
    # его копия остается на диске, а вместо него предоставляется ссылка, по которой его можно скачать.

    # Максимальный размер вложения (например, 10MB)
    my $MAX_ATTACHMENT_SIZE = 10 * 1024 * 1024;
    # Директория для сохранения вложений
    my $ATTACHMENTS_DIR = "/var/mail/attachments";
    # URL, по которому будут доступны вложения
    my $ATTACHMENTS_URL = "https://mail.kini24.ru/attachments";

    # Создаем директорию, если её нет
    mkdir $ATTACHMENTS_DIR unless -d $ATTACHMENTS_DIR;

    $size = (stat($entity->bodyhandle->path))[7];
    if ($size > $MAX_ATTACHMENT_SIZE) {
        md_graphdefang_log("The attached file $fname is too big, replaced with a link");
        return action_replace_with_url($entity,
            "$ATTACHMENTS_DIR",
            "$ATTACHMENTS_URL",
            "Размер вложения превысил ограничения сервера, поэтому оно было удалено.\n" .
            "Вы можете скачать его по следующей ссылке:\n\n" .
            "_URL_");
    }

В результате аыполнения функции action_replace_with_url в конец письма будет вставлен текст и ссылка для скачивания вложения, а сам файл бует сохранен в папку /var/mail/attachments. Надо, кстати, покопаться и найти как вставлять ссылку в текст самого письма. Но пока что оставим как есть.

У меня почтовый и веб-сервер находятся на разных виртуальных машинах, поэтому папку /var/mail/attachments надо сделать общей. На почтовом сервере устанавливаем пакет сервера NFS:

apt install nfs-kernel-server -y

Открываем файл /etc/exports и вписываем в конец файла что-то вроде такого:

/var/mail/attachments 192.168.1.0/24(rw,sync,no_subtree_check)

И выполняем в консоли команду:

exportfs -a

Теперь переходим на веб-сервер и выполняем следующие команды:

apt update
apt install nfs-common -y

Открываем файл /etc/fstab и дописываем в конец:

192.168.1.12:/var/mail/attachments /var/www/mail/attachments nfs4 defaults 0 0

где 192.168.1.12 — IP-адрес почтового сервера.
Дальше выполняем команды:

mkdir -p /var/www/mail/attachments
chown -R www-data:www-data /var/www/mail/attachments
mount -a

И проверяем что папка смонтировалась:

ls -l /var/www/mail/attachments

После этого все вложения, которые были удалены из писем, должны стать доступны для скачивания.

Тачскрин на Линуксе

Евгений Степанищев — Thu, 04 Jul 2024 22:57:28 +0500

Евгений Степанищев:

Два последних дня ковырял по работе планшет фирмы «Дигма» — это китайское го… годное вполне за свои деньги изделие поставляется с ОС «Виндоуз». А наша задача была показать на нём один из отечественных дистрибутивов Линукса.

Линукс встал довольно легко, но вот проблема — прикосновения к экрану не давали никакого эффекта. Вот этим я героически два дня и боролся.

До конца не победил — тачскрин хоть и возвращает какое-то координаты, но драйвер явно работает неправильно — при движении пальца по оси абсцисс координаты сначала уменьшаются до нуля, потом палец попадает в какое-то «слепое пятно», где цифра не меняется, потом значение снова растёт.

Зато узнал немало интересного о том как устроен опрос датчика нажатия на экран в Линуксе. Всё я ещё не переварил, поэтому описывать не буду, но один интересный факт расскажу.

Представьте, что у вас есть готовый экран, на котором что-то отображается — в неких координатах пользователь видит кнопку, на которую он хочет нажать пальцем (речь о планшете). Сверху мы накладываем полупрозрачную плёнку, которая будет считывать нажатия и закрываем всё корпусом.

Часть плёнки у нас оказалась под рамкой, так что ноль координат плёнки и экрана не совпадают, кроме того, разрешающая возможность тоже разная. Экран, например, 1366 пикселей шириной, а плёнка даёт 740. Как пересчитываются координаты нажатия на плёнку в экранные, чтобы операционная система поняла куда пользователь нажал?

Для этого в Линуксе задаётся трансформационная матрица («Coordinate Transformation Matrix»), на которую умножаются абсолютные координаты, в которых датчик экрана уловил нажатие. С её помощью можно сдвигать координаты, сжимать их и растягивать, а так же поворачивать на 90°, если датчик стоит так, что у него перепутаны оси — это вполне стандартная математика, которую многие могут помнить по школе.

Матрица эта, понятное дело, должна быть зашита внутри драйвера. Но когда у тебя Линукс, нельзя надеяться, что для всего оборудования найдётся драйвер.

Для той «Дигмы», которую мы получили, драйвера нет. В некоторых случаях есть способы, которые позволяют изготовить его на основе драйвера для «Виндоуза», но матрицу всё равно придётся вычислять самостоятельно.

Правда в нашем случае она не помогла — компенсировать «слепое пятно» она не в состоянии, для этого нужно чудо или более подходящий драйвер.

Linux 0.0.1

Евгений Степанищев — Wed, 16 Aug 2023 20:17:05 +0500

Евгений Степанищев:

Оказывается совсем не сложно запустить первую функциональную версию Линукса под современной машиной, всё уже подготовлено энтузиастами. Надо только скачать образ и распаковать.

В архиве всё готово для «Винды», для «Мака» я поставил QEMU отдельно, для запуска сработала вот такая строчка:

qemu-system-i386 -nic none -L pc-bios -hda \
linux-0.11-devel-060625.qcow2 -no-reboot -m 16 -k en-us

Стартует всё моментально, после запуска образа будет доступно меню выбора источника загрузки, там надо будет нажать 1, после чего появится командная строка.

Удивительно, но несмотря на то, что это версия 0.0.1, очень многое из привычного работает — есть файловая система, компилятор, bash, grep и awk. Правда у команд есть далеко не все ключи и я не обнаружил никакой справки ко внешним командам (для встроенных есть help).

Linux 0.0.1, запущенный в QEMU, а жаба, потому что скриншот — это скучно

В статье, где я нашёл ссылку для скачивания образа первого Линукса, есть любопытный факт — Линукс когда-то назывался «FREAX», как оказалось, в исходниках эта строка упоминается. Попытавшись найти её в бинарных файлах, споткнулся об отсутствие команды find, пришлось городить вот такую конструкцию:

ls -R / | awk -F: '/:/{dir=$1} ! /:/ && $1 {print dir"/"$1}' |
grep -v ^/dev | xargs -n1 strings | grep -i freax

Строчка не нашлась, она и в исходниках-то упоминается только в комментариях.

Я понимаю, что все эти утилиты писал не автор Линукса, но то, что это всё работает в операционной системе, код которой размером чуть больше восьми с половиной тысяч строк, меня лично восхищает.

Настройка новой виртуальной машины

Bohdan Stefaniuk — Sat, 26 Dec 2020 23:54:46 +0500

Bohdan Stefaniuk:

Время от времени поднимаю виртуальные машины на убунту для своих проектов или экспериментов. Первое что я настраиваю — безопасность. Раньше у меня не было единого чек-листа и приходилось каждый раз гуглить. Поэтому решил сделать такой список и оставить у себя в блоге, чтобы обращаться к нему по мере необходимости.

Чеклист

Создать нового пользователя вместо root.
Настроить доступ по ssh ключам.
Отключить доступ по паролю для ssh.
Отключить доступ для root через ssh.
Заблокировать все порты в ufw, кроме 80, 22 и 443.
(необязательно) Поменять ssh порт с 22 любой другой

Terminal

# Создаем нового пользователя и добавляем в группу sudo.
adduser bstefaniuk
usermod -aG sudo bstefaniuk

# Копируем свой публичный ключ для нового пользователя.
ssh-copy-id bstefaniuk@vps-ip

# Отключаем доступ по паролю и root для ssh.
nano /etc/ssh/sshd_config
## Установить значения:
PasswordAuthentication no
PermitRootLogin no
## Перезапустить службу
systemctl restart ssh

# Настройка ufw
ufw default deny incoming
ufw default allow outgoing
ufw allow ssh
ufw allow 80
ufw allow 433
ufw enable
## Проверяем что все ОК
ufw status

В будущем хочу написать ansible-playbook скрипт, который будет все настраивать сам.

Хороший мануал по ufw
Генератор конфигураций nginx
Deployment: настраиваем пользователей

Конспект: работа с командной строкой

Bohdan Stefaniuk — Sat, 16 Mar 2019 23:46:52 +0500

Bohdan Stefaniuk:

Данная статья это конспект по пройденному курсу: Основы командной строки.

Обозначения пути

/ — самый верхний уровень файловой системы
~ — домашняя директория

Сайт на котором можно посмотреть что делает та или иная команда. Ссылка
Иформация о стандартных директориях *nix систем. FHS

Работа в файловой системе

pwd — отображает путь рабочей (текущей) директории
ls — показывает все файлы и директории в текущему или указанному пути
cd — служит для перемещения по директориям. Если выполнить без параметров — переместит нас в домашнюю директорию.
stat — показывает дополнительную информацию о папке или файле

Чтение файла

сat — Отображает содержимое файла
head — Отображает первые 10 строк файла, можно вывести больше с помощью флага -n 20
tail — Отображает последние 10 строк файла, можно вывести больше с помощью флага -n 20
less — Представляет из себя пейджер. С его помощью можно перемещайся и искать в файле. Также он может открыть файл любого размера, так как отображает только те строки, которые может поместить в окно консоли и при перемещении по файлу — дочитывать нужную информацию.

Может быть такая ситуация что файл очень интенсивно изменяется, например логи, и нужно постоянно выводить содержимое файла. Для этого у команд head и tail есть флаг -f. Данный файл сразу выводит на экран добавленные строки.

Grep

Grep — консольная утилита, которая производит поиск в файле или файлах по заданному шаблону.
Пример:

grep services Startup.cs  # выведет по очередно строчки, которые содержат services.

Иногда нужно посмотреть не только сами строчки содержащие текст, но и текст вокруг.
Для этого есть несколько дополнительных флагов:

-B — количество строк до искомой строки
-A — после искомой строки
-C — до и после одновременно
-R — рекурсивный поиск по директориям и под директориям
-n — отобразит номер строки, возле каждого результата поиска

Примеры:

grep -R .getUsers() . - найдет все файлы в которых есть строчка .getUsers(), начиная с текущей.
grep -C 10 text file.txt - найдет строку text и отобразит ее и 10 соседних строк с каждой стороны

Текстовые редакторы

Для редактирования файлов в командной строке используют редакторы Nano, Vim и Emacs. Первые два, обычно, установлены по умолчанию.

Nano
Самый простой текстовый редактор. Удобно редактировать небольшие файлы.

Vim
Данный редактор имеет очень много возможностей и особенностей.
Работа в Vim состоит из разных режимов.
Когда только открыли файл, редактор работает в режиме команд. Любое нажатие выполняет какую-то определенную команду.

В Vim есть четыре основных режима работы:

Командный режим (обычный режим) — это режим по умолчанию. Перемещение по файлу, быстрое (при помощи команд, комбинаций клавиш) редактирование, удаление, поиск текста.
Режим вставки (режим ввод) — ввод текста с клавиатуры. То, как вы привыкли это делать в обычных редакторах.
Визуальный режим — выделение произвольных участков текста.
Режим командной строки — собственная командная строка для редактора текста, из которой можно выполнять великое множество разнообразных команд.

Для перехода в режим вставки — нажать i.
Для перехода в режим команд — нажать ESC.

Как выйти с Vim? :-)
Для начала нужно перейти в режим команд.

:q! — Закрывает файл без сохранения изменений
:wq — Сохраняет и закрывает файл
:w — Просто сохраняет файл

Хороший гайд по Vim — https://guides.hexlet.io/vim/

Перенаправление потоков

В *nix системах есть такое понятие как потоки. В начале работы программы ОС связывает ее с тремя потоками: STDIN, STDOUT и STDERR.
Для всех приложений они выглядят как обычные файлы.
Что же делает каждый из них?
* STDIN — отвечает за ввод программы.
* STDOUT — отвечает за вывод программы.
* STDERR — отвечает за вывод ошибок.

По умолчанию вывод всех команд отображается на экране. Но с мощью параметра > можно перенаправить вывод в указанный файл.

ls -l > output.txt

На экране ничего не отобразится, но в текущей директории появится файл output со всем выводом команды ls -l. Данную операцию можно сделать с любой программой, которая что-либо выводит на экран. Но есть одна особенность данного оператора, он перезаписывает все данные в файле, для того чтобы дописать используйте >>.

echo Hello_World > output.txt
# Hello_World
echo Hello_World1 > output.txt
# Hello_World1
echo Hello_World2 >> output.txt
# Hello_World1
# Hello_World2

Также можно перенаправлять в другую сторону поток. Например у нас есть файл и мы ходим посмотреть сколько в нем строк. Для этого существует команда wc. Она принимает на вход текст, но с помощью оператора < мы можем передать в нее содержимое файла.

wc -l < result.txt
# 2432

Также можно как читать так и писать в файл:

wc -l < result.txt > output.txt

Пайплайн (Конвейер)

Если у программы есть вход и выход, то их можно обьеденить, такое обьединение называется — конвейер.
С помощью данного подхода можно передавать данные сквозь приложения, как через цепочку функций.

Например нам нужно найти строку в которой есть несколько слов и нам не важно как они расположены внутри, главное чтобы были на одной строчке.

grep alias .bashrc | grep color

Алгоритм такой команды очень прост:

Выбираем строки, которые содержат alias
Потом в строчках, которые получили на выходе первой команды, ищем слово color

| — этот символ называется пайп, он указывает шелу взять STDOUT одного процесса и соединяет его с STDIN другого процесса.

Также команду выше можно переписать на такую:

cat .bashrc | grep alias | grep color

Манипулирование файловой структурой

Возможность модифицировать файловую систему завязана на права. Если у вас нету прав создавать файлы в текущей директории, вы получите ошибку.

Команды:

touch filename — изменяет время последнего доступа к файлу, если его нету — создает
rm — удалить файл
- -r — удаляет папку
- -f — не спрашивает подтверждение пользователя
mv — переименовывает файл. В *nix системах не существует понятия «переименовать файл». Переименование всегда равносильно перемещению, которое выполняется командой mv.
cp — копирует файл.
- -r — позволяет скопировать директории
mkdir — создание директории
- -p — позволяет создать вложенные директории. mkdir /folder/subfolder

Переменные окружения

Для просмотра переменных окружения используют команду env.
Формат вывода очень простой: слева от знака равно имя переменной, справа — значение.

Основное предназначение переменных окружения — конфигурация системы и программ. Их удобство заключается в универсальности и отвязке от способа появления этих значений в системе.

Для вывода переменной используется echo, а перед самой переменной ставится знак $.

echo $HOME

Существует два способа задавать значение переменной окружения: локальный и глобальный.
Локальные переменные живут для конкретной программы:

HOME=/var cd

Другой способ установки изменяет значение глобально, для всей сессии и выполняется так:

export HOME=/var

Обратите внимание на то, что изменение происходит в рамках текущей сессии, другими словами, если у вас открыто две вкладки терминала, и в каждой загружен баш, то изменение произойдет только в той вкладке, в которой будет выполнена команда.

История комнад

Для просмотра команд можно использовать клавиши вверх и вниз. Но все введенные команды хранятся в файле .bash_history, который лежит в домашней директории пользователя.

Посмотреть историю можно и более простым способом, достаточно выполнить команду history.

Последнее, и самое интересное — реверсивный поиск. Если нажать комбинацию Ctrl + r, то запустится специальный поиск по истории. Он ожидает ввода символов и сразу отображает ближайшую команду, в которой эти символы встречаются. Если найденное соответствие вас не устроило, то повторное нажатие Ctrl + r выберет следующее соответствие из истории.

Sudo

Ситуаций, в которых необходимо повышать привилегии и выполнять команды от рута (пользователя root), довольно много. С некоторыми мы уже столкнулись, с другими познакомимся в следующих уроках:

Установка новых программ
Навигация по чужим директориям
Изменение прав доступа и владельцев файлов, не принадлежащих текущему пользователю
Создание, редактирование и удаление файлов в местах, где не хватает прав текущего пользователя
Запуск программ, требующих повышенные привилегии.

Основной способ повышать привилегии в современных системах — утилита sudo.
По умолчанию она пытается повысить права до суперпользователя.

Пакетный менеджер

Пакетный менеджер служат для установки программ. В каждой операционной системе есть свой пакетный менеджер, но его надо устанавливать отдельно.

Основной его частью является каталог. В нем содержится список всех приложений, которые можно установить.