Один товарищ продает свой монитор Philips 329M1RV, и пока он его продает, я попросил на тест, если понравится, то заберу. Но, спойлер - не понравилось.

Есть KVM-switch, т.е. переключает юсб от компа на ноут и всю периферию, есть подсветка как на телевизорах этой же марки, заряжает ноут, достаточно удобный монитор, 500 нит яркости, в помещении уже на 70% слепит...

Еще у этого монитора шикарные характеристики - 32 дюйма, 144 герц, 8 битный IPS, 4к разрешение... Но нужен ли конкретно мне этот монитор?

Начинаю тестировать, подключаю один ноутбук - выдает 60 герц при 4к, видимо не тянет, подключаю другой - аналогично, может быть шнур слабенький.

Подключаю комп, ну выкручиваю 144 герц, слышу как кулеры постоянно работающие бесшумпно начали чуть сильнее крутиться... Если в интерфейсе скролить, крутить, что то шевелить то тут выше 60 герц уже плавность не поднимается.

Если смотреть ролики то тоже незаметно, в фильмах между 24 киношными герцами и 60 разница очень сильная, а вот между 60 и 144 не заметил (использовал SVP).

Про 4к тоже немного спорный момент - когда монитор стоит в метре от моих глаз, то не особо заметна разница, каких то там пикселей не вижу и на 2к мониторе.

Про размер 32 дюйма, ну как будто 27 это идеально по высоте, а 32 нужно немного гулять глазами по кадру.

Про потребление тоже - если 2к 27 дюймовик тратит около 20-30 ватт, то 4к 32 уже около 70-80 ватт при сравнимой яркости, сколько тратит столько и греется, нагревается прямо как мой телевизор, при включении и выключении немного похрустывает корпусом.

Дальше уже возникают немного неприятные моменты, либо у меня не самый качественный провод DisplayPort, либо он ловит какие то наводки, но вот то что идеально работает на 2к 60, то будет работать с артефактами на 4к 144.

Про заводскую калибровку тоже, мониторы DELL обычно откалиброваны как и макбуки, т.е. цвета красивые, ничего не синит, не желтит, а вот на филипсе картинка синит, приходилось заходить в настройки и подкручивать.

В общем я понял что для такого монитора нужны повышенные требования к источнику, половина моих устройств не смогут выдать больше 60 герц на 4к, увеличенная нагрузка на железо, а в финале нужно иметь сценарии эксплуатации при которых ощутима разница. Я не играю и похоже не пойму всех преимуществ, но мой ноутбук при воспроизведении такого видео на таком экране ощутимо разогрелся.

Но если так поглядеть, то процессор 10210U еще вполне бодрый для сегодняшних лет и еще лет на 5 может хватить для написания кода, интернета, просмотра фильмов, даже сервачок можно слепить.

Оптимальная цена на барахолках не более 14 тыс за комплектацию 8 оперативки + 256 SSD.

Система охлаждения

Достаточно открутить только 4 болтика в обратном порядке 4, 3, 2, 1 и термотрубка с радиатором снимается, после чего можно поменять термопасту и продуть ребра радиатора.

После обслуживания видим что при тех же нагрузках нагрев до 79 градусов, а не 100, уже на 20 градусов холоднее, это при том что на картинке изображен стресс-тест, такая нагрузка в обычной жизни почти никогда не бывает... При обычном наборе кода или офисной работе будет около 46-50 градусов практически с выключенным вентилятором.

Термопрофиль у ноутбука чем то похож на макбук, он разгоняет вентилятор только когда хорошо нагрелся, при просмотре видео может вообще бесшумно работать. Но в биосе есть настройки управления температурой

• Оптимальный - всё стандартно и производительность и тишина, но при нагрузке разгоняется.
• Холодный - тут похоже вентилятор прибавляется чтобы держать температуру процессора ниже, но кулеры разгоняет сильнее. И при этом замедляет проц.
• Тихий - тут так понимаю вентилятор тише, но температура будет выше, процессор тоже замедляется.
• Ультра производительность - тут видимо и процессор на пиковых значениях и вентилятор...

Я пока этим не игрался, оптимальные значения дают пиковую мощность под 40 ватт кратковременно, но как только проц нагревается его бусты уменьшаются, а потом начинает работать вентилятор...

Батарейка

В биосе есть настройка скорости зарядки и сохранения батарейки

Тут можно быструю зарядку включить или выключить, можно включить использование только внешнего источника... Можно настроить уровни при которых начинается зарядка и прекращается, чтобы ноутбук постоянно не подзаряжался до 100 и не разряжался до 99%.

Базовая батарейка на 40 втч с маркировкой jk6y6 - на данный момент она стоит около 1500-2000 руб

Но можно пожертвовать слотом для 2.5 диска и поставить расширенную на 53ВтЧ, примерно за 3000-3500 руб, ее маркировка H5CKD

Базовой батарейки хватает примерно на 4-5 часов при максимальной яркости и просмотре локального 1080р видео, а расширенной до 6-7 часов.

Думаю, можно и 10 часов выжать, если включить экономию энергии, убавить яркость и просто читать код.

Замена SSD

Базово стоит маленький ссд на 256 гиг, в принципе и его хватает, он NVME, но при желанеии он легко меняется на полноразмерные модели, крепление выполнено на защелке и можно переставлять посадочное место под разную длину m2 накопителей.

Что еще бы заменить?

Традиционно, хотелось бы заменить матрицу, тут она 6 битная и по яркости ну примерно 200-250 нит, если будет нечего делать то буду продолжать развлечения...

Финал

Могу сказать что этот ноутбук намного качественнее всяких массовых моделей, это корпоративный сегмент, комплектующие к нему продаются везде. Сам ноут выполнен хоть и в пластике, но достаточно премиально, например, он включается при открытии крышки, есть подсветка клавиатуры. Биос имеет очень много разных настроек. Ну и бонусом, в материнке будет вшит ключик Windows 10 Pro, одна только лицензия чего стоит.

Ноут умеет заряжаться по type-c

На 20 вольтах

И даже на 33 ваттной зарядке от 8 вольт и даже от повербанка, который выдает 24-25 ватт

Но чем дальше, тем менее интересно это всё стало. На ютубе отключили монетизацию, мой старый блог из 2010 года был закопан гуглом, непонятно что с ним случилось, но все картинки пропали, навигация сломалась, больше я не доверяю облачным сервисам и всё буду крутить на своих ресурсах.

Сам формат блога как статей тоже мне показался не очень удобным, вместо него будет wiki со структурированным контентом, этот блог останется, но основное наполнение будет в вики, там буду расписывать все свои опыты с железом и софтом. Помимо этого будет еще git репозиторий с моими проектами и документацией к ним git.tech-research.ru

И вот завершился 4х дневный ребилд всего этого массива из 4х дисков по 18 террабайт, но шум никуда не уходит, диск не просто тукает, как он любит, а именно хрустит, стрекочет, что-то на нем происходит.

Но я ведь ничего даже не разместил на диске, он абсолютно пустой, но

mdamd -D /dev/md0

Выдает постоянно

State :  active

Хотя, должно быть

State : clean

Т.е. в состоянии active что-то читается/пишется, а clean значит диск всё записал и уже в режиме ожидания.

Поставил утилиту для анализа

apt install blktrace

Дальше запустил трассировку операций на диск

btrace -w 600 -a write /dev/md0

И в выхлопе такое

  9,0    2       79     9.271989366  1127  Q  WS 27648858368 + 1024 [ext4lazyinit]
  9,0    2       80     9.507989774  1127  Q  WS 27648859392 + 1024 [ext4lazyinit]
  9,0    2       81     9.509846860     0  C  WS 27648859392 + 768 [0]
  9,0    1       61     9.510479277     0  C  WS 27648860160 + 256 [0]
  9,0    2       82     9.727989922  1127  Q  WS 27648860416 + 1024 [ext4lazyinit]
  9,0    1       62     9.728802836     0  C  WS 27648860416 + 768 [0]
  9,0    1       63     9.728803092     0  C  WS 27648861184 + 256 [0]
  9,0    2       83     9.947990731  1127  Q  WS 27648861440 + 1024 [ext4lazyinit]
  9,0    2       84     9.949847960     0  C  WS 27648861440 + 768 [0]
  9,0    2       85     9.949848155     0  C  WS 27648862208 + 256 [0]
  9,0    2       86    10.167990861  1127  Q  WS 27648862464 + 1024 [ext4lazyinit]
  9,0    1       64    10.168814270     0  C  WS 27648862464 + 768 [0]
  9,0    1       65    10.168814521     0  C  WS 27648863232 + 256 [0]
  9,0    2       87    10.387989454  1127  Q  WS 27648863488 + 1024 [ext4lazyinit]
  9,0    2       88    10.389847586     0  C  WS 27648863488 + 768 [0]
  9,0    2       89    10.389847764     0  C  WS 27648864256 + 256 [0]
  9,0    2       90    10.607989529  1127  Q  WS 27648864512 + 1024 [ext4lazyinit]
  9,0    1       66    10.608804887     0  C  WS 27648864512 + 768 [0]
  9,0    1       67    10.608805140     0  C  WS 27648865280 + 256 [0]
  9,0    2       91    10.827989865  1127  Q  WS 27648865536 + 1024 [ext4lazyinit]
  9,0    2       92    10.829849387     0  C  WS 27648865536 + 768 [0]
  9,0    2       93    10.829849569     0  C  WS 27648866304 + 256 [0]
  9,0    2       94    11.047989739  1127  Q  WS 27648866560 + 1024 [ext4lazyinit]
  9,0    1       68    11.048803128     0  C  WS 27648866560 + 768 [0]
  9,0    1       69    11.048803372     0  C  WS 27648867328 + 256 [0]
  9,0    2       95    11.267989663  1127  Q  WS 27648867584 + 1024 [ext4lazyinit]

Оказывается, инсталлятор линукса форматирует диск достаточно быстро без всяких доп. опций, но потом очень медленно и лениво диск продолжает какие-то операции, это может продолжаться несколько недель на больших томах.

Выходом было переформатировать диск с опциями -E lazy_itable_init=0,lazy_journal_init=0

Т.е. файловая система создается минут 10-15, но после форматирования абсолютно все дела сделаны и все 4 диска могут отдыхать в простое. У меня еще конечно дополнительные опции форматирования конкретно под мой массив для оптимизации скорости и спараметрами рейда и уменьшенным резервированием.

 mkfs.ext4 -v -m 0.01 -b 4096 -E lazy_itable_init=0,lazy_journal_init=0,stride=128,stripe-width=256 /dev/md0

Теперь диски относительно тихие, только диск мотора и технология PWL

WD называет это профилактическим выравниванием износа (PWL); стреловидная головка для распределения смазки и предотвращения износа в конкретном месте. То есть добавленный шум — это функция, которую вы не можете отключить. Щелчки и лязг характерны для всех новых приводов WD.

cat /var/log/nginx/access.log | grep /feedback | awk '{print $1}' | sort -n | uniq -c | sort -nr

Чтобы понять какой фирме принадлежит адрес - поможет команда whois

whois 5.165.2.147 |grep "org-name:" | uniq

А можно совместить и слепить вот такое

 cat /var/log/nginx/access.log | grep /feedback | awk '{print $1}' | uniq | while read -r line; do whois $line; done| grep org-name | uniq

На выходе получаем типа такого

org-name:       Biterika Group LLC
org-name:       JSC "ER-Telecom Holding" Yekaterinburg Branch

Сразу видно что среди наших посетителей появились битерика или например AWS, Google cloud и другие хостинги, значит к нам приходят боты.

Введение

Сразу скажу что проблема плавает и очень зависит от региона для которого произведен телефон и вашего роутера. Если ваш роутер не поддерживает wifi6, то 100% проблем у вас не будет. Если 2.4Ггц, то тоже будет всё отлично.

В настоящее время в магазинах могут быть телефоны из самых разных стран и они адаптированы под местные нормы.

Причины

Точной причины я сказать пока не могу, но мои эксперименты дают некоторое понимание о влиянии разных режимов работы точки доступа.

При максимально современном режиме работы wifi-сети захватывается не один канал 5Ггц, а сразу 4 при ширине канала в 80 Мгц, плюсом используется диапазон 2.4 в параллель.

Видимо, в зависимости от региона производства или других особенностей, некоторые каналы 5ггц не поддерживаются, и когда все эти каналы двух диапазонов одновременно участвуют в подключении, то происходят или частые потери пакетов или отключение или другие эффекты.

Решения

Первым делом выключите в настройках телефона рандомный mac-адрес, да, это способствует некой защите и приватности, но на роутере тонкие настройки обычно производятся с привязкой устройства по физическому адресу, к тому же пинговать проще когда статический IP, а не присваивается каждый раз динамически.

Второе - выключите все опции энергосбережения сети и адаптивного переключения на мобильную сеть.

Третье - перед экспериментами лучше сделать сброс Bluetooth и wifi.

Решение 1 - 2.4 Ghz

Первое решение достаточно действенное и эффективное, но имеет ряд недостатков, на роутере можно зарегистрировать беспроводного клиента и запретить ему подключение к 5Ггц, тогда только один телефон из всех устройств будет иметь скорость не 600+ мегабит, а только 150, этого в целом достаточно для большинства задач и остальные устройства не пострадают в скорости.

В ходе испытаний, в течение 2х суток не было потерь пакетов в пинге, задержки около 100-200мс, что вполне приемлемо, но не идеально...

Решение 2 - изменить канал на 5Ghz

Нужно учитывать, что ширина более 20мгц захватывает несколько соседних каналов, поэтому можно поиграться с граничными диапазонами, у меня был 56й канал, поставил 36, ситуация значительно улучшилась, теперь не 3000мс задержки, а около 500-800... Но иногда бывают проблемы.

Думаю, что это самое правильное решение, т.к. и скорость максимальная, и потерь не 10%, а только 1%, но тут нужно экспериментировать, ставим пинг на несколько часов, проверяем максималку через speedtest, у пингов может улучшиться задержка, но при этом скорость упасть, параллельно советую тестировать на других устройствах сети - смартфоны, ноутбуки, чтобы никому не сделать хуже.

Решение 3 - изменение ширины

При изменении ширины опять же страдает скорость, если с 80 на 40 поменять, то скорость падает с 600мегабит до 300 по воздуху, при этом на всех устройствах сразу.

Выводы

Изменение ширины канала, переключение 802.11ax->802.11ac (на wifi5) значительно повышает стабильность, но уменьшает скорость для всех

Изменение на 2.4ггц еще сильнее уменьшает скорость и повышает стабильность, но другие клиенты не страдают.

Изменение канала на 5Ггц самое удачное решение, но нужно подбирать канал.

Успешный эксперимент на одном телефоне не может гарантировать такой же успех на другом, т.к. есть вероятность региона продажи, во всех странах действуют разные правила по допустимым частотам, каналам и т.д., и вероятно радиомодули настроены по-разному или применяются разные модификации.

Последний раз я игрался с Raspberry pi 2 и 3, и технологии за эти годы значительно продвинулись. И памяти 4 гига вместо одного или 2х, и питание type-c, и сеть гигабитная

Установка операционной системы

Вам понадобится флешка microsd и кардридер, желательно прикупить microHDMI-HDMI проводок для наладки.

На официальном сайте качаем образ Ubuntu, для наших нужд нужна серверная версия без графического интерфейса

Форматируем флешку утилитой SD Memory Card Formatter

Далее распаковываем скаченный образ 7zip, внутри должен быть файл img

Качаем утилиту Win32 disk imager, указываем путь до img, указываем диск и жмем write

Дальше вставляем флешку контактами в сторону платы, и всё должно заработать, но это пока не всё.

При первом старте система сама делает ресайз, в результате чего раздел занимает всё место на диске

Вариант подключения через отладочный порт без монитора

Иногда достаточно неудобно отлаживать систему, подключаться к сети, надо клавиатуру переткнуть со своего компа и монитор и в процессе гугления туда обратно переключаться, но если у вас есть программатор или usb-ttl конвертер, такие модули на том же озоне можно купить за 150 рублей.

На плате апельсинки есть три пина RX, TX и GND, нужно подключить RX и TX крест-накрест, т.е. на программаторе RX подключаем к TX на одноплатнике, а TX наоборот к RX и GND соединяем.

Далее, смотрим в диспетчере устройств номер com-порта

Открываем программу Putty, выбираем serial, прописываем наш COM6, скорость 115200

Теперь можем видеть процесс загрузки, настроить сеть. работать в консоли как по ssh, но при этом имея полный доступ к локальному терминалу как с монитором и клавиатурой

Первые настройки

Wifi

Пароль root = orangepi

Воспользуемся нетворк-манагером и его консольным интерфейсом

Первый вариант - более графический

Первый вариант - вводим в терминале команду nmtui и видим вот такой псевдографический интерфейс, тут можно найти сеть, подколючиться к ней, отредактировать соединение, например, задать статический айпи, всё это будет само подключаться при перезагрузке.

Таким же методом можно и проводное подключение настроить, быстро и удобно...

Вариант 2 - через консольный интерфейс

Второй вариант больше для сервисных вещей, допустим, роутер отвалился и вам нужно восстановить соединение, или в качестве резервного канала есть другой роутер с мобильной сетью...

Подробное описание есть на хабре и еще тут документация с параметрами тонкой настройки в тонкой настройке можно задать время ожидания интерфейса, количество попыток переподключения и вроде как точный bsid вайфая, когда у вас бесшовная сеть или 5ггц+2.4ггц с одним именем, то тут можно явно потвикать качество соединения.

sudo nmcli device wifi connect 'WiFINetworkName' ifname wlan0

sudo nmcli device wifi list

nmcli connection show

nmcli connection edit Pavlik-wifi

Ну и если по какой-то причине соединение вдруг отвалилось, то есть команда подключения

nmcli connection up Pavlik-wifi

Иногда у меня такое возникало, когда выключал питание одноплатника простым выдергиванием питания, то при дальнейшем включении интернет не поднимался, написал такой скрипт, который ждет 15 секунд, отправляет один пинг на роутер и если он неудачный, то запускает подключение, а если пинг идет, то снова спит 15 секунд, данное решение на коленке за 3 секунды накидано, но пока работает

#!/bin/bash
connection_name="Pavlik-wifi"
period=15


while sleep $period; do
/bin/ping 192.168.1.1 -c1 || nmcli connection up $connection_name
done

Далее, этот скрипт нужно сделать исполняемым

chmod +x имя файла

И прописать в /etc/rc.local с амперсандом на конце, чтобы скрипт не стопорил дальнейший процесс и уходил в фон.

Настройка системы

У меня достаточно встроенное решение, когда один одноплатник крутит один jar файл с Java-приложением, поэтому захотелось оптимизировать систему, сильно заморачиваться с перепиливанием инициализации не хочу, но могу выпилить некоторые сервисы из автозапуска, которые замедляют время включения аппарата.

Для начала, нужно обновиться, т.к. образ системы собран не сегодня и наверно даже не неделю назад, то появилось много обновлений.

sudo su

apt update && apt upgrade

В серверной убунте установлено из коробки всё подряд, даже докер, опенвпн и т.д... Мне это всё особо не нужно. В т.ч. встроенный конфигуратор и блютуз.

apt purge openvpn docker-ce docker-ce-cli containerd.ioy vim-runtime gcc-12 gcc-11 cpp-12 g++-11 cpp-11 alsa-utils nfs-common dnsmasq bluetooth bluez bluez-tools

apt autoremove

Дополнительно

• http://www.orangepi.org/orangepiwiki/index.php/Orange_Pi_Zero_3 - мануал официальный

Первый опыт

Просмотр видео

20 гиговое видео транскодирует достаточно хорошо, неподдерживаемый на моем телевизоре формат показывает без зависаний. На телевизоре установлено приложение DS Video

Скорость копирования данных

По гигабитной сети скорость копирования информации около 112 мегабайт в сек, что соответствует 896 мегабитам (примерно предел для дешевого коммутатора) и примерно равно скорости одного диска, жесткие диски WD Red со скоростью вращения 5400 примерно 115-120 мегабайт в сек имеют скорость, не знаю зачем все требуют 2.5 или 10 гигабит, если только в рейд-0 с удвоением скорости. По wifi  жмет только 25 мегабайт в сек, это около 200 мегабит, но у меня на компе не самая лучшая антенна и сетевая карта (на прием 400, на отдачу 200-250).

Софт

По софту тут хоть и не всё идеально, но лучше конкурентов, всё стабильно, куча приложений для мобильных устройств, куча пакетов в базовом репозитории + есть репозиторий community, для его подключения нужно в веб-интерфейсе зайти в центр пакетов - источники пакетов, нажать добавить и вписать адрес http://packages.synocommunity.com/

Сама операционная система ставится на диски и оперативно обновляется.

Полезные пакеты из репозитория community

SynoCli Monitor tools добавит такие вещи как watch, iperf и другие

SynoCli File tools добавит множество полезных программ и утилит, среди которых удобный редактор nano

Борьба с шумом

В первую очередь, гудение самих дисков, стоит приподнять устройство в руках - звук уменьшается и практически не слышен, только шум вентилятора, поэтому, можно подложить мягкий материал и станет значительно тише, поверхностью под устройством не будет жужжать.

Если хранилище используется редко, например раз в неделю зайти с телефона резервную копию сделать, то можно настроить гибернацию дисков

Только слишком частую наверно лучше не делать, частые остановки и раскрутки дисков не очень полезны.

Отдельная проблема - сам вентилятор, тут установлен вентилятор на 92мм, очень шумный, его слышно даже на слабых оборотах, как его усмирить будет далее...

Для регулировки профиля вентилятора нужно открыть файлик /usr/syno/etc.defaults/scemd.xml

<?xml version="1.0" encoding="UTF-8"?>
<scemd>
<fan_config hibernation_speed="UNKNOWN" type="DUAL_MODE_HIGH" threshold="6" period="20">
.......
</fan_config>

<!--
это для тихого профиля 
hibernation_speed="STOP" - остановка вентилятора при остановке дисков  
-->
<fan_config hibernation_speed="STOP" type="DUAL_MODE_LOW" threshold="6" period="20">
  <!--
	0 градусов - 10% скорость
    46 градусов - 15% скорость
    ....
    при 61 градусах аварийное выключение
  -->
  <disk_temperature action="NONE" fan_speed="10%40hz">0</disk_temperature>
  <disk_temperature action="NONE" fan_speed="15%40hz">46</disk_temperature>
  <disk_temperature action="NONE" fan_speed="35%40hz">52</disk_temperature>
  <disk_temperature action="NONE" fan_speed="60%40hz">55</disk_temperature>
  <disk_temperature action="NONE" fan_speed="99%40hz">58</disk_temperature>
  <disk_temperature action="SHUTDOWN" fan_speed="99%40hz">61</disk_temperature>
  <!--аналогично для температуры процессора-->
  <cpu_temperature action="NONE" fan_speed="10%40hz">0</cpu_temperature>
  <cpu_temperature action="NONE" fan_speed="35%40hz">70</cpu_temperature>
  <cpu_temperature action="NONE" fan_speed="99%40hz">80</cpu_temperature>
  <cpu_temperature action="SHUTDOWN" fan_speed="99%40hz">105</cpu_temperature>
</fan_config>
        
.... дальше не интересно

После изменения конфига нужно перезагрузиться командой reboot

В веб-интерфейсе странный баг, всегда показывает ровно 40 градусов

Не совсем уверен, но похоже настоящая температура определяется вот так

cat /sys/class/hwmon/hwmon0/temp1_input

43522

И судя по всему, у меня 43.5 градусов

Узнать температуру дисков можно так, строчка Temperature_Celsius

 smartctl -A -d sat  /dev/sda
 smartctl -A -d sat  /dev/sdb

На всякий случай, нагрузить процессор можно выполнив несколько раз

dd if=/dev/urandom | bzip2 -9 > /dev/null &

Настройка WakeOnLan в BIOS

Первым делом, нужно включить поддержку WOL в биосе, иногда эта настройка находится в настройках питания и так и называется, но вот на материнских платах ASUS нужно зайти в пункт APM Configuration и там включить Power In by PCI-E

Включение поддержки WOL на Debian

Открываем /etc/network/interfaces и прописываем там опцию ethernet-wol g

# The primary network interface
allow-hotplug enp3s0
iface enp3s0 inet static
        address 192.168.0.8/24
        gateway 192.168.0.1
        dns-nameservers 192.168.0.1
        ethernet-wol g

Далее перезагружаем и выключаем сервер

reboot
...
shutdown -h now

А с другого компа выполняем команду wakeonlan с указанием mac-адреса

 wakeonlan 05:43:1b:98:4b:60

Особенности работы WOL

Функция wakeonlan может не работать если вы выключите из розетки и снова включите компьютер, т.е. он должен быть предварительно выключен из операционной системы в определенный режим ожидания. Поэтому, лучшим решением будет настройка включения после потери питания.

Если электроэнергия мигнет, то сервер включится, выключить его можно по ssh, а включить по wakeonlan.

Bash скрипт для включения и ожидания

Удобно не запоминать mac-адреса включаемых машин и не запускать руками пинг в ожидании готовности.

#!/bin/bash
case $1 in

bigbro)
targ_mac="04:42:1a:97:4b:66";
targ_ip="192.168.0.33"
;;

synology)
targ_mac="05:44:1b:93:4b:65";
targ_ip="192.168.0.66"
;;

*)
cat << EOF
Fignya params!!!
Use: wol bigbro | wol synology

EOF

exit;
;;

esac


wait_ip(){
i=0;
while [ $i -lt 40 ];
do
i=$((i+1))
ping -q -c1 ${targ_ip} &>/dev/null && echo "host is enabled!!!" && break || echo host ${targ_ip} is disabled, waiting ${i}/40...
sleep 3
echo "wait enable host"
done
}


wakeonlan ${targ_mac} && wait_ip

Данный скрипт накатан на коленке, поэтому не особо хорош, но свои задачи выполняет, в моей сети постоянно работает только экономичный мини-пк потребляющий около 5 ватт, я подключаюсь к нему и с него стартую команду типа wol bigbro которая отправляет сигнал включения на комп и ждет пока он включится, далее пишет что комп готов и я могу подключиться к компу.

Вчера в отзывах к одному жесткому диску увидел в поле недостатков момент что у диска на 12Тб по факту только 10.9 в системе.

Издавна, в жестких дисках указывались не такие байты, которым нас учили на информатике. Нас учили что в одном килобайте 1024 байт, в одном мегабайте 1024 килобайт, в одном гигабайте 1024 мегабайт и в одном террабайте 1024 гигабайт.

Но производители дисков искользуют систему си, поэтому приставка тера для них это 12 нулей или *10^12, точнее это не тарабайт, а тебибайт.

12000000000000/1024/1024/1024/1024 = 10.91 терабайт

упрощенно вот так

Получим примерно такую таблицу дисков

На самом деле и эта цифра может отличаться, я уже писал раннее о зарезервированном пространстве в Linux, в Windows тоже иногда создаются дополнительные разделы.

Создание массива

На всякий случай потрем суперблоки, чтобы не возникало ошибок после перезагрузки, на основе этих суперблоков при старте собираются массивы, я один раз совершил ошибку, расформировал Raid-1 и собрал Raid-0, а при перезагрузке получил совсем не тот массив что собирал с поломанными данными

В данном примере рассматриваем создание массива из цельных дисков, если указывать номер раздела, то можно тоже самое делать с разделами, это удобно при зеркалировании дисков разных размеров, например есть диск на 10 террабайт и на 5, можно на двух дисках создать разделы по 5 террабайт и зазеркалить и еще 5 террабайт будут без зеркала или подключены в другой массив...

mdadm --zero-superblock /dev/sdx
mdadm --zero-superblock /dev/sdy

Если выдает ошибку, значит суперблоков нет, всё ок.

Затрем метаданные на дисках

wipefs --all --force /dev/sdx
wipefs --all --force /dev/sdy

Создаем устройство

• -l 0 - RAID-0
• -n 2 - два диска в массиве

mdadm --create --verbose /dev/md8 -l 0 -n 2 /dev/sdd /dev/sda

Создаем файловую систему на md устройстве

mkfs.ext4 /dev/md8

Расформирование массива

Если вдруг захотели из Raid1 переделать в Raid0, то действия следующие

Отмонтируем диск

umount /dev/md8

Остановим массив

mdadm -S /dev/md8

Далее, чтобы при рестарте системы у нас не собрался непредсказуемый массив основанный на устаревших данных в дисках, нужно затереть суперблоки

mdadm --zero-superblock /dev/sdx1
mdadm --zero-superblock /dev/sdy1

Обновление конфигурации

Бывает такое что после удаления и вновь создания массивов возникают проблемы с нумерацией, когда вместо md1 создается md127, решается это примерно так

mdadm --examine --scan >> /etc/mdadm/mdadm.conf

Далее нужно открыть файл /etc/mdadm/mdadm.conf и удалить или закомментировать там дублирующие старые строчки, а потом обновить initramfs и перезагрузиться

update-initramfs -u
reboot 

Вывод из режима read-only

Для raid5 может такое произойти что диск синхронизировался, вы не дождались полной синхронизации и перезагрузили компьютер

md5 : active (auto-read-only) raid5 sdd[2] sda[1] sdc[4] sdf[0]
      52734587904 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/3] [UUU_]
      bitmap: 0/131 pages [0KB], 65536KB chunk

Чтобы вывести диск из этого режима нужно выполнить команду

mdadm -w /dev/md5

Иногда рейд переходит в автоматический RO лишь по причине что раздел не примонтирован, стоит его смонтировать и всё будет как обычно.

Остановка синхронизации

Если вдруг ваши диски синхронизировались и вы перезагрузили компьютер, то синхронизация может остановиться и вы увидите resync=PENDING

echo idle > /sys/block/md5/md/sync_action

Ускорение синхронизации

Если вы синхронизируете большой массив, например диски по 18Тб и скорость синхронизации показывает около 100 мегабайт в сек, сервер в данный момент ничем не занят и его можно загрузить фоновыми задачами, в промышленной эксплуатации такое не рекомендуется, но в момент начальной настройки можно ускорить процесс, можно сделать скорость синхронизации от 500 до 600

echo 500000 > /proc/sys/dev/raid/speed_limit_min
echo 600000 > /proc/sys/dev/raid/speed_limit_max

действует до первой перезагрузки потом будет от 10 до 200

Особые параметры при форматировании

• stride - шаг
• stripe-width - ширины полосы

stribe = chunk_size / размер блока

stripe-width = количество_дисков * stribe

Размер блока задается при форматировании, он будет 4КиБ = 4096 байт

Chunk_size можно узнать командой

mdadm --detail /dev/md10 | grep 'Chunk Size'
        Chunk Size : 512K

На Raid10 при 4х дисках с данными только 2, вторые 2 его зеркальная копия, поэтому дисков будем считать 2, а не 4.

stribe = 512/4 = 128

stripe-width = 128*2 = 256

Итого команда форматирования будет выглядеть так

mkfs.ext4 -v -m 0.01 -b 4096 -E stride=128,stripe-width=256 /dev/md0

Опции монтирования

/dev/md5 /mnt/data ext4 nodiratime,noatime,defaults,discard,commit=120 1 2

Еще дополнительно откопал статью по доп возможностям рейда

• https://linuxshare.ru/docs/admin/ud_sraid.html

Получается что 400 гигабайт ушло непонятно куда? Это примерно 5+% емкости, но при объемах под 8 террабайт и больше объем может показаться внушительным.

Решается такой командой, действует на примонтированном устройстве

tune2fs -m 1 /dev/md1

Но при желании можно совсем не резервировать место, в моем случае это не системный диск, а "для хлама"

tune2fs -m 0 /dev/md1

В итоге получим примерно такую картину

apt install samba

Далее, нам нужно определиться в какую папку будем складывать и под каким пользователем будем хранить данные, допустим, у меня есть рейд массив по пути /mnt/disk1, я создам там две папки - media и documents

cd /mnt/disk1
mkdir media documents

Структура примерно такая

---------------
├──/mnt/disk1
│   ├── /media - всякие фотки
│   ├── /documents - всякие документы

Узнаем имя нашего интерфейса

ip addr | grep 192.168
    inet 192.168.0.7/24 brd 192.168.1.255 scope global enp42s0

Отредактируем файл /etc/samba/smb.conf

[global]
   bind interfaces only = yes
   deadtime = 15
   disable netbios = yes
   dns proxy = no
   domain master = yes
   encrypt passwords = true
   guest ok = no
   hosts allow = 192.168.0.0/255.255.255.0 127.0.0.1
   hosts deny = all
   interfaces = enp42s0
   invalid users = nobody root
   load printers = no
   max connections = 10
   netbios name = myservername
   preferred master = yes
   preserve case = yes
   printable = no
   server string = Samba Share
   socket options = TCP_NODELAY IPTOS_LOWDELAY SO_RCVBUF=131072 SO_SNDBUF=131072
   strict sync = no
   sync always = no
   syslog = 0
   workgroup = WORKGROUP
   log file = /dev/null
   log level = 0
   min protocol = SMB2


[Media]
   browseable = yes
   path = /mnt/disk1/media
   guest ok = no
   create mask = 0750
   writable = yes
   
[Docs]
   browseable = yes
   path = /mnt/disk1/documents
   guest ok = no
   create mask = 0750
   writable = yes

Добавим нашего нового пользователя в samba, пароль желательно отличный от системного

smbpasswd -a user01

А потом перезапустим сервер samba

service smbd restart

Далее жмем win+R печатаем там адрес нашего сервера \\192.168.0.7, вводим логин и пароль и видим две наши папки

Можно кликнуть правой кнопкой и подключить как сетевой диск.

Важно дать доступ своему пользователю (user01) к этим папкам

chown -R user01 /mnt/disk1/media
chown -R user01 /mnt/disk1/documents

import org.apache.http.HttpEntity;
import org.apache.http.HttpResponse;
import org.apache.http.client.HttpClient;
import org.apache.http.client.methods.HttpPost;
import org.apache.http.entity.StringEntity;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.ssl.SSLContexts;
import org.apache.http.util.EntityUtils;
import javax.net.ssl.SSLContext;
import java.io.File;
import java.io.FileInputStream;
import java.io.InputStream;
import java.nio.charset.StandardCharsets;
import java.security.KeyStore;



public class Http3 {

    private static final String KEYSTOREPATH = "keystore.jks"; // or .p12
    private static final String TRUSTSTOREPATH = "truststore.jks"; // or .p12
    private static final String KEYSTOREPASS = "123123";
    private static final String KEYPASS = "123123";

    KeyStore readStore() throws Exception {
        try (FileInputStream trustKeyStoreFile = new FileInputStream(new File(KEYSTOREPATH))) {
            KeyStore keyStore = KeyStore.getInstance("JKS"); // or "PKCS12"
            keyStore.load(trustKeyStoreFile, KEYSTOREPASS.toCharArray());
            return keyStore;
        }

    }

    KeyStore readTrust() throws Exception {
        try (FileInputStream trustStoreStream2 = new FileInputStream(new File(TRUSTSTOREPATH))) {
            KeyStore trustStore = KeyStore.getInstance("JKS"); // or "PKCS12"
            trustStore.load(trustStoreStream2,KEYSTOREPASS.toCharArray());
            return trustStore;
        }
    }




    public void query() throws Exception {

        System.out.println(System.getProperty("user.dir"));
        System.out.println(KEYSTOREPATH);

        SSLContext sslContext = SSLContexts.custom()
                .loadTrustMaterial(readTrust(),null)
                //.loadTrustMaterial(null, new TrustSelfSignedStrategy())
                //.loadTrustMaterial(null, (x509CertChain, authType) -> true) //вариант принимающий всё
                .loadKeyMaterial(readStore(), KEYPASS.toCharArray()) // use null as second param if you don't have a separate key password
                .build();


        HttpClient httpClient = HttpClients.custom().setSSLContext(sslContext).build();

        HttpPost query = new HttpPost("https://192.168.200.10/index.php?koko=1");
        query.setHeader("р1","yes"); //заголовок
        query.setEntity(new StringEntity("ratatatat")); //тело


        HttpResponse response = httpClient.execute(query);
        HttpEntity entity = response.getEntity();

        System.out.println("----------------------------------------");
        System.out.println(response.getStatusLine());
        String responseBody = EntityUtils.toString(response.getEntity(), StandardCharsets.UTF_8);
        System.out.println("Response body: " + responseBody);
        EntityUtils.consume(entity);
    }
}

Подготовительные настройки

apt install openssl

Создадим каталоги, т.к. файлы достаточно секретные, нам нужно хранить все исходники в укромном месте, например, в папке /root

mkdir -p /root/certs/{ca,intermediate,clients,servers}/{certs,crl,newcerts,keys}

touch /root/certs/{ca,intermediate}/{index.txt,openssl.cnf}
echo 1000 > /root/certs/ca/serial
echo 1000 > /root/certs/intermediate/serial

Создание корневого сертификата

cd /root/certs/ca
nano openssl.cnf

[ ca ]
default_ca = CA_default

[ CA_default ]
# Directory and file locations.
dir               = /root/certs/ca
certs             = $dir/certs
crl_dir           = $dir/crl
new_certs_dir     = $dir/newcerts
database          = $dir/index.txt
serial            = $dir/serial
RANDFILE          = $dir/keys/.rand

# The root key and root certificate.  
 private_key       = $dir/keys/ca.key.pem  
 certificate       = $dir/certs/ca.cert.pem

# For certificate revocation lists.  
 crlnumber         = $dir/crlnumber  
 crl               = $dir/crl/ca.crl.pem  
 crl_extensions    = crl_ext  
 default_crl_days  = 30

# SHA-1 is deprecated, so use SHA-2 instead.  
 default_md        = sha256

name_opt          = ca_default  
 cert_opt          = ca_default  
 default_days      = 375  
 preserve          = no  
 policy            = policy_strict

[ policy_strict ]
# The root CA should only sign intermediate certificates that match.
# See the POLICY FORMAT section of man ca.
countryName             = match
stateOrProvinceName     = match
organizationName        = optional
organizationalUnitName  = optional
commonName              = optional
emailAddress            = optional


[ req ]
# Options for the `req` tool (`man req`).
default_bits        = 2048
distinguished_name  = req_distinguished_name
string_mask         = utf8only

# SHA-1 is deprecated, so use SHA-2 instead.  
default_md          = sha256

# Extension to add when the -x509 option is used.  
x509_extensions     = v3_ca

[ req_distinguished_name ]
# See https://en.wikipedia.org/wiki/Certificate_signing_request.
countryName                     = Country Name (2 letter code)
stateOrProvinceName             = State or Province Name
localityName                    = Locality Name
organizationName                = Organization Name
organizationalUnitName          = Organizational Unit Name
commonName                      = Common Name
emailAddress                    = Email Address

# Optionally, specify some defaults.  
countryName_default             = RU  
stateOrProvinceName_default     = Russia  
localityName_default            = Russia  
organizationName_default       = Tech-Research.RU  
#organizationalUnitName_default  =  
#emailAddress_default            =

[ v3_ca ]
# Extensions for a typical CA (`man x509v3_config`).
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid:always,issuer
basicConstraints = critical, CA:true
keyUsage = critical, digitalSignature, cRLSign, keyCertSign

[ v3_intermediate_ca ]
# Extensions for a typical intermediate CA (`man x509v3_config`).
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid:always,issuer
basicConstraints = critical, CA:true, pathlen:0
keyUsage = critical, digitalSignature, cRLSign, keyCertSign


[ usr_cert ]
# Extensions for client certificates (`man x509v3_config`).
basicConstraints = CA:FALSE
nsCertType = client, email
nsComment = "OpenSSL Generated Client Certificate"
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid,issuer
keyUsage = critical, nonRepudiation, digitalSignature, keyEncipherment
extendedKeyUsage = clientAuth, emailProtection



[ server_cert ]
# Extensions for server certificates (`man x509v3_config`).
basicConstraints = CA:FALSE
nsCertType = server
nsComment = "OpenSSL Generated Server Certificate"
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid,issuer:always
keyUsage = critical, digitalSignature, keyEncipherment
extendedKeyUsage = serverAuth


[ crl_ext ]
# Extension for CRLs (`man x509v3_config`).
authorityKeyIdentifier=keyid:always

[ ocsp ]
# Extension for OCSP signing certificates (`man ocsp`).
basicConstraints = CA:FALSE
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid,issuer
keyUsage = critical, digitalSignature
extendedKeyUsage = critical, OCSPSigning

Генерим приватный ключ

openssl genrsa -aes256 -out keys/ca.key.pem 4096

Создаем самоподписанный сертификат, корневой серт сам себя подписывает

openssl req -config openssl.cnf \
-key keys/ca.key.pem \
-new -x509 -days 7300 -sha256 -extensions v3_ca \
-out certs/ca.cert.pem

Промежуточный сертификат

Обычно используют промежуточный сертификат, точнее его секретную часть, чтобы подписывать серверные и клиентские сертификаты, корневой можно удалить и спрятать, а потом генерить себе сертификаты уже промежуточным

 cd /root/certs/intermediate/
 echo 1000 > crlnumber
 mkdir csr
 nano openssl.cnf

[ ca ]
# `man ca`
default_ca = CA_default

[ CA_default ]
# Directory and file locations.
dir               = /root/ca/intermediate
certs             = $dir/certs
crl_dir           = $dir/crl
new_certs_dir     = $dir/newcerts
database          = $dir/index.txt
serial            = $dir/serial
RANDFILE          = $dir/private/.rand

# The root key and root certificate.
private_key       = $dir/private/intermediate.key.pem
certificate       = $dir/certs/intermediate.cert.pem

# For certificate revocation lists.
crlnumber         = $dir/crlnumber
crl               = $dir/crl/intermediate.crl.pem
crl_extensions    = crl_ext
default_crl_days  = 30

# SHA-1 is deprecated, so use SHA-2 instead.
default_md        = sha256

name_opt          = ca_default
cert_opt          = ca_default
default_days      = 375
preserve          = no
policy            = policy_loose

[ policy_strict ]
# The root CA should only sign intermediate certificates that match.
# See the POLICY FORMAT section of `man ca`.
countryName             = match
stateOrProvinceName     = match
organizationName        = match
organizationalUnitName  = optional
commonName              = supplied
emailAddress            = optional

[ policy_loose ]
# Allow the intermediate CA to sign a more diverse range of certificates.
# See the POLICY FORMAT section of the `ca` man page.
countryName             = optional
stateOrProvinceName     = optional
localityName            = optional
organizationName        = optional
organizationalUnitName  = optional
commonName              = supplied
emailAddress            = optional

[ req ]
# Options for the `req` tool (`man req`).
default_bits        = 2048
distinguished_name  = req_distinguished_name
string_mask         = utf8only

# SHA-1 is deprecated, so use SHA-2 instead.
default_md          = sha256

# Extension to add when the -x509 option is used.
x509_extensions     = v3_ca

[ req_distinguished_name ]
# See <https://en.wikipedia.org/wiki/Certificate_signing_request>.
countryName                     = Country Name (2 letter code)
stateOrProvinceName             = State or Province Name
localityName                    = Locality Name
0.organizationName              = Organization Name
organizationalUnitName          = Organizational Unit Name
commonName                      = Common Name
emailAddress                    = Email Address

# Optionally, specify some defaults.  
countryName_default             = RU  
stateOrProvinceName_default     = Russia  
localityName_default            = Russia  
organizationName_default       = Tech-Research.RU  
#organizationalUnitName_default  =  
#emailAddress_default            =

[ v3_ca ]
# Extensions for a typical CA (`man x509v3_config`).
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid:always,issuer
basicConstraints = critical, CA:true
keyUsage = critical, digitalSignature, cRLSign, keyCertSign

[ v3_intermediate_ca ]
# Extensions for a typical intermediate CA (`man x509v3_config`).
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid:always,issuer
basicConstraints = critical, CA:true, pathlen:0
keyUsage = critical, digitalSignature, cRLSign, keyCertSign

[ usr_cert ]
# Extensions for client certificates (`man x509v3_config`).
basicConstraints = CA:FALSE
nsCertType = client, email
nsComment = "OpenSSL Generated Client Certificate"
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid,issuer
keyUsage = critical, nonRepudiation, digitalSignature, keyEncipherment
extendedKeyUsage = clientAuth, emailProtection

[ server_cert ]
# Extensions for server certificates (`man x509v3_config`).
basicConstraints = CA:FALSE
nsCertType = server
nsComment = "OpenSSL Generated Server Certificate"
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid,issuer:always
keyUsage = critical, digitalSignature, keyEncipherment
extendedKeyUsage = serverAuth

[ crl_ext ]
# Extension for CRLs (`man x509v3_config`).
authorityKeyIdentifier=keyid:always

[ ocsp ]
# Extension for OCSP signing certificates (`man ocsp`).
basicConstraints = CA:FALSE
subjectKeyIdentifier = hash
authorityKeyIdentifier = keyid,issuer
keyUsage = critical, digitalSignature
extendedKeyUsage = critical, OCSPSigning

Генерим приватный ключ

openssl genrsa -aes256 \
-out keys/intermediate.key.pem 4096

Создаем запрос на генерацию подписанного ключа

openssl req -config openssl.cnf -new -sha256 \
-key keys/intermediate.key.pem \
-out csr/intermediate.csr.pem

Подписываем

openssl ca -config ../ca/openssl.cnf -extensions v3_intermediate_ca \
-days 3650 -notext -md sha256 \
-in csr/intermediate.csr.pem \
-out certs/intermediate.cert.pem

Следующей командой можно сверить доверие от корневого к промежуточному сертификату

openssl verify -CAfile ../ca/certs/ca.cert.pem certs/intermediate.cert.pem

Генерация серверного сертификата

Если убрать опцию -aes256 то ключ будет без пароля и будет меньше заморочек с веб-сервером

openssl genrsa -aes256 -out keys/192.168.200.10.key.pem 2048

openssl req -config openssl.cnf \
-key keys/192.168.200.10.key.pem \
-new -sha256 -out csr/192.168.200.10.csr.pem

openssl ca -config openssl.cnf \
-extensions server_cert -days 375 -notext -md sha256 \
-in csr/192.168.200.10.csr.pem \
-out certs/192.168.200.10.cert.pem

Тоже самое можно повторить, указав вместо server_cert usr_cert

Генерация клиентских сертификатов

Мы сгенерируем сразу два сертификата client1 и client2

  openssl genrsa -out keys/client1.key.pem 2048
  openssl genrsa -out keys/client2.key.pem 2048
  
  
  openssl req -config openssl.cnf -key keys/client1.key.pem -new -sha256 -out csr/client1.csr.pem
  openssl req -config openssl.cnf -key keys/client2.key.pem -new -sha256 -out csr/client2.csr.pem
  
  openssl ca -config openssl.cnf -extensions usr_cert -days 375 -notext -md sha256 -in csr/client1.csr.pem -out certs/client1.cert.pem
  openssl ca -config openssl.cnf -extensions usr_cert -days 375 -notext -md sha256 -in csr/client2.csr.pem -out certs/client2.cert.pem

Упаковка клиентских сертификатов

Для начала создадим цепочку из нашего промежуточного и корневого CA

cat /root/certs/intermediate/certs/intermediate.cert.pem /root/certs/ca/certs/ca.cert.pem > /root/certs/intermediate/ca_keychain.crt

openssl pkcs12 -export -in certs/client1.cert.pem -inkey keys/client1.key.pem -certfile ca_keychain.crt -out client1.p12 -passout pass:123321

openssl pkcs12 -export -in certs/client2.cert.pem -inkey keys/client2.key.pem -certfile ca_keychain.crt -out client2.p12 -passout pass:123321

Вводные данные

Итак, что у нас есть:

• Некая машина для опытов с виртуализацией: Windows 10 (можно использовать и Linux и Mac по вкусу)
• Виртуализатор, я буду использовать Hyper-V
• Клиентское ПО для проброса запросов
• Софт для подключения по ssh - можно использовать обычный PowerShell, можно Windows Terminal

В данных экспериментах мы не будем использовать "правильные" сертификаты, такие как LetsEncrypt, наша цель вообще разобраться как их выпускать, подписывать и т.д.

Создание и настройка виртуальной машины на Hyper-V

Заходим в приложения, там справа будет пункт "Программы и компоненты"

Далее выбираем пункт "включение или отключение компонентов"

Теперь нужно активировать Hyper-V в компонентах, нажать ОК и перезагрузиться

Будьте внимательны, при активации Hyper-V вы не сможете запускать другие варианты виртуализаторов, такие как VirtualBox, Vmware Player и др., если у вас используется другая система виртуализации, то лучше используйте ее и пропустите этот раздел

После перезагрузки запускаем Диспетчер Hyper-V и создаем наш первый виртуальный коммутатор

Мы сделали коммутатор с внутреней сетью, который имеет доступ к нашей машине и другим виртуалкам в этом коммутаторе, будет использовать NAT

Далее нужно зайти в свойства сетей и прописать для нашего адаптера ip адрес, когда то можно было использовать Default Switch для этих целей, но с последними обновлениями он стал самостоятельно переопределять адреса.

Подсеть специально создана 192.168.200.0/24 чтобы не пересекаться с моей внутренней локалкой 192.168.0.0/24, а шлюз не указан с той целью, чтобы не портить существующих маршрутов на хост-машине.

Теперь остается добавить NAT (SNAT) чтобы наши машины из 200 сети подменялись айпишником хост-машины и ответы прилетали обратно из внешней сети.

Открываем PowerShell с правами администратора

Вводим команду

New-NetNat -Name nat1 -InternalIPInterfaceAddressPrefix 192.168.200.0/24

Подробнее об DNAT (пробросе портов) можно почитать тут https://tech-research.ru/nastroika-sieti-v-hyper-v-chieriez-nat-probros-portov/

На этом этапе считаем что наш виртуализатор готов к использованию сети по NAT...

Установка Linux (Debian)

Качаем iso-образ Debian net install с официального сайта

Далее создаем новую виртуальную машину

После создания системы нужно правой кнопкой по ней кликнуть и кое-что подкрутить

Далее стартуем и ставим систему, выбираем просто Install

Далее несколько шагов, там всё по своему усмотрению

Через несколько секунд система предложит нам извлечь сидиром и перезагрузиться....

Установка софта

Изначально можно залогиниться под root прямо из окошка Hyper-V, а можно зайти по ssh под пользователем и набрать команду su

Все действия выполняем от суперпользователя, иначе нужно установить sudo и добавлять перед каждой командой sudo

Первое, что нужно в новой системе, это навести порядок в репозиториях

nano /etc/apt/sources.list

По умолчанию у нас что-то типа такого

deb http://deb.debian.org/debian/ bullseye main
deb-src http://deb.debian.org/debian/ bullseye main

deb http://security.debian.org/debian-security bullseye-security main
deb-src http://security.debian.org/debian-security bullseye-security main

deb http://deb.debian.org/debian/ bullseye-updates main
deb-src http://deb.debian.org/debian/ bullseye-updates main

У нас подключены только ветки main, но нет contrib и non-free, поэтому список пакетов ограничен, добавим их

Далее сохраняем файл в нано через ctrl+w, выходим ctrl+x

Теперь обновим репозиторий и систему

apt update && apt upgrade

Далее поставим самое необходимое

apt install nginx php-fpm

Конфигурация NGINX + FPM

Данная конфигурация похожа больше на Hello World, в проме требуются более тщательные тонкие настройки, тут у нас нет деления по доменным именам, только один хост, к которому привязан некий простейший обработчик на PHP

server {
        listen 80 default_server;
        listen [::]:80 default_server;

        # SSL configuration
        #
        listen 443 ssl default_server;
        ssl_certificate /opt/ssl/server.crt;
        ssl_certificate_key /opt/ssl/server.key;
        #mtls
        ssl_client_certificate /opt/ssl/trust.crt;
        ssl_trusted_certificate /opt/ssl/client1.crt;
        ssl_verify_client optional;

        root /www;

        index index.php index.html index.htm index.nginx-debian.html;

        server_name _;

        location / {
                try_files $uri $uri/ /index.php?$args;
        }


        location  ~ \.php$ {
                include snippets/fastcgi-php.conf;

                fastcgi_pass unix:/run/php/php7.4-fpm.sock;
                fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;

                fastcgi_param           X-SSL-CERT        $ssl_client_cert;
                fastcgi_param           X-SSL-VERIFIED    $ssl_client_verify;
                fastcgi_param           X-SSL-CLIENT-DN   $ssl_client_s_dn;
                fastcgi_param           X-SSL-ISSUER-DN   $ssl_client_i_dn;
                fastcgi_param           HTTP_PROXY      "";
                fastcgi_param SSL_CLIENT_SERIAL $ssl_client_serial;
        }
}

<pre>
<?php print_r($_SERVER); ?>
POST=
<?php print_r($_POST)?>
GET=
<?php print_r($_GET)?>
RAW=
<?=file_get_contents('php://input')?>
</pre>

Конечно, можно просто в докере разворачивать то что нужно или в виртуалке, но в случае с переездом с x86 на m1 не всё и сразу было доступно, виртуалбокс так вроде и не завезли, базы данных типа mysql поздно завезли, в общем, программировать на настроеном сервере достаточно удобно, к тому же - можно еще и на ресурсах локального ноутбука экономить, обойтись устройством с 4 гигами оперативки... Но сегодня задался вопросом - а можно ли кодить со смартфона или планшета?

В каком то виде можно, есть облачная код-платформа на основе VSCode, которая работает в обычных браузерах

Первым делом залогинимся

Собрал я комп, первые дни просто гонял стресс-тесты, ставил драйвера и после всех манипуляций выключал комп, проблем не было даже при долговременных нагрузках.

Первый звоночек

Включил с утра комп, пока собирался на работу - отходил в душ, поставил видео на паузу, пришел и включил воспроизведение, видео начало дергаться рывками и вообще всё застыло - часы не тикают, мышка не двигается, клавиатура не работает, на мониторе застыла картинка, помогла только перезагрузка. Никаких синих экранов, просто зависает.

Второй случай

Комп остался включеным, а я ушел на работу, прихожу вечером, монитор выключен, пошевелил мышкой - монитор включился, но на мониторе просто черный экран.

Сильно расстроился, начал читать интернет, там и про брак материнских плат и про дефектные процессоры начитался, но в одной из статей наткнулся на совет - включить максимальную производительность, но сразу так не стал делать, сперва залез в свой сбалансированный план электропитания

Обратите внимание, минимальное состояние процессора стоит 0%, я максимум что видел за всю жизнь даже в режимах экономии - 5%

После я поставил и в сбалансированной схеме минмалку, но не на 5%, а сразу с запасом на 15%, чтоб совсем уж не экономилось, но при этом и на 100% всегда не шпарило.

Прошел день - вечером пришел, шевельнул мышкой и он проснулся, при этом проснулся достаточно быстро, видимо, помогло!

Выводы

Из всего этого я так понял что процессор в простое снижает настолкьо низко температуры, что не может справиться с элементарными базовыми задачами и зависает намертво на них.

Что еще может помочь?

Драйвера на чипсет

Заходим на сайт АМД и качаем драйвер на свой чипсет, у меня это B550, на сайте асуса крайние драйвера были старее чем на сайте АМД

Отключение быстрой загрузки

Этот параметр иногда и к синим экранам может приводить

Разгон оперативной памяти

Если вы крутил настройки в биосе, то иногда это может приводить к проблемам, лучше сбросить всё на стандартные настройки и понаблюдать.

Обновление биоса

Желательно ставить самый свежий биос, особенно для 4000-5000 серий, многие материнские платы не поддерживают их, да даже если и поддерживают то криво, плюсом еще недавно обнаружилась проблема когда райзены зависают из-за кривой работы программного TPM модуля, тут еще и Windows желательно обновить.

Охлаждение

У моей материнки чипсет B550 достаточно горячий, температура растет примерно по градусу в минуту, когда я просто добавил снизу на передней панели вентилятор на вдув - температура снизилась до 40 и на такой отметке держится, до этого разогревалось до 66-70 даже без нагрузок, если у вас можно на переднюю панель поставить два вентилятора, то и наверх тоже будет полезно, планки памяти тоже достаточно горячие, особенно при разгонах, хороший продув материнской платы никогда не помешает, даже m2 накопители на материнке скажут спасибо за более низкие температуры.

Конечно, я могу за выходные свою wiki-систему запилить и свою блог-систему, но тут можно упереться в такую ситуацию "решил сделать блог о программировании, но сперва нужно написать свою блог систему", в общем, если есть готовые решения, то запускаем их да и всё, мой блог на Ghost (хотя к нему много вопросов), а вот Wiki будет на wiki.js

Почему не DocuWiki?

Раннее я всегда использовал обычные docuwiki, их достоинство - просто скопировал папку, запустил php и работает, можно локально использовать, можно на домашнем сервере запустить, не требует никаких баз данных, есть и пить не просит, с учетом того что в документацию заходишь раз в полгода то и скорости какой то и хайлоада не требуется.

Есть еще MediaWiki, та самая, на которой википедия работает, для этих вики есть куча плагинов и оформлений, но что-то в этих системах уже определенно устарело и сам синтаксис не нравится.

Что такое Wiki.js

Wiki.JS это вики-система на Node.js, версия 2.5 пока не особо развита, но функционала достаточно. Редактор страниц как обычный визивиг, так и наш любимый MarkDown, даже в текущей блог системе Ghost я привык все списки и заголовки и блоки с кодом набирать на MarkDown

Базовая структура этой системки вполне заточена под создание последовательных структурированных документаций с содержанием, с листингами кода, можно вставлять картинки в целом, всё что нужно...

Но у этой системы чувствуется недоделка, хочется конечно редактор как на Ghost, хочется вставка картинок из буфера обмена прямо в редакторе, тут это можно делать даже в MarkDown режиме, кнопочку слева нажал и ctrl+v

Установка Wiki.js за 5 секунд

В наше время не требуется много сил на развертывание, как это было в моей "молодости", Docker творит чудеса и не особо важно какой у вас линукс, главное чтобы там докер был.

Вариантов с развертыванием PostgreSQL, Mysql и другого не буду рассматривать, меня интересует минималичная документашка под маленький проект и встраиваемая sqlite вполне подойдет

Сперва создадим директорию под наш проект, пусть это будет /www/wiki.js/

mkdir -p /www/wiki.js

#переходим в папку
cd /www/wiki.js

#создаем пустую базу
sqlite3 database.sqlite "VACUUM;"

Далее создадим минимальный конфиг nano  config.yml

port: 3000
db:
  type: sqlite
  storage: /wiki/database.sqlite

#ssl:
#  enabled: false
#  port: 3443

bindIP: 0.0.0.0
logLevel: info
offline: false
ha: false

# ---------------------------------------------------------------------
# Data Path
# ---------------------------------------------------------------------
# Writeable data path used for cache and temporary user uploads.
dataPath: /wiki/data

Запускаем первый вариант - отладочный, консоль заблокируется, но можно уже в браузеер открыть https://192.168.0.2:8080 и провести инсталляцию

вместо 192.168.0.2 ваш ip, вероятно это будет просто localhost если на текущем пк

docker run \
  --rm \
  --publish 8080:3000 \
  --name wiki.js \
  --volume $PWD/database.sqlite:/wiki/database.sqlite \
  --volume $PWD/config.yml:/wiki/config.yml \
  requarks/wiki:2

Если всё ок - жмем `ctrl+c` в консольке и стартуем докер в режиме автозапускаемого фонового сервиса

docker run \
  -d \
  --restart=always \
  --publish 8080:3000 \
  --name wiki.js \
  --volume $PWD/database.sqlite:/wiki/database.sqlite \
  --volume $PWD/config.yml:/wiki/config.yml \
  requarks/wiki:2

В целом всё! Дальше можно настроить проксирование через nginx, добавить https через certbot на nginx, а вместо 8080:3000 в порте можно указать 127.0.0.1:8080:3000 чтобы сразу закрыть прямое обращение минуя nginx.

В тот момент, когда убираешь на дальнюю полочку свой сервер и теперь ему там работать без выключений несколько лет, задумываешься как бы мониторить его состояние. Сегодня мы рассмотрим самые простые методы без использования специализированных средств...

Подопытным будет комп на PROXMOX, это по сути тот же Debian 11, только ядро немного свежее и подточенное для виртуализаций.

Первым делом определим перечень метрик, которые нам интересны

• Температурные показатели - нагрев дисков, нагрев процессора, скорость вентиляторов
• Текущая частота процессора
• Заполненность оперативной памяти
• Заполненность жесткого диска
• Износ диска, метрики smart

Мониторинг датчиков lm-sensors

Самая полезная утилита в Linux, это lm-sensors, она снимает показания с датчиков, может отображать показания температур, напряжения на материнской плате и скорости вентиляторов.

apt install lm-sensors

Дальше нужно продетектить все сенсоры чтобы все нужные модули подгрузились

sensors-detect

На вопросы можно просто enter нажимать, обычно этого достаточно, но можно везде yes вводить

На свежих процессорах Ryzen 5XXX нужно ядро от 5.15 и выше ставить, на 5.13 адекватно мониторинг не работает

На x570 чипах помогает добавление

GRUB_CMDLINE_LINUX_DEFAULT="acpi_enforce_resources=lax"

Дальше выхлоп команды sensors такой

k10temp-pci-00c3
Adapter: PCI adapter
Tctl:         +36.5°C  

nvme-pci-0100
Adapter: PCI adapter
Composite:    +41.9°C  (low  = -273.1°C, high = +81.8°C)
                       (crit = +84.8°C)
Sensor 1:     +41.9°C  (low  = -273.1°C, high = +65261.8°C)
Sensor 2:     +43.9°C  (low  = -273.1°C, high = +65261.8°C)

amdgpu-pci-0300
Adapter: PCI adapter
vddgfx:      731.00 mV 
vddnb:         1.14 V  
edge:         +36.0°C  
power1:        2.00 mW 

nct6793-isa-0290
Adapter: ISA adapter
in0:                    56.00 mV (min =  +0.00 V, max =  +1.74 V)
in1:                     1.86 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in2:                     3.39 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in3:                     3.39 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in4:                   256.00 mV (min =  +0.00 V, max =  +0.00 V)  ALARM
in5:                   136.00 mV (min =  +0.00 V, max =  +0.00 V)  ALARM
in6:                   720.00 mV (min =  +0.00 V, max =  +0.00 V)  ALARM
in7:                     3.39 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in8:                     3.25 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in9:                     1.84 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in10:                  184.00 mV (min =  +0.00 V, max =  +0.00 V)  ALARM
in11:                  136.00 mV (min =  +0.00 V, max =  +0.00 V)  ALARM
in12:                    1.86 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in13:                    1.73 V  (min =  +0.00 V, max =  +0.00 V)  ALARM
in14:                  200.00 mV (min =  +0.00 V, max =  +0.00 V)  ALARM
fan1:                     0 RPM  (min =    0 RPM)
fan2:                   512 RPM  (min =    0 RPM)
fan3:                     0 RPM  (min =    0 RPM)
fan4:                     0 RPM  (min =    0 RPM)
fan5:                     0 RPM  (min =    0 RPM)
SYSTIN:                +115.0°C  (high =  +0.0°C, hyst =  +0.0°C)  sensor = thermistor
CPUTIN:                 +52.0°C  (high = +80.0°C, hyst = +75.0°C)  sensor = thermistor
AUXTIN0:                +42.0°C  (high =  +0.0°C, hyst =  +0.0°C)  ALARM  sensor = thermistor
AUXTIN1:               +108.0°C    sensor = thermistor
AUXTIN2:               +107.0°C    sensor = thermistor
AUXTIN3:               +105.0°C    sensor = thermistor
SMBUSMASTER 0:          +36.5°C  
PCH_CHIP_CPU_MAX_TEMP:   +0.0°C  
PCH_CHIP_TEMP:           +0.0°C  
PCH_CPU_TEMP:            +0.0°C  
intrusion0:            OK
intrusion1:            ALARM
beep_enable:           disabled

Из всего этого для меня полезно знать несколько не всё, поэтому, выхлоп команды sensors можно отфильтровать утилитой grep, а точнее можно использовать расширенную версию egrep для применения регулярок

sensors | egrep "(Composite|fan2|CPUTIN)"

Получим выхлоп типа такого

root@srv1:~# sensors | egrep "(Composite|fan2|CPUTIN)"
Composite:    +41.9°C  (low  = -273.1°C, high = +81.8°C)
fan2:                   510 RPM  (min =    0 RPM)
CPUTIN:                 +52.0°C  (high = +80.0°C, hyst = +75.0°C)  sensor = thermistor

Дальше можно применить утилиту sed для того, чтобы модифицировать текст, этакая русификация

sensors | egrep "(Composite|fan2|CPUTIN)"| \
sed \
-e "s/Composite/Температура NVME/" \
-e "s/fan2/Скорость вентилятора/" \
-e "s/CPUTIN/Температура CPU/"

То что в скобках и после них для нас не сильно интересно, добавим в sed еще одно преобразование

-e "s/(.*).*//"

Вроде уже прекрасно, но после двоеточий слишком много пробелов, давайте их затрем тоже

-e  "s/:\s*/: /"

Получилось то что нужно

Для удобства парсинга сторонними системами, лучше всего сделать key:val формат, поэтому, я сделаю что-то вроде

Параметр (единица измерения): 0.00

Написать одно преобразование у меня не удалось, регулярки в SED работают не так как я привык

Если бы не sed, то регулярка выглядела так

(.*):[^0-9]*([0-9.]+)\s*(.*)

Но в регулярках sed надо экранировать скобочки чтобы они были как регулярки и наоборот не экранировать если нужно найти именно символ скобки, еще надо экранировать плюсики, а вот квадратные скобки наоборот не нужно экранировать, вторым преобразованием я удаляю лишние пробелы перед закрывающей скобкой

-e "s/\(.*\):[^0-9]*\([0-9.]\+\)\s*\(.*\)/\1(\3): \2/" \
-e "s/\s*)/)/"

Получилось вот такая команда

sensors |\
`#фильтруем строки` \
egrep "(Composite|fan2|CPUTIN)" |
sed \
`#переводим значения` \
-e "s/Composite/Температура NVME/"  \
-e "s/fan2/Скорость вентилятора/"  \
-e "s/CPUTIN/Температура CPU/"  \
`#убираем хлам в скобках и после` \
-e "s/(.*).*//" \
`#убираем пробелы после двоеточий` \
-e  "s/:\s*/: /"  \
`#форматируем выхлоп в key:val` \
-e "s/\(.*\):[^0-9]*\([0-9.]\+\)\s*\(.*\)/\1(\3): \2/" \
`#пробелы перед скобками` \
-e "s/\s*)/)/" 

Мониторинг состояния дисков

На моей практике был только один погибший SSD диск, но он отработал более 6 лет в режиме 24/7, на нем крутились десятки виртуальных машин, которые я регулярно удалял, создавал, пересоздавал, делал снепшоты, в общем он активно отработал и в один момент выключился когда я его гонял в неттопе, вероятно от перегрева, сейчас у меня в сервере чуток больше места и радиатор установлен (смотрите видео на канале).

Единственная наверно программа для мониторинга любых дисков - это smartctl

apt install smartmontools

Чтобы проверить состояние диска достаточно ввести

smartctl -a /dev/nvme0

Полезный выхлоп примерно такой

=== START OF SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED

SMART/Health Information (NVMe Log 0x02)
Critical Warning:                   0x00
Temperature:                        42 Celsius
Available Spare:                    100%
Available Spare Threshold:          10%
Percentage Used:                    0%
Data Units Read:                    3,343,688 [1.71 TB]
Data Units Written:                 4,315,804 [2.20 TB]
Host Read Commands:                 19,343,569
Host Write Commands:                32,330,671
Controller Busy Time:               43
Power Cycles:                       62
Power On Hours:                     21
Unsafe Shutdowns:                   35
Media and Data Integrity Errors:    0
Error Information Log Entries:      0
Warning  Comp. Temperature Time:    0
Critical Comp. Temperature Time:    0
Temperature Sensor 1:               42 Celsius
Temperature Sensor 2:               44 Celsius

Error Information (NVMe Log 0x01, 16 of 64 entries)
No Errors Logged

Но тут опять же нас будет интересовать несколько параметров, поэтому опять примеим что-то похожее на прошлый скрипт с применением egrep + sed

smartctl -a /dev/nvme0 |\
`#фильтруем строки` \
egrep "(Percentage Used|Data Units Written)" |
sed \
`#переводим значения` \
-e "s/Percentage Used/Износ/"  \
-e "s/Data Units Written/Кол-во записей/"  \
`#убираем пробелы после двоеточий` \
-e  "s/:\s*/: /"  \
`#оставим только в квадратных скобках` \
-e  "s/\(.*\):.*\[\(.*\)\]/\1: \2 /"  \
`#форматируем выхлоп в key:val` \
-e "s/\(.*\):[^0-9]*\([0-9.]\+\)\s*\(.*\)/\1(\3): \2/" \
`#пробелы перед скобками` \
-e "s/\s*)/)/"

Расход оперативной памяти

Команда free -m выдаст количество свободной памяти в процентах

Опять же, можем прогнать через grep и сократить количество строк

Теперь попробуем применить более тяжелую артиллерию - утилиту awk

Вот так можно вывести 3й столбец, т.е. количество используемой

free -m | grep "Mem:" | awk '{print $3}'

А чтобы получить % занятости памяти - можно просто 3й столбец поделить на 2й и домножить на сто, т.е. количество занятой памяти делим на общее количество и умножаем на 100

free -m | grep "Mem:" | awk '{print $3/$2*100}'

далее можно пристыковать текстовые строки для красоты

free -m | grep "Mem:" | awk '{print "RAM Usage(%): "$3/$2*100}'

Заполнение диска

Обычно команда df -h отдает заполнение всех дисков в человекочитаемом виде.

А следующая команда отфильтрует ту позицию, которая примонтирована на корень

df -h | egrep '/$'

используя прошлые знания, мы можем через awk отфильтровать только значение 15%

df -h | egrep '/$' | awk '{print "Заполнение диска: "$5}'

Ну и добавив sed, можно причесать результат к общему формату

df -h | egrep '/$' | awk '{print "Заполнение диска: "$5}' | sed -e "s/\(.*\):[^0-9]*\([0-9.]\+\)\s*\(.*\)/\1(\3): \2/"

Текущая частота процессора

Мониторить текущую частоту всех процессорных ядер можно например такой командой

watch -n0.2 cat /sys/devices/system/cpu/cpu*/cpufreq/scaling_cur_freq

Частоту самого быстрого ядра в гигагерцах можно выдать примерно так

cat /sys/devices/system/cpu/cpu*/cpufreq/scaling_cur_freq |sort -r|awk '{print "Частота процессора(Ghz): "$1/1000000}'|head -1

Задержки сети

ping -q -c1 8.8.8.8 | grep avg | sed -e "s/s*\([0-9.]\+\)\/.*/\1/" -e "s/[^=]*=\s*//"|xargs echo "Ping (ms): "$1

А так самое наверно верное, показывает среднее

ping -q -c3 192.168.0.1 | grep avg |awk -v FS="/" '{print "Ping(ms): "$5}'

Результат вот такой

Пример скрипта на github

Первое - язык на котором написано

Желательно, чтобы это был знакомый вам язык, для меня это PHP. При этом, лучше максимально отказаться от готовых решений, вся эта гибкость и модульность хороша, но добавляет лишние мегабайты кода, но это уже вкусовщина, можете десять фреймворков и двадцать библиотек подключить. Но язык не важен, если продукт не придется дописывать.

Второе - удобный редактор

Редактор страниц должен поддерживать вставку изображений из буфера обмена, чтобы просто нажал ctrl+v и готово.

Еще редактор не должен создавать лишнего мусорного кода, только минимальная разметка - абзацы, заголовки, таблицы, списки, цитаты, блоки кода, встраиваемые картинки и видео.

Про код самое главное - нужно чтобы я мог

//писать код

И желательно сделать так, чтобы подсветка этого кода была не только на внешнем разделе сайта, но и в редакторе было идентичным.

Вообще, нужно позаботиться и оформить CSS скрипт, который подключать и в админке, и в основной части сайта, чтобы написанный текст на выходе выглядел полностью идентично.

Еще хотелось бы не только поддержку листингов кода, встраивания видео и вставку картинок, но и draw.io, хочется рисовать диаграммы прямо на сайте, но для начала можно их рисовать на десктопном клиенте и потом встраивать.

Кстати да, еще одна полезная фича - вставка html кода или js в тело страницы, тогда можно и яндекс-карты и всякие интересные модули в страницу вставлять.

Третье - автосохранение и черновики

То что пишется - должно сохраняться автоматом в настраиваемый интервал, а то вдруг зависнет браузер и то что писал последний час пропадет. При падении связи с сервером нужно использовать локальное хранилище и показывать уведомление о недоступности некоторых функций (использующие серверные мощности).

Четвертое - доставка контента

Прошли те времена, когда человек бегает по сайтам и проверяет что там нового написали, сейчас все листают ленты в том же ВК и уже оттуда переходят на сайты. После каждой публикации - должна срабатывать интеграция с соцсетями, вероятно еще с группой в телеге. И еще надо предусмотреть турбостраницы для яндекса.

Еще важным моментом - красивое встраивание по ссылке в соцсети, нужно разметить shema.org разметкой заголовок статьи, краткий вступительный контент, обложку...

Отдельно можно сделать рассылку на почту, чтобы раз в месяц приходило письмо всем подписчикам с статьями из интересующих его тематик.

Разделение на тематики

Нужно реализовать тегирование и разделы, чтобы пользователи читали только то, что им интересно.

Комментарии с премодерацией

Не так хороша статья, как обсуждение ее, но рекламу чего-дибо лучше не публиковать, поэтому хотелось бы иметь премодерацию.

Кликабельные картинки

Хочется чтобы картинки автоматически подрезались на несколько размеров и по ним можно было кликать в том случае, если они большие.

Сверхлегкость

Платформа должна быть настолько легкой, что ее можно было бы разместить на самом дешевом хостинге, нужно оптимизировать не только серверную мощность, но и фронтенд, чтобы везде под соточку измерение скорости было.

Оптимизация под мобильные

Чтобы писать статьи не только с компа, но и с телефона, вероятно еще можно сделать отправку контента на блог через телеграмм. Нужно и админку и внешнюю часть оптимизировать под мобильные устройства, ведь потребители сейчас особенные.

Большинство из этого я постараюсь релизовать в рамках проекта LE2-blog, следите за гитхабом

Сам драйвер скачивается например тут

А вот примерное решение нашел вот тут  

Сперва скачал драйвер в формате dmg и примонтировал.

Потом открыл терминал и набрал

cd ~/Downloads

pkgutil --expand /Volumes/HP_PrinterSupportManual/HewlettPackardPrinterDrivers.pkg ./hplip

Потом открыл папку hplip, которая появилась в папке загрузок, в ней открыл файл Distribution

И в этом файле заменил проверку версии 12.0 на 13.0

Дальше обратно запаковываем в пакет отредактированную папку

pkgutil --flatten hplip ~/Downloads/HP_Drivers_12.pkg 

А потом можно запускать файл HP_Drivers_12

Теперь мой принтер работает

Но иногда возникает ситуация, когда надоедливый софт стартует принудительно и никак не отключается, первое, с чем я столкнулся - это Office365, купил подписку, установил и как не включу ноутбук, так Microsoft AutoUpdate запускается, даже когда не пользуюсь офисом, эта обновлялка стартует даже если я вчера обновился, обновления приходят чаще чем я пользуюсь офисом. И эта программа проверки обновлений никак не отключается в настройках. Есть еще всякие программы, которые бы хотелось запускать только руками, они трей захламляют и уменьшают время автономной работы на ноутбуке... Со временем система может захламиьтся тонной хлама, который стартует в фоне, проверяет обновления и всё такое, хватит это терпеть.

Помимо простейших объектов входа, существуют еще "демоны" и "агенты", пользователи Linux знают о чем речь, "демоны" это аналог служб в Windows, т.е. фоновые сервисы.

А агенты это тоже запускаемые сервисы или просто приложения, но они запускаются уже только при входе пользователя.

Ну допустим есть Daemon который отвечает за веб-сервер, хоть пользователь зашел, хоть нет - сервер должен работать, а есть например сервис уведомлений о новой почте, он только в пользовательском окружении пригодится и должен для конкретного пользователя только его почту проверять. В этом отличие Daemon от Agent.

В MacOS есть два типа директорий - это LaunchDaemons для фоновых служб и LaunchAgents для пользовательских сервисов.

~/Library/LaunchAgents - агенты конкретного пользователя

/Library/LaunchAgents/ - агенты для всех пользователей от стороннего софта

/System/Library/LaunchAgents/ - агенты для всех пользователей из поставки системы

/Library/LaunchDaemons - службы стороннего софта

/System/Library/LaunchDaemons - службы из поставки системы

Чтобы хостить всякие разные сайты не всегда первой свежести потребуется использовать разные версии PHP, иногда нужно и nodejs или еще какие штуки, да еще и между разными контейнерами желательно разграничить пространство, поэтому самое оптимальное - это использовать докер для контейнеризации.

При этом база данных будет общая на всех и не будет контейнеризироваться, т.е. будет стоять  на самом хосте, может я что-то недопонял, но mysql в контейнере хоть немного но просаживается, VDS не такой уж мощный, поэтому не вижу ничего плохого что сервис предоставляющий БД будет на самом хосте.

Помимо всего нам нужно реализовать настройку почтового сервера, он будет сконфигурирован так, чтобы почта из контенеров пересылалась во внешнюю сеть, это для всяких уведомлений с сайтов.

И самым главным звеном всей этой кухни будет nginx, он будет все входящие запросы маршрутизировать по контейнерам.

Настройка почтовика

Настройка DNS PTR

Для того, чтобы от вашего сервера почтовики брали хоть какую-то почту - нужно обратиться в техподдержку хостера или откопать в кабинете такую опцию, прописать, нужно чтобы команда

nslookup 1.2.3.4

Возвращало домен к которому привязан этот айпи, допустим у нас домен

srv1.mydomain.ru, помимо этого, нужно прописать и прямую зону A на этот поддомен...

Примерно так должно быть

pavelbelaev@Mac-mini-Pavel ~ % nslookup 5.181.255.66

Non-authoritative answer:
66.255.181.5.in-addr.arpa	name = vm-2a9e742.na4u.ru.




pavelbelaev@Mac-mini-Pavel ~ % nslookup vm-2a9e742.na4u.ru

Non-authoritative answer:
Name:	vm-2a9e742.na4u.ru
Address: 5.181.255.66

После прописывания записей у регистратора домена и у хостера нужно подождать пару часов, пока всё применится, а то вдруг до гугла это сразу не дойдет и будет блочить.

Установка POSTFIX

apt install postfix

При установке выбираем интернет-сайт, нам не надо получать входящую, только исходящую слать

Далее указать тот самый домен, на который прописана обратная зона к IP

На этом пока всё, отдельно по настройке отправки из докеров можете почитать вот тут, но мы к этому вернемся еще в нашей статье.

Установка Docker

По установке докера на дебиан написано на официальном сайте

Переходим под рутом и выполняем следующее

apt update && apt install \
    apt-transport-https \
    ca-certificates \
    curl \
    gnupg \
    lsb-release;
    
curl -fsSL https://download.docker.com/linux/debian/gpg | sudo gpg --dearmor -o /usr/share/keyrings/docker-archive-keyring.gpg

echo \
  "deb [arch=amd64 signed-by=/usr/share/keyrings/docker-archive-keyring.gpg] https://download.docker.com/linux/debian \
  $(lsb_release -cs) stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
  
apt update && apt install docker-ce docker-ce-cli containerd.io

Установка NGINX

apt install nginx

Накидываем конфиг, примерно такой etc/nginx/nginx.conf

user www-data;
worker_processes 4;
pid /run/nginx.pid;
include /etc/nginx/modules-enabled/*.conf;

events {
	worker_connections 768;
	# multi_accept on;
}

http {

	##
	# Basic Settings
	##

	sendfile on;
	tcp_nopush on;
	tcp_nodelay on;
	keepalive_timeout 65;
	types_hash_max_size 2048;
	# server_tokens off;

	# server_names_hash_bucket_size 64;
	# server_name_in_redirect off;

	include /etc/nginx/mime.types;
	default_type application/octet-stream;

	##
	# SSL Settings
	##

	ssl_protocols TLSv1 TLSv1.1 TLSv1.2; # Dropping SSLv3, ref: POODLE
	ssl_prefer_server_ciphers on;

	##
	# Logging Settings
	##

	access_log /var/log/nginx/access.log;
	error_log /var/log/nginx/error.log;

	##
	# Gzip Settings
	##

	gzip on;

	gzip_vary on;
	gzip_proxied any;
	gzip_comp_level 6;
	gzip_buffers 32 8k;
	gzip_http_version 1.1;
	gzip_types text/plain text/css application/json application/javascript text/xml application/xml application/xml+rss text/javascript;

	client_max_body_size 1000M;
	##
	# Virtual Host Configs
	##

	include /etc/nginx/conf.d/*.conf;
	include /etc/nginx/sites-enabled/*;
}

Установка Certbot

certbot необходим для раздачи беспалтных ssl для наших сайтов и их автоматического обновления...

apt install certbot

про настройку сертификатов будет ниже при конфигурировании первого сайта...

Установка MariaDB

Практика показала, что mysql8 значительно медленнее 7.5. mariadb 10.3 примерно равна mysql 7.5, а mariadb 10.6  даже слегка быстрее...

инструкция по установке

apt-get install software-properties-common dirmngr apt-transport-https
apt-key adv --fetch-keys 'https://mariadb.org/mariadb_release_signing_key.asc'
add-apt-repository 'deb [arch=amd64,arm64,ppc64el] https://mirror.surf/mariadb/repo/10.6/debian buster main'

apt update && apt install mariadb-server

Дальше надо задать пароль

mariadb-secure-installation 

А потом надо создать такого рута, который все может

GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'password';
grant all privileges on *.* to 'root'@'%' with grant option;
flush privileges;

Управление доступом

По-умолчанию mysql пускает подключения только с локалхоста, это не подходит для контейнеризации

Сперва нам нужно узнать ip нашего моста с докер-контейнерами

ip addr| grep docker0

У меня это 172.17.0.1

отредактируем файлик /etc/mysql/mariadb.conf.d/50-server.cnf

Разрешим прослушивание моста докеров, вместо локального интерфейса

bind-address            = 172.17.0.1

После этого доступ будет из докеров, но не будет извне...

Нужно только перезапустить mysql

service mysql restart

Из докеров PHP надо настраивать подключение тоже на адрес 172.17.0.1 вместо локалхоста...

Соответственно и пользователей mysql нужно создавать не user@%, а user@172.17.% контейнерам будут выдаваться динамические адреса, но все они будут в пределах подсети /16 (255.255.0.0)

Тонким тюннингом mariaDB займемся позже, вероятно в конце этой статьи, а вероятно в отдельной статейке

Создание первого хоста (сайта)

Сперва создадим папку для нашего сайта, это /www/sitename/web

Всё что выше по уровню от папки web недоступно веб-серверу, там будут файлы для конкретного сайта - всякие временные файлы, конфиги, сессии.

Итак, допустим у меня сайт example.ru

sitename="example.ru"

mkdir -p /www/$sitename/web && cd /www/$sitename

Мы находимся в папке сайта, теперь будем его переносить с другого хостинга, вариант запаковывать, переносить и распаковывать архив не очень, т.к. размер около 40 гигабайт, а место на диске около 60, просто не хватит места чтобы распаковать архив, да и накладно это всё по ресурсам и времени, попробуем просто через rsync копирнуть.

Т.к. на источнике права заданы на пользователя отличного от тех, которые доступны для логина по ssh, то может просто прав не хватить, но на приемнике всё логично, тут пустая папка и пока я не прикрыл логин под рутом. Поэтому я просто залогинюсь на старый хостинг и буду с него засылать всё это...

cd /www/example.ru/
rsync -vtrz . root@example.ru:/www/example.ru/

Если на старом хостинге что-то поменяется, я могу еще раз перед финальным переходом сделать rsync и передадутся только измененные файлы.

У меня есть копии сайтов на личной машине, хоть и не самые актуальные, но там изменилось максимум 5%, во-первых домашний интернет у меня 250 мегабит и на VDS около гигабита, тогда как на старом колокейшн 100 мегабитный тарий, во-вторых не хочется забивать канал на рабочем продакте, поэтому я сперва сделаю rsync с личного пк, а потом повторю с прода, чтобы минимум его нагружать...

Пока всё копируется, можно дальше продолжать настраивать целевую машину....

В итоге перенос 32 гигов с личного пк на сервер у меня занял около 27 минут. Раньше я запаковывал архив минут 15, минут 15 его распаковывал и еще минут 20 тратил на его скачивание. Дальше я за секунд 10 актуализировал с текущего продакта состояние файлов, там буквально штук 100 файликов обновилось... Отныне буду только через rsync заливку делать на виртуалки...

Nginx - новый сайт

Как мы помним, у нас в главном конфиге nginx прописан инклуд из папки /etc/nginx/sites-enabled/, поэтому создадим отдельный файлик для нашего хоста

nano /etc/nginx/sites-enabled/example.ru

Пример конфига пока не самый лучший, но можно примерно такое использовать...

Развертывание базы данных для сайта

Сперва создадим нашего пользователя, помните раздел выше про mariadb? там мы определяли IP

CREATE USER 'user'@'172.17.%' IDENTIFIED BY 'passw***';
GRANT USAGE ON *.* TO 'user'@'172.17.%' REQUIRE NONE WITH MAX_QUERIES_PER_HOUR 0 MAX_CONNECTIONS_PER_HOUR 0 MAX_UPDATES_PER_HOUR 0 MAX_USER_CONNECTIONS 0; 

Дальше создадим базу и предоставим привелегии уровня бд

CREATE DATABASE `base1`;
GRANT ALL PRIVILEGES ON `base1`.* TO 'user'@'172.17.%' WITH GRANT OPTION;
 
flush privileges;
 
quit

Теперь создадим дамп нашей БД и зальем

Сперва на сервере источника

mysqldump mybase -uroot -p > base1.sql

Потом на новом сервере (опцию -p можно пропустить, если по сокету локально авторизация без пароля)

mysql base1 -uroot -p < /www/base1.sql

ну и в конфиге сайта пропишем

/*DB CONFIGURATION*/
SYSCONF::$DB['db_name'] = 'base1';
SYSCONF::$DB['user'] = 'user';
SYSCONF::$DB['pass'] = '*******';
SYSCONF::$DB['host'] = '172.17.0.1';

Docker

Как вы поняли, мои сайты используют PHP и у меня немного подточенный контейнер с пропатчеными локалями, с предустановленными необходимыми модулями типа поддержки RabbitMQ. Там почти все есть почти для любого проекта и работает на php-fpm, в моем контейнере даже есть почтовый транспорт.

Сперва соберем контейнер из докерфайла

mkdir php_le_docker;
cd php_le_docker;
wget https://raw.githubusercontent.com/TechResearchRu/LE_PHP_Docker/main/Dockerfile
docker build -t php-le .

Настройка почты из Docker

Как я уже говорил, мой контейнер поддерживает работу с почтой, но нам потребуется немножко подкрутить наш Postfix и создать конфиг...

Опять вспомним IP нашего докера и еще вспомним какой домен мы прописали в PTR на этапе установки и настройки Postfix, если забыли, возвращаемся выше и вспоминаем о чем тут речь...

Создадим файлик /etc/postfix/sender_canonical_maps

/.+/    postmaster@srv.mydomain.ru

Далее пропишем в nano /etc/postfix/main.cf

#тут хак для подмены отправителя из докеров
sender_canonical_classes = envelope_sender
sender_canonical_maps =  regexp:/etc/postfix/sender_canonical_maps

И еще там же не забудем дописать нашу подсеть из докеров, тут перечислены все сети от которых будет без авторизации почта браться и пересылаться во внешний мир

mynetworks = 127.0.0.0/8 [::ffff:127.0.0.0]/104 [::1]/128 172.17.0.0/16

Почти всё, остается создать конфиг транспорта для контейнера

nano /www/ssmtp.conf

#see ptr
rewriteDomain=srv.mydomain.ru
FromLineOverride=YES
#host ip, see "ip addr|grep docker0"
mailhub=172.17.0.1
UseTLS=YES
UseSTARTTLS=YES

А дальше запустим

docker run -d \
--restart=always \
--name default-fpm \
-p 127.0.0.1:9000:9000 \
-v /www/ssmtp.conf:/etc/ssmtp/ssmtp.conf \
-v /www:/www \
-v /mp:/mp \
php-le

В этом примере я всю папку /www прокинул в контейнер, но можно прокидывать по одному сайту, таким образом изолировать файловую систему отдельного сайта от других, я так делаю на всяких джумлах, особенно слегка устаревших, но там и версия php другая...

Обратите внимание, я указал 127.0.0.1 при пробросе порта, дальше локалхоста никто не сможет забраться в мой контейнер, nginx на локальном компе, ему это всё доступно будет, а большего нам не нужно.

Если использовать почту в домене и авторизовываться в ящике, то можно прикрутить какой-нибудь PHPMailer, но я хотел обычный почтовик настроить, чтобы от любого емейла слать уведомления с сайта и не пользоваться услугами почтовых сервисов для этого.

Изначально пишем примерно такой скрипт

<?php

$to      = 'mymail@gmail.com';
$subject = 'the subject';
$message = 'hello4';
$headers = 'From: admin2@site.ru' . "\r\n" .
    'X-Mailer: PHP/' . phpversion();

mail($to, $subject, $message, $headers);

Настройка хоста

На самом хосте ставим Postfix, настраиваем его nano /etc/postfix/main.cf

#обязательно указать PTR на ваш айпи равный этому
myorigin = web.mydomain.ru

smtpd_banner = $myhostname ESMTP $mail_name (Debian/GNU)
biff = no
append_dot_mydomain = no
readme_directory = no
compatibility_level = 2

# TLS parameters
smtpd_tls_cert_file=/etc/ssl/certs/ssl-cert-snakeoil.pem
smtpd_tls_key_file=/etc/ssl/private/ssl-cert-snakeoil.key
smtpd_use_tls=yes
smtpd_tls_session_cache_database = btree:${data_directory}/smtpd_scache
smtp_tls_session_cache_database = btree:${data_directory}/smtp_scache

# See /usr/share/doc/postfix/TLS_README.gz in the postfix-doc package for
# information on enabling SSL in the smtp client.

#тут хак для подмены отправителя из докеров
sender_canonical_classes = envelope_sender
sender_canonical_maps =  regexp:/etc/postfix/sender_canonical_maps


smtpd_relay_restrictions = permit_mynetworks permit_sasl_authenticated defer_unauth_destination
mydomain = $myhostname 
alias_maps = hash:/etc/aliases
alias_database = hash:/etc/aliases
mydestination = localhost

#указать, если нужно слать через почтарь хостера
relayhost = 

#последним подсеть докеров - допустимые доверительные подсети
mynetworks = 127.0.0.0/8 [::ffff:127.0.0.0]/104 [::1]/128 172.17.0.0/24
mailbox_size_limit = 0
recipient_delimiter = +
inet_interfaces = all
inet_protocols = ipv4
smtp_tls_security_level = may

Далее создадим файлик nano /etc/postfix/sender_canonical_maps

/.+/    postmaster@web.mydomain.ru

Настройки в докере

apk add ssmtp

И конфиг /etc/ssmtp/ssmtp.conf

rewriteDomain=web.mydomain.ru
FromLineOverride=YES
mailhub=172.17.0.1
#hostname=web.mydomain.ru
UseTLS=YES
UseSTARTTLS=YES

В чем был подвох?

ssmtp это минималистичный мейлер из докера, в нем прописан адрес нашего хоста 172.17.0.1 и прописан домен, которым он должен прикидываться, в postfix вся подсеть из докера в доверенной зоне.

Если на этом остановиться, то почта по идее ходила, но она была от имени root, т.е. From не работал, после того, как я прописал FromLineOverride=YES - у меня адекватно заработал From и отправитель отображался корректно, но при этом почта попадала в спам на gmail. Но при этом с самого хоста почта работала хорошо и досылалась и в спам не попадала.

Оказывается в smtp есть сам заголовок в теле письма и есть еще заголовки при общении почтарей, это smtp.from, утилита ssmtp подменяла всё и сразу из заголовка From, а гугл проверял домен @... и говорил что ваш сервер не имеет права от него слать и письмо в спам улетало.

Вот тут и помогла подмена отправителя следующей конструкцией

sender_canonical_classes = envelope_sender
sender_canonical_maps =  regexp:/etc/postfix/sender_canonical_maps

Обратите внимание! nslookup <ip> должен возвращать тот домен, который везде фигурирует, в моем примере это web.mydomain.ru

Загрузка картинок в CKeditor5 производится путем простого ctrl+v или вставки ссылки на картинку, но по ссылке оно так и останется, а вот кнопка на панели инструментов с выбором локального файла или вставка из буфера обмена требует загрузки файла на ваш сервер и возврата ссылки на него, например /pub_data/kokoko/2678493.jpg

Как собрать редактор со своими модулями, чтобы все это работало, мы рассматривали в видео

Нужно включить модуль Simple upload adapter

Для загрузки достаточно указать в конфиге url где это будет обрабатываться

simpleUpload: {uploadUrl: '/admin/blog'}

При желании можно указать GET параметры

simpleUpload: {uploadUrl: '/admin/blog?param=addimg'}

Но как быть, если архитектура нашего приложения берет POST поля?

Нужно открыть исходник (пусть и минифицированный) и поискать там o.append("upload

Если рассмотреть эту функцию без минификации, то будет вот такое

_sendRequest(t) {
                const e = this.options.headers || {};
                const n = this.options.withCredentials || false;
                for (const t of Object.keys(e)) {
                    this.xhr.setRequestHeader(t, e[t])
                }
                this.xhr.withCredentials = n;
                const o = new FormData;
                o.append("upload", t);
                this.xhr.send(o)
            }

Нужно дописать после после поля upload например такое

o.append("ajax","yes");
o.append("mod","add_img");

По поводу вставки видео с ютуб, чтобы было не <oembed>, а <iframe> есть тоже видео

Про все дальнейшие манимпуляции и приготовления смотрите на нашем канале на ютубе, там целый плейлист, в котором мы создаем с нуля фреймворк и дальше делаем на нем блог, а далее будем делать магазин и другие подобные типовые вещи.

И вот захотелось мне найти JS-редактор хотя бы приближенный к Ghost (CkEditor и TinyMCE не очень удобны на блоге о программировании), мне понравилось два проекта EditorMD и ToastUI Editor, такое ощущение, что это одно и тоже, но ToastUI мне показался более развитым, шустрее грузится, последняя версия пару недель назад вышла, тогда как EditorMD не обновлялся уже лет 6.

На просторах интернета достаточно много разных обсуждений про этот редактор, а выглядит он примерно вот так

Подключается достаточно просто, сперва в Head добавляются стили и зависимости

 <!-- Editor's Dependecy Style -->
  <link
    rel="stylesheet"
    href="https://cdnjs.cloudflare.com/ajax/libs/codemirror/5.48.4/codemirror.min.css"
  />
  <!-- Editor's Style -->
  <link rel="stylesheet" href="https://uicdn.toast.com/editor/latest/toastui-editor.min.css" />
</head>

Далее создается блок для размерение редактора

<div id="editor"></div>

А далее, что важно, внутри тега body, а не в head прописываются скрипты

<script src="https://uicdn.toast.com/editor/latest/toastui-editor-all.min.js"></script>

 <script>
 
    
      const editor = new toastui.Editor({
        el: document.querySelector('#editor'),
        previewStyle: 'vertical',
        height: '500px',
        initialValue: '### hello world \n```\n<?="<?"?>php\n```'   
      });
 </script>

По идее у редактора есть своя подсветка, но она не очень распознает язык и мне больше по душе highlight.js

Поэтому в head подключил его

<link rel="stylesheet" href="//cdnjs.cloudflare.com/ajax/libs/highlight.js/10.7.2/styles/default.min.css">
<script src="//cdnjs.cloudflare.com/ajax/libs/highlight.js/10.7.2/highlight.min.js"></script>

Далее есть такой момент, когда редактируем в TUI-Editor код, то справа превью не обновляется, я прописал такое

<script>
editor.on('change',function(e){
     /*hljs.highlightAll();*/
     document.querySelectorAll('div.te-preview pre').forEach(block => {
        // then highlight each
        hljs.highlightBlock(block);
        });
     
     });   

</script>

Остается еще приготовить загрузку картинок и вставку из буфера обмена и можно слепить свой легковесный бложек на PHP

Upload Images on ToastUI Editor on PHP

Загрузка картинок происходит или просто из буфера обмена или из локального файла, суть в том, что наш хук перехватывает это событие, отправляет файл на сервер, обратно получает ссылку и вставляет код в редактор с указанием этой ссылки

    const editor = new toastui.Editor({
        el: document.querySelector('#editor'),
        previewStyle: 'vertical',
        height: '500px',
        initialValue: '### hello world \n```\n<?="<?"?>php\n```',
        //этот кусок кода отвечает за загрузка
        hooks: 
        {
            addImageBlobHook:function(blob, callback)
            {
                let formData = new FormData();

                formData.append("upl_img", blob, blob.name);
                formData.append("opt", 'upload_img');
                formData.append("clear", 'yes');

                // /ui_test это ссылка где обработается наш POST
                fetch('/ui_test', {method: 'POST',body: formData
                }).then(resp => resp.json()).then(resp=>{
                   if (!resp.success) 
                   {
                   throw new Error('Validation error');
                   }
                   
                   callback(resp.data.url, 'alt text');
                });
            }  
        }
    });

Далее пример кода на PHP

if (isset($_FILES['upl_img']))
{
    $uploaddir = WEBDIR.'pub_data/upload/img/';
    $f_name=basename($_FILES['upl_img']['name']);
    $uploadfile = $uploaddir . basename($_FILES['upl_img']['name']);
    if (move_uploaded_file($_FILES['upl_img']['tmp_name'], $uploadfile)) 
    {
        $out = ['success'=>1];
        $out['data'] = ['url'=>'/pub_data/upload/img/'.$f_name];
        $mod_out = json_encode($out);
    }
}

Данный кусок чисто как пример, по хорошему нужно проверять файл, подрезать его размер, делать копию поменьше и побольше и хорошо бы обертывать в конечной версии этот файл лайтбоксом чтобы к примеру /img/ менялось на /img_big/, но это пока идея, если не смотрите мой ютуб, то загляните туда, я на досуге разрабатываю свой легковесный фреймворк пригодный и для сайтов и для консольных скриптов и фоновых служб на php, кажды этап разъясняю...

Есть такие вещи, когда за долгую жизнь привык сразу два раза кавычки вставлять, а далее стрелочкой на клавиатуре между ними курсор сдвигать и начинать писать...  "|"

VsCode по-умолчанию закрывает кавычки, управляется это через настройки, там в поиске вбиваем quotes, есть параметр auto close quotes

"editor.autoClosingQuotes": "never"

Аналогично есть не для кавычек, а для скобок автозакрытие, со скобками вообще отдельная история, иногда хочу блок кода обозначить, на первой строке вставляю { и хочу через несколько строчек вставить }, а у меня сразу {}, в общем, я привык ручками все вводить без самодеятельности от редактора...

"editor.autoClosingBrackets": "never"

Автоматический отступ

Иногда текущая строка сознательно с таким отступом, ставишь энтер, а тебе вдруг придумывает отступ, я оставляю отступ только для скобок и с сохранением отступа текущей строки

"editor.autoIndent": "brackets"

Перенос строки

Часто открываешь совершенно разнообразный код (иногда просто выхлоп каких-то логов) и самое неприятное в нем - это горизонтальная прокрутка, для многих будет удобно, когда длинные строки будут пеерноситься в зависимости от ширины окна, при этом, в редакторе четко видно сто это одна строк

"editor.wordWrap": "on"

Карта кода

Иногда это удобно, а иногда кодить приходится на ноутбуке, у меня есть ноутбук, у которого высота примерно как и ширина, т.е. почти квадратный экран, и ширины не очень хватает для подобных кейсов, когда слева дерево файлов, справа карта кода, лишний расход пространства

"editor.minimap.enabled": false

... продолжение следует ...

По своему опыту скажу что для обычных (не серверных) SSD ресурс около 4 лет, при эксплуатации в режиме 24/7. У меня один диск уже умер на сервере, правда, это не относится к Mac, стоял у меня SSD от Intel на компе, где крутилось 5 виртуальных машин со всякими базами данных, я хранил на нем и систему и данные, много раз переустанавливал, ну и на 4й год он просто умер (через 4 года аналогичные диски подешевели почти в 4 раза и стали быстрее в 1.5 раза). Умер он не от износа, а просто контроллер отказал, а я при этом постоянно мониторил показания диска, поэтому, даже если у вас на 4й год эксплуатации будет показывать 0% износа, то сильно не радуйтесь, не забывайте о бекапах.

Но все же мы попытаемся понять что там такого может писаться в таких объемах?

1. Заходим в лаунчер, открываем мониторинг системы
2. Переходим на вкладку диск

На картинке выше видно что Firefox за вечер и ночь успел записать 4 гига на диск, видимо это кеш, как с ним бороться - разберемся позже, но 4 гига это не очень много...

Чтобы узнать примерный статус вашего SSD, нужно установить homebrew, smartmontools и выполнить команду smartctl

/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"

brew install smartmontools
sudo smartctl –all /dev/disk0

На Linux примерно так

sudo smartctl -l devstat /dev/sda

Из выхлопа smart мне кажется что показывает он совсем неадекватные значения, судя по полю Power On Hours, диск отработал 10 часов, но я комп как минимум часов 15 назад включил, и вообще его вторую неделю мучаю.

Чтобы убедиться, я запустил uptime

Первое, что приходит в голову - это или smart неправильные показания дает, или комп вырубает диск...

Второй момент - MacOS работает слегка со сбоями, у меня была ситуация когда в процессах висело много экземпляров CrashReporter, оказалось что один из подпроцессов айтюнса вылетал циклично и система пыталась сформировать отчет, это вызывало запись на диск собранных отчетов и еще одно ядро процессора было занято на сотку.

А третий момент - в первое время действительно будет много записи

я трижды обнулял весь диск, переустанавливал систему, еще экспериментировал с бета-версиями, заливал видосы для тестового монтажа, разворачивал бекапы на сотни гигабайт. Мне кажется что те пользователи, которые отписались про износ дисков тоже достаточно много игрались и тестировали новые процессоры, вероятно монтировали 4к видео и все такое, но в любом случае SMART отображает некорректные данные, скорей всего эти SSD нет в базе smart и вскоре все скорректируют.

Что делать и как укротить бесполезную запись на диск - разберемся позже, для этого нужно примерно такое:

• слегка подрезать своп (оперативная память на диске)
• вырубить сбор и отправку аналитики (достаточно много логов по всем программам и процессам собрается и постоянно шлется)
• вырубить по максимуму индексирование диска (индексы тоже постоянно дописываются если у вас много файлов залетает на комп)
• в FF в оперативку делать запись кеша, а не на диск, а то насмотришься видосов и перероешь кучу сайтов, насобираешь за день десяток гигабайт кеша
• желательно вырубить проверку и загрузку обновлений, делать это на выходных, это не только ресурсы компа сэкономит, но и избавит от неожиданных поломок, когда что-то перестало работать после обновлений.

Если у вас есть советы по уменьшению износа SSD, то пишите в комментариях...

UPD: судя по данным дисковой утилиты у меня вообще  smart не поддерживается...

Итак, начинаем, MacOS 11.2.1 BigSur, Mac Mini M1 и монитор LG 49WL95c

Статья, вероятно будет пополняться, если будут какие-то продвижения, буду дописывать.

День первый

1. Привезли комп, подключил монитор по type-c, а он не включает родное разрешение, у меня 5120*1440, но максимальное возможное было 3840*1080, зажал кнопку ALT, нажал еще раз на пункт масштабирование и появилось мое разрешение (типа не родное). Не помню, но мне показалось что звук монитора регулировался...
2. Обновил систему до 11.2.1, теперь мое разрешение монитора 5120*1440 стало по-умолчанию, но звук не регулируется, в Windows я например на мониторе ставил громкость 30%, а в системе регулировал от 0 до 100 кнопками клавиатуры, тут получается никак не изменить громкость в системе, нужно тянуться к кнопкам монитора.
3. Еще на моменте первичной настройки у меня были розовые пиксели, а в системе я столкнулся с тем, что картинка какая-то не такая, она тусклая, на мониторе стоит яркость 100%, но изображение темное, такое ощущение, что система сама выкрутила яркость, возомнив себя макбуком...
4. Помимо низкой яркости, еще и цвета какие-то странные, такое ощущение, что серые буквы стали почти черными, а черный стал ну очень черным, точнее даже не так, мне кажется что мой 8 битный монитор стал 6 битным, все цвета странные. Я прееключал цветовые профили, даже из драйверов для windows вытащил профиль icm, это совсем немного меняет картинку, но все равно она остается странной.

Помимо всего прочего остались старые болезни, когда подключаешь мышку Logitech, а не Apple, то ускорение скрола становится странным, если крутить плавно, то страница двигается медленно, а если крутить быстрее, то он летит по несколько экранов за раз. Еще хотелось бы масштаб больше, все какое-то мелкое, а если уменьшить разрешение то размытое, в винде можно масштабировать интерфейс отдельно от разрешения, жаль что в макоси за 5 лет ничего не сделали.

Что по софту?

• VSCode есть под M1, версия на M1 хоть и бета, но стартует раз в 5-7 быстрее чем через Rosetta (там есть подпунктик Apple Silicon)

• Davinci Resolve 17.1 beta 9 поддерживает M1, по первым впечатлениям, работает вполне годно

• ShiftIt - работает хоть и на Intel, но без всяких проблем и тормозов...
• HomeBrew - работает, но то что я оттуда установил (ShiftIt) сделано под Intel, вероятно можно скомпилироваться из исходников, но я пока не пробовал...

В целом можно пользоваться, за время всяких установок, просмотра видео и т.д. компьютер остался холодным и сохранил уровень шума на уровне совсем неслышного, с софтом почти нет проблем, никаких зависаний не поймал, но с монитором полная беда, не могу на такое смотреть, нельзя регулировать громкость с клавиатуры

UPD: Как выяснилось, макось не умеет микшировать цифровой звук по DisplayPort или HDMI, пускает его как есть без модификации, поэтому придется лезть за монитор каждый раз чтобы прибавить или убавить громкость, ну или использовать встроенные регуляторы во всяких плеерах, на сайтах типа яндекс-музыки и т.д.

Есть несколько обходных моментов, когда устанавливается виртуальная звуковая карта, она микшируется нормально, и транслирует звук в HDMI/DP, но там драйвера и софт которые еще не адаптированы под М1.

Как регулировать звук в MacOS на мониторе (HDMI/DP)?

UPD: В homebrew можно поставить утилиту eqMac, она позволяет не только регулировать громкость на мониторах подключенных по HDMI и DP, но и работает как эквалайзер

brew install --cask eqmac

С монитором еще осталась одна беда, он не просыпается после сна, т.е. MacOS не умеет его включать...

С клавиатурой Logitech K380 есть такой момент, чтобы работал запуск лаунчера через F4, нужно установить софт с сайта, а если вы не хотите чтобы start и alt менялись местами на маке, нужно зажать fn+P на 3 секунды, обратно в режим MacOS fn+I

Медленная мышка в MacOS

Выкрутил скорость мышки на максимум, но курсор движется медленно, при том, что я купил оригинальную Magic Mouse 2, для пользователей MacOS это может и норма, но мне после винды сильно не нравилось, плюсом у меня монитор шириной как два 27 дюймовых, приходилось по коврику летать в несколько итераций чтобы половину экрана пройти, помогло следующее

defaults write -g com.apple.mouse.scaling 12.0

После выполнения данной команды в терминале, нужно выйти из сеанса и снова войти...

Аналогично можно и трекпад подкрутить (пока не проверял, но там стоит значение по-умолчанию 1, а при максимуме 3), но мне максимума для трекпада достаточно

defaults write -g com.apple.trackpad.scaling

Косая кавычка и тильда на русской Apple Magic Keyboard 2

По поводу кастомизации раскладок, есть утилита  Ukelele

А пример использования + другие тонкости в моем видео

Ни для кого не секрет, что в Windows 10 есть терминал со вкладками и ssh, для этого даже не требуется устанавливать WSL, в простом PowerShell можно набрать ssh user@host и работать по ssh

Для того, чтобы не вводить каждый раз пароль, нам нужно сгенерировать ключ ssh

ssh-keygen
//дальше просто энтер жмем и все

А дальше прокинуть ключ на сервер

cat ~/.ssh/id_rsa.pub | ssh user@192.168.200.100 "mkdir -p ~/.ssh && cat >> ~/.ssh/authorized_keys"

Но остается один момент, лень вводить имя пользователя для подключения по SSH, если имя локального пользователя отличается от удаленного

Для этого заходим в папку C:\Users\Username\.ssh, в ней открываем или создаем файл config и пишем или дописываем такое

Host 192.168.0.2
  HostName 192.168.0.2
  User username111

Тепеоб просто можем вводить ssh 192.168.0.2 и заходить на нужный сервер, у меня в локальной сети несколько таких серверов и еще виртуалками развернуто несколько.

например у меня было

<?php
setlocale(LC_ALL,'ru_RU.UTF-8');

Такая локаль есть к примеру в Linux, но в Windows нет.

Открываем эту документацию и видим что 65001 равно utf-8

В PHP прописываем

<?php
$locale = setlocale(LC_ALL, 'Russian_Russia.65001');

echo $locale."\n";

echo strftime("%A %d %B %Y", mktime(0, 0, 0, 12, 22, 1978)); 

Запускаем в терминале, видим результат

Ну и чтобы 2.5+3 получалось 5.5 а не 5,5

<?php
setlocale(LC_NUMERIC, 'C');

Часто бывает такое, что нужен к примеру самый новый PHP или другой софт на сервере, плюсом требуется некоторая кастомизация системы и вы хотите чтобы ваше приложение заработало на другом сервере, у другого человека, чтобы он просто развернул контейнер и всё. Иногда нужны пропатченные библиотеки, а на другом компе это может поломать другие приложения.

Уже давно очень популярна контейнеризация на основе Docker, т.к. она решает все эти вопросы, каждое приложение запускается в своей виртуальной системе со своим окружением - системные библиотеки, дополнительный софт, настройки самой системы и многое другое.

Сегодня попробуем немного поэкспериментировать в Docker!

Все опыты будут выполняться на Debian 10, актуально и для убунты и для всего остального...

Для начала установим докер

apt install docker

В докере есть образы, а есть контейнеры, контейнер это так сказать экземпляр системы из образа, т.е. контейнер использует образ.

Если нужного для контейнера образа нет в системе, то он сам скачается...

Для большинства задач достаточно стандартных образов, этот блог на таком же и развернут, была статья раннее.

Но иногда нужно что-то особенное, для этого я решил углубить свои познания.

Самый минимальный образ это alpine. Но иногда стабильнее будет работать к примеру Debian или Ubuntu, т.к. в Alpine нет glibc.

Скачать образ можно так

docker pull ubuntu

А посмотреть список образов в системе вот так

docker images

Удалить образ можно так

docker rmi ubuntu

Создадим контейнер, в который сразу провалимся, команда run создает контейнер и выполняет

docker run -it ubuntu bash

По умолчанию у нас внутри нет ни nano, ни vim и даже apt install не работает, нужно выполнить например apt-get update но только в докере такая ситуация, как только вы выйдите из консоли и по новой запустите контейнер, все пропадет...

Чтобы хоть что-то сохранять, нужно или образ свой лепить на основе этого со своими модификациями, или пробрасывать свою папку внутрь контейнера, то что будет писаться в виртуальной среде будет и в папке...

docker ps - выводит запущенные контейнеры, а docker ps --all все, в том числе и остановленные

Если мы в команде run не указали никаких параметров, то докер сам придумывает имена контейнерам, я пару раз запустил баш в убунте и у меня два контейнера

root@debian-testing:~# docker ps --all
CONTAINER ID        IMAGE               COMMAND             CREATED             STATUS                     PORTS               NAMES
f877b8cfec0d        ubuntu              "bash"              5 minutes ago       Exited (0) 4 minutes ago                       frost
y_engelbart
543a77036c96        ubuntu              "bash"              9 minutes ago       Exited (0) 5 minutes ago                       nosta
lgic_shannon

Попробуем не создавать теперь, а просто снова запустить созданный контейнер

Если бы там был демон, то можно было сделать например

docker start f877b8cfec0d

Но у нас там баш, остается наверно только снести контейнеры с пустым башем

docker rm f877b8cfec0d 543a77036c96

Если нам нужно выполнить команду в определенном образе, но не хранить этот контейнер, он у нас не демон, то можно вот так, на пример php-cli

docker run -it --rm --name my-running-script -v "$PWD":/usr/src/myapp -w /usr/src/myapp php:7.4-cli php your-script.php

-v  - это прокинуть текущую папку в виртуальную внутрь контейнера /usr/src/myapp

-w - сразу перейти в эту директорию

Мне захотелось слепить свой образ, который будет компактным, ничего лишнего и с моими настройками, php.ini, еще чтобы там изначально были некоторые библиотеки, как например клиент для RabbinMQ, небольшие патчи локализации и некоторые вещи, которые я настраиваю в приложении, хотелось бы настроить в php.ini... Плюсом ко всему, приложение будет заперто от всех контейнеров. Хочу сделать сразу cli версию для фоновых обработчиков и fpm, а на хостовом компе будет nginx все это проксировать.

Попробуем создать свой образ, для начала возьмем то что есть в официальном образе, немного перелопатим и попробуем...

FROM alpine:3.12
RUN apk add --no-cache ca-certificates curl tar xz openssl

RUN set -eux; addgroup -g 82 -S www-data; adduser -u 82 -D -S -G www-data www-data
ENV PHP_INI_DIR /usr/local/etc/php

#создаем все папки для работы php
RUN set -eux; mkdir -p "$PHP_INI_DIR/conf.d"; \
[ ! -d /var/www/html ]; mkdir -p /var/www/html; \
chown www-data:www-data /var/www/html; chmod 777 /var/www/html

#создаем папку, качаем в нее файл
ENV PHP_URL="https://www.php.net/distributions/php-7.4.10.tar.xz"
RUN mkdir -p /usr/src/php; cd /usr/src; \
curl -fsSL -o php.tar.xz "$PHP_URL";
#распакуем
RUN tar -Jxvf /usr/src/php.tar.xz -C /usr/src/php --strip-components=1

#временно устанавливаем все необходимое для компиляции
RUN set -eux; apk add --no-cache --virtual .build-deps \
autoconf dpkg-dev dpkg file g++ gcc libc-dev make \
pkgconf re2c argon2-dev coreutils curl-dev \
libedit-dev libsodium-dev libxml2-dev linux-headers \
oniguruma-dev openssl-dev sqlite-dev

#компилируем
ENV PHP_CFLAGS="-fstack-protector-strong -fpic -fpie -O2 -D_LARGEFILE_SOURCE -D_FILE_OFFSET_BITS=64"
ENV PHP_CPPFLAGS="$PHP_CFLAGS"
ENV PHP_LDFLAGS="-Wl,-O1 -pie"

RUN export CFLAGS="$PHP_CFLAGS" CPPFLAGS="$PHP_CPPFLAGS" \
LDFLAGS="$PHP_LDFLAGS"; \
cd /usr/src/php; \
gnuArch="$(dpkg-architecture --query DEB_BUILD_GNU_TYPE)"; \
./configure \
--build="$gnuArch" \
--with-config-file-path="$PHP_INI_DIR" \
--with-config-file-scan-dir="$PHP_INI_DIR/conf.d" \
--enable-option-checking=fatal \
--with-mhash --enable-ftp --enable-mbstring --enable-mysqlnd \
--with-password-argon2 --with-pdo-sqlite=/usr \
--with-sqlite3=/usr \
--with-curl --with-libedit --with-openssl --with-zlib \
--with-pear --enable-fpm --with-fpm-user=www-data \
--with-fpm-group=www-data \
--disable-cgi; \
make -j 4; \
find -type f -name '*.a' -delete; \
make install; \
find /usr/local/bin /usr/local/sbin -type f -perm +0111 -exec strip --strip-all '{}' + || true; \
make clean; \
cp -v php.ini-* "$PHP_INI_DIR/"

RUN	cd /; \
runDeps="$( \
scanelf --needed --nobanner --format '%n#p' --recursive /usr/local | tr ',' '\n' | sort -u \
| awk 'system("[ -e /usr/local/lib/" $1 " ]") == 0 { next } { print "so:" $1 }')"; \
	apk add --no-cache $runDeps; \
	\
	apk del --no-network .build-deps; \
	\
	pecl update-channels; \
	rm -rf /tmp/pear ~/.pearrc /usr/src/php;

RUN set -eux; \
cd /usr/local/etc; \
cp php-fpm.conf.default php-fpm.conf; \
cp php-fpm.d/www.conf.default php-fpm.d/www.conf; \
sed -i 's!=NONE/!=!g' php-fpm.conf;\
{ \
		echo '[global]'; \
		echo 'error_log = /proc/self/fd/2'; \
		echo 'log_limit = 8192'; \
		echo '[www]'; \
		echo 'access.log = /proc/self/fd/2'; \
		echo 'clear_env = no'; \
		echo 'catch_workers_output = yes'; \
		echo 'decorate_workers_output = no'; \
	} | tee php-fpm.d/docker.conf; \
	{ \
		echo '[global]'; \
		echo 'daemonize = no'; \
		echo '[www]'; \
		echo 'listen = 9000'; \
	} | tee php-fpm.d/zz-docker.conf

STOPSIGNAL SIGQUIT

EXPOSE 9000
CMD ["php-fpm"]

Желательно создавать из пустой папки, положить в нее только Dockerfile

собираем образ php-mp (со своим префиксом, чтобы не пересекаться с официальными образами)

docker build -t php-mp .

Всё собралось, для php-fpm нет понятия document-root, он просто запускает тот файл, который передан из nginx, минимально тестово можно сделать так

...
root /var/www/html
location ~ \.php$ {
        try_files $uri =404;
        fastcgi_split_path_info ^(.+\.php)(/.+)$;
        fastcgi_pass localhost:9000;
        fastcgi_index index.php;
        include fastcgi_params;
        fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;
        fastcgi_param PATH_INFO $fastcgi_path_info;
    }
...

И запустить, предварительно положив в /var/www/html index.php с содержимым типа <?php phpinfo();

 docker run -d -p 9000:9000 -v /var/www/html:/var/www/html -w /var/www/html php-mp

Всё получилось...

А теперь самое интересное, посмотрим список образов

# docker images
REPOSITORY     TAG       IMAGE ID       CREATED             SIZE
php-mp       latest    5b8c7cf24f1e   58 minutes ago        477MB
php          7.4-cli   285d825479be4  7 days ago            405MB
ubuntu       latest    46e2eef94cd6b  3 weeks ago           73.9MB
alpine       3.12      a24bb4013296   3 months ago          5.57MB

Интересная картинка, я собирал на основе alpine, который 5 мегабайт, но у меня получился образ на 477 мегабайт, официальный php образ тоже не маленький, 405 мегабайт... В чем же дело?

Попробуем посмотреть историю изменения нашего образа

# docker history php-mp
IMAGE              CREATED BY                                      SIZE               
4b8c7cf24f1e           /bin/sh -c #(nop)  CMD ["php-fpm"]              0B
322041d76f21         /bin/sh -c #(nop)  EXPOSE 9000                  0B
1a6ac1349fb4         /bin/sh -c #(nop)  STOPSIGNAL SIGQUIT           0B
afc59ced57ba         /bin/sh -c set -eux; cd /usr/local/etc; cp p…   25.4kB
d4ba7843c37a       /bin/sh -c cd /; runDeps="$( scanelf --neede…   51.6kB
6786fe77ed30        /bin/sh -c export CFLAGS="$PHP_CFLAGS" CPPFL…   78.6MB
1104663835d0       /bin/sh -c #(nop)  ENV PHP_LDFLAGS=-Wl,-O1 -…   0B
7267e5e725a3       /bin/sh -c #(nop)  ENV PHP_CPPFLAGS=-fstack-…   0B
78e9c4a80b2a       /bin/sh -c #(nop)  ENV PHP_CFLAGS=-fstack-pr…   0B
3c59c17a324b       /bin/sh -c set -eux; apk add --no-cache --vi…   266MB
7a0e31d9f804        /bin/sh -c tar -Jxvf /usr/src/php.tar.xz -C …   114MB
d7cb999958ae       /bin/sh -c mkdir -p /usr/src/php; cd /usr/sr…   10.3MB
7d8970c4f4fe        /bin/sh -c #(nop)  ENV PHP_URL=https://www.p…   0B
9240b0b75cb6        /bin/sh -c set -eux; mkdir -p "$PHP_INI_DIR/…   0B
663500a7b308        /bin/sh -c #(nop)  ENV PHP_INI_DIR=/usr/loca…   0B
0396dfa3d284        /bin/sh -c set -eux; addgroup -g 82 -S www-d…   4.68kB
1a21cc439955       /bin/sh -c apk add --no-cache ca-certificate…   2.75MB
a24bb4013296        /bin/sh -c #(nop)  CMD ["/bin/sh"]              0B
<missing>           /bin/sh -c #(nop) ADD file:c92c248239f8c7b9b…   5.57MB

Получается так, что если скачать архив в одной команде RUN то это сохранится в один слой, если в слудующей команде компиляция, то это еще в один слой, если потом в следующем RUN подчищаем все, то по факту размер образа не уменьшается.

Какие могут быть решения для уменьшения размера образа?

• Собирать с опцией --squash  в экспериментальном режиме, где все слои должно склеить, но у меня это отработало не совсем корректно и образ не особо уменьшило, видимо повторно этот же докерфайл собирает слишком поверхностно и надо сперва удалить раннее собранный, не стал копаться тут...
• Можно весь скрипт в один RUN, там где скачал и распаковал файлы, в этой же команде RUN и чистить следы, удалять лишние пакеты требуемые для сборки...
• Воспользоваться крутой утилитой Docker-slim

Docker-slim цменьшаем размер образа Docker

Попробуем уменьшить размер образа

 wget https://downloads.dockerslim.com/releases/1.32.0/dist_linux.tar.gz
 tar -zxvf dist_linux.tar.gz
 cd dist_linux/
 ./docker-slim

Набираем команду в утилите

build --target php-mp

В итоге в списке образов появится такой же, но с префиксом .slim

Было 477 мегабайт, стало 25, круто ведь, проверил, все работает корректно.

Теперь о том, как выгрузить этот образ, ведь он будет для наших кастомных задачек, публиковать на докер-хабе не собираюсь.

docker save php-mp.slim > myphp.tar

А на другом сервере

docker load --input myphp.tar

Получается мы можем забилдить контейнеры со своими конфигами, своими опциями сборки и модулями, скопировать на все сервера 25 мегабайтный архив, развернуть, запустить и все будет работать, никаких десятков пакетов в apt-get install, никаких монотонных правок php.ini и my.cnf, просто распаковать в докер, запустить и оно работает везде одинаково, везде с одним окружением... Магия!

Эта статья больше ознакомительная и шпаргалка для себя на будущее, скопировать готовый докер и запустить особо ума не надо, моя дальнейшая цель поработать с опциями, кое-что включить, а кое-что выключить, скачать сторонние библиотеки и собрать, больше не будет у меня такого что на новом сервере ставлю другую версию ПО на другой версии системы и потом спустя время ловлю что то тут то там забыл что-то настроить или установить, докер это круто.

Предварительная подготовка докерфайла

У любого человека при виде такого массивного Dockerfile возникнет вопрос - как же это вообще создать, чтобы не было ошибок, все просто, сперва запускаем консоль, предварительно сразу прокинув нужный порт, например 9000

 docker run -it --rm -p 9000:9000 -v /var/www/html:/var/www/html alpine:3.12 sh

Начинаем в нем выполнять команды типа apk add, apk del, make и все такое, в конце запускаем например php-fpm и тестируем из браузера, nginx ведь уже настроен, только остановите предварительно прошлый контейнер, который использует 9000 порт...

Немного про apline...

Устанавливать пакеты через apk add, удалять apk del

Если использовать параметр --no-cache, то кеш не будет создаваться и заполнять место, параметр --virtual это вообще интеерсная штука, после параметра virtual можно указать некое имя и потом по этому имени всё это снести что этой командой ставилось, например

apk add --no-cache --virtual kokoko nano glib zip ...
adk del kokoko

Это очень удобно, можно снести все что ставилось для компиляции и больше не требуется.

В ходе кастомной сборки у вас наверняка будут возникать моменты, когда какой-то библиотеки нет в системе, вы будете доустанавливать пакеты, поэтому во втором окне рядом откройте блокнот и актуализируйте команду установки, добавляя туда новые пакеты...

Когда все получилось, все действия в блокнотике отмечены, все команды и параметры, составляем наш докер-файл, и билдим, с первого раза может не получиться, например в одном RUN команды через ;, а все переносы экранируются \, когда многотекстовый документ надо заполнить, то так не получится:

echo 'f
fff
fff
gggg' > file.txt

Докер не понимает открытой строки, можно делать так как в примере выше было

{\
echo "f";\
echo "fff";\
echo "ggg";\
} | tee file.txt

Дальше все зависит от вашей фантазии, помните, эксперименты и опыты наше всё!

Ставить буду на Debian 10.

Скачать актуальную версию можно тут

Все действия под рутом!

Копируем ссылку на сайте, качаем, конвертируем, устанавливаем...

apt-get install libaio* alien
wget https://download.oracle.com/otn-pub/otn_software/db-express/oracle-database-xe-18c-1.0-1.x86_64.rpm
mv ./oracle-database-xe-* ./oracle_db.rpm
alien  --scripts ./oracle_db.rpm
dpkg -i ./oracle*.deb

Сперва нужно проверить актуальность своего айпи в файле /etc/hosts

Вероятнее всего нам выдаст ошибку

[FATAL] [DBT-50000] Unable to check for available memory.

Нужно отредактировать файлик /etc/init.d/

nano /etc/init.d/oracle-xe-18c

Находим там строчку Configuring Oracle Database

Ниже в строчке $SU -s /bin/bash найдем $EM_EXPRESS_PORT и после вставим, добавив пробелы до и после

-J-Doracle.assistants.dbca.validate.ConfigurationParams=false

Теперь запустим конфигуратор

/etc/init.d/oracle-xe-18c configure

У нас спросит пароль для системных юзеров базы данных, придумайте пароль, только не забудьте!

База запускается так, только после конфигуратора она должна сама запуститься

/etc/init.d/oracle-xe-18c start

Устанавливаем системные переменные вот так

export ORACLE_SID=XE
export ORAENV_ASK=NO
. /opt/oracle/product/18c/dbhomeXE/bin/oraenv

Проверить что все ок можно так

lsnrctl status

У Оракла есть веб-админка, но по-умолчанию она доступна только с локалхоста, можно расшарить и с других компов

sqlplus system

Вводим пароль, который устанавливали выше, дальше вводим команду

EXEC DBMS_XDB.SETLISTENERLOCALACCESS(FALSE);

и выходим командой quit

Теперь пробуем открыть (меняем на свой айпи) https://192.168.10.3:5500

Вводим там логин SYSTEM и свой пароль, видим примерно такое

Забавно, но админка требует флеш-плеер, такие дела, но пока мы не особо разбираемся, это пригодится.

Оригинальная инструкция тут

Пока можете потренироваться с запросами в sqlplus, чтобы кодировка нормально отображалась и был русский язык, если у вас локаль UTF

export NLS_LANG=RUSSIAN_CIS.UTF8

По дефолту создается схема XE для юзера system, но мы попробуем создать свою схему, для этого

sqlplus /nolog
SQL> connect sys as sysdba
*** вводим пароль ***
SQL> alter session set "_ORACLE_SCRIPT"=true
SQL> create user Pavlik identified by Pass123;
SQL> GRANT CREATE SESSION, CONNECT, RESOURCE, DBA TO Pavlik;
**это похоже делает вообще все привелегии**
SQL> GRANT ALL PRIVILEGES TO myschema;

Теперь попробуем зацепиться через SQL Developer с десктопа...

Сам SQL Developer портативный, просто распаковал и запускай

Кстати, наш порт нам показывало при конфигурировании на этапе выше...

Попробуем подключиться не к системному, а к новому пользователю, всё ок

Теперь можно и таблички создавать...

Если переключиться на вкладку DDL, то можно увидеть как это делается на SQL запросах

Дальше сами разбирайтесь, гуглите, читайте, для старта все есть.

Вы сразу спросите почему PHP, почему не Electron или Python, да все потому что нет времени изобретать что-то новое, если логика уже реализована в админке сайта например, или же уже сформирована достаточная кодовая база на PHP, если нужно разработать новое приложение, тогда да, можно его писать на чем-то с нуля, но тут просто скопировал, вставил, запаковал в архив и пользуйся.

Графическим интерфейсом для проекта будет тот же веб-сервер, достаточно в bat-скрипте после запуска сервера вписать открытие например localhost:10000 и готово. В идеале можно взять портативный браузер, сконфигурировать его правильным образом и запускать с правильными параметрами, чтобы не было никаких панелей, только окно сайта, но об этом позже вероятно расскажу.

В качестве веб-сервера будет использоваться тот, что встроен в PHP, ради однопользовательского приложения можно не ставить Apache или Nginx.

В качестве хранилища данных можно использовать файлы или SQLite, это по сути тот же MySQL, только чуть проще и не нужно отдельный сервер запускать, приложение просто дергает файл и оперирует данными из него.

Итак, начнем, создаем папку, например, WebTool, в этой папке создадим папку BIN и положим туда распакованный PHP для Windows,  в моем случае это 7.4.10

Внутри WebTool, рядом с BIN создадим APP, там будет наше веб-приложение..

Но внутрь BIN мы положим еще один файлик, хоть он и php, но будет этаким роутером, вместо .htaccess и веб-сервера.

Назовем его server.php и положим в папку BIN

<?php
//echo $_SERVER['REMOTE_ADDR']; exit();
//if($_SERVER['REMOTE_ADDR']!='::1') exit("ONLY LOCAL");

$path = parse_url($_SERVER["REQUEST_URI"], PHP_URL_PATH);
$ext = pathinfo($path, PATHINFO_EXTENSION);
$__DOC = $_SERVER["DOCUMENT_ROOT"]; 

$__full = realpath($__DOC . $path);
$path = rtrim($path,"/");


// все php и несуществующие пути обрабатываем приложением
if ((!is_file($__full) || $ext=='php')|| empty($path))
    include $__DOC.'/run.php';
//остальное, типа картинок отдаем пользователю напрямую
else
    return false;

А в папку APP положим пока просто файл run.php c текстом типа

<?php phpinfo();

Теперь первый тестовый запуск, в папку WebTool создадим файл start.bat

С таким содержимым важно путь до PHP правильный

start /MIN "WebTool" BIN\php-7.4.10-x64\php.exe -S localhost:10000 -t APP\ BIN\server.php
start "" http://localhost:10000

Достаточно будет кликнуть по start.bat и у нас откроется наше веб-приложение в браузере, а перед этим запустится сервер, тут нужно будет доработать, чтобы он дважды не запускался, но это потом... Дважды он итак не запускается, при втором запуске строчка с php не выполняется, выдает ошибку, а строчка с открытием странички в браузере срабатывает...

Чтобы остановить сервер - нужно закрыть свернутый терминал с сервером!

Если все правильно, то в браузере увидим примерно такую старничку

Дальше нам нужно привести в порядок php.ini, копируем внутри папки BIN/php-xxxx/ файл php.ini-development переименовываем копию в php.ini

Наводим порядки в файле, можно удалить всё лишнее, все равно это можно достать из оригинального файла из которого скопировали, у меня получилось типа такого:

[PHP]
engine = On
short_open_tag = On
precision = 14
output_buffering = 4096
;output_handler =
zlib.output_compression = Off
implicit_flush = Off
unserialize_callback_func =
serialize_precision = -1
disable_functions =
disable_classes =
zend.enable_gc = On
zend.exception_ignore_args = Off
expose_php = On
max_execution_time = 120
max_input_time = 60
memory_limit = 1280M
error_reporting = E_ALL
display_errors = On
display_startup_errors = On
log_errors = On
log_errors_max_len = 1024
ignore_repeated_errors = Off
ignore_repeated_source = Off
report_memleaks = On
variables_order = "GPCS"
request_order = "GP"
register_argc_argv = Off
auto_globals_jit = On
post_max_size = 800M
auto_prepend_file =
auto_append_file =
default_mimetype = "text/html"
default_charset = "UTF-8"
doc_root =
user_dir =
extension_dir = "ext"
enable_dl = Off
file_uploads = On
;upload_tmp_dir =
upload_max_filesize = 800M
max_file_uploads = 20
allow_url_fopen = On
allow_url_include = Off
default_socket_timeout = 60

extension=bz2
extension=curl
extension=ftp
extension=fileinfo
extension=gd2
extension=intl
extension=imap
extension=mbstring     
extension=mysqli
extension=oci8_12c  
;extension=odbc
extension=openssl
;extension=pdo_firebird
;extension=pdo_mysql
extension=pdo_oci
;extension=pdo_odbc
;extension=pdo_pgsql
extension=pdo_sqlite
;extension=pgsql
extension=sockets
extension=sqlite3



[CLI Server]
cli_server.color = On

[Date]
date.timezone = UTC

[bcmath]
bcmath.scale = 0

[Session]
session.save_handler = files
session.use_strict_mode = 0
session.use_cookies = 1
session.use_only_cookies = 1
session.name = PHPSESSID
session.auto_start = 0
session.cookie_lifetime = 0
session.cookie_path = /
session.cookie_domain =
session.cookie_httponly =
session.cookie_samesite =
session.serialize_handler = php
session.gc_probability = 1
session.gc_divisor = 1000
session.gc_maxlifetime = 1440
session.referer_check =
session.cache_limiter = nocache
session.cache_expire = 180
session.use_trans_sid = 0
session.sid_length = 26
session.trans_sid_tags = "a=href,area=href,frame=src,form="
session.sid_bits_per_character = 5


[mbstring]
mbstring.language = Russian
mbstring.internal_encoding = UTF-8

[Tidy]
tidy.clean_output = Off

[soap]
soap.wsdl_cache_enabled=1
soap.wsdl_cache_dir="/tmp"
soap.wsdl_cache_ttl=86400
soap.wsdl_cache_limit = 5

[sysvshm]
; A default size of the shared memory segment
;sysvshm.init_mem = 10000

[opcache]
opcache.enable=1
opcache.enable_cli=1
opcache.memory_consumption=256
opcache.max_accelerated_files=100000
opcache.validate_timestamps=1
opcache.revalidate_freq=5
opcache.save_comments=0

Перезапускаем сервер, дальше делаем этакое приложение, сразу скажу, у меня с прошлой работы очень много наработок завалялось, из этого начнем лепить приложение, итак, что нам нужно?

1.  Парсер URL для подгрузки нужных модулей

2. Система работы с модулями, систему контроля доступа можно упустить.

3. Базовая библиотека с обертками для выполнения типовых операций и работы системы.

4. Простенький шаблонизатор, чтоб не мешать логику и представление.

5. Контроллер для модулей.

6. UI-библиотека, состоящая из php+css+js, чтобы в пару строчек слепить форму...

7. Всякие классы типа для работы с БД...

Можно по идее взять готовый фреймворк, но я обойдусь несколькими файлами.

Если вам тема интересна - заходите в мою группу в вк, подписывайтесь, пишите в личку, на почту.

Сверху есть ссылка поддержать проект, если вдруг захотите.

Write-Host 'Вставляйте XML строчки, важно, без пустых строк, когда всё закончилось - жмете Enter в последней строке';
$xml_arr = @()
$inp = $null
While($inp -ne "") 
{
    If ($inp -ne $null) {$xml_arr += $inp.Trim()}
    $inp = Read-Host
}

Write-Host  "______RESULT________`n`n`n`n";


for ($i = 0; $i -le ($xml_arr.length - 1); $i += 1)
{ 
    $str = $xml_arr[$i];
    [xml]$str_xml = $xml_arr[$i];
    $it = $str_xml.FirstChild;
    $tbl=$it.Name;
    $fields = 

    Write-Host "-- SELECT * FROM $($tbl) WHERE ...."

    $select_arr = @()
    $insert_f = @()
    $insert_v = @()
    $upd_arr = @()


    foreach ($field in $it.Attributes )
    {
        $f = $field.Name
        $v = $field.Value

        $select_arr += "'$v' $f"
        $insert_f += $f
        $insert_v += "B.$f"
        $upd_arr += "A.$f = B.$f"

        
    }

    Write-Host "MERGE INTO $tbl A USING
    (SELECT
    $($select_arr -join ", ")
    FROM DUAL) B
ON ($($upd_arr -join " AND "))
WHEN NOT MATCHED THEN
    INSERT ($($insert_f -join ", "))
    VALUES ($($insert_v -join ", "))
WHEN MATCHED THEN
    UPDATE SET $($upd_arr -join ", ");";

}

Write-Host  "---------эту строку не копировать-----`n`nPress any key to continue...";
$null = $Host.UI.RawUI.ReadKey('NoEcho,IncludeKeyDown');

2. Сохранить в кодировке cp1251 c расширением ps1

3. Правой кнопкой выполнить в PowerShell

3. Вставляем xml в формате

<table1 field1="val1" field2="val2"/>
<table1 field1="val1" field2="val2"/>

Получаем мерджи для оракла

P.S. но в такой заготовке в блок ON и UPDATE одинаковая последовательность пишется, нужно пройтись руками удалить поля, оставить в ON только ключи, а в UPDATE остальные...
В выходные еще немного заморочился, сделал интерактивный алгоритм, который спрашивает пользователя какие поля ключевые, по ним идет поиск, а остальные идут для UPDATE...

Write-Host 'Вставляйте XML строчки, важно, без пустых строк, когда всё закончилось - жмете Enter в последней строке';
#read multi string
$xml_arr = [ordered]@{}
$inp = $null
$i=0;
While($inp -ne "") 
{
    If ($inp -ne $null) 
    {
        [xml]$str_xml = $inp.Trim();
        $it = $str_xml.FirstChild;
        $tbl=$it.Name;
        #if (!$xml_arr.ContainsKey($tbl))
        if (!$xml_arr.$tbl)
        {
            $xml_arr.add($tbl,@());
        }

        $xml_arr[$tbl]+=$it;

    }
    $inp = Read-Host
}


$out =  "______RESULT________`n`n`n`n";


foreach ($tbl in $xml_arr.keys)
{
    $tbl_arr= $xml_arr[$tbl];
    $table_keys = [ordered]@{};
    $table_fields = [ordered]@{};
    Write-Host "`nНужно определить ключи таблицы $tbl,`nвпишите номера строк через пробел"
    $i=0
    foreach ($field in $tbl_arr[0].Attributes )
    {
        $i+=1;
        Write-Host "[$i] - $($field.Name)";
        $table_fields.add("f_$i",($field.Name));        
    }

    $inp = Read-Host
    $k_nums = $inp -split " ";

    foreach ($k in $k_nums )
    {
          $k = "f_$k";
          if (($k -eq "") -or (!$table_fields.$k))
          {
              continue
          }
    
          $table_keys.add(($table_fields.$k),1);
    }

    $out+= "-- SELECT * FROM $($tbl) WHERE ....`n"
    

    foreach ($it in $tbl_arr)
    {
        $on_arr = $insert_v =$insert_f = $upd_arr = $select_arr = @()
        #attr iteration
        foreach ($field in $it.Attributes )
        {
            $f = $field.Name
            $v = $field.Value

            
            $select_arr += "'$v' $f"
            $insert_f += $f
            $insert_v += "B.$f"
            if ($table_keys.$f)
            {
                $on_arr += "A.$f = B.$f"  
            }  
             else
            {            
                $upd_arr += "A.$f = B.$f"
            }   
        }

    $out+= "MERGE INTO $tbl A USING
    (SELECT
    $($select_arr -join ", ")
    FROM DUAL) B
ON ($($on_arr -join " AND "))
WHEN NOT MATCHED THEN
    INSERT ($($insert_f -join ", "))
    VALUES ($($insert_v -join ", "))
WHEN MATCHED THEN
    UPDATE SET $($upd_arr -join ", ");`n";
    }

}


Write-Host  $out"`n---------эту строку не копировать-----`n`nPress any key to continue...";
$null = $Host.UI.RawUI.ReadKey('NoEcho,IncludeKeyDown');

Немного погуглив, нашел uglify-es

Открываем PowerShell или любую другую консоль...

npm install uglify-es -g

Этот пакет запускается такой же командой uglifyjs, поэтому, даже ничего не придется менять...

Определение имени диска в Linux

Первым делом смотрим все диски в системе

fdisk -l

В результате увидим несколько дисков и один из них нужный нам

Disk /dev/sdb: 100 GiB, 107374182400 bytes, 209715200 sectors
Units: sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O size (minimum/optimal): 4096 bytes / 4096 bytes
Disklabel type: dos
Disk identifier: 0x8b972816

Device     Boot Start       End   Sectors  Size Id Type
/dev/sdb1        2048 209715199 209713152  100G 83 Linux




Disk /dev/sdc: 20 GiB, 21474836480 bytes, 41943040 sectors
Units: sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O size (minimum/optimal): 4096 bytes / 4096 bytes

В данном листинге видно то что /dev/sdb на 100 гигов и на нем есть раздел, нет, это не наш, а вот в самом низу /dev/sdc, на нем ни одного раздела, значит это наш диск...

Создание раздела на диске в Linux

Далее, нам нужно создать раздел на диске /dev/sdc

fdisk /dev/sdc

Жмем m, если хотим увидеть все команды...

По-умолчанию, вероятно, у вас будет создана таблица doc(mbr), в которой разделы не больше 2Тб, чтобы переключиться на GPT - нужно ввести команду g

Чтобы создать раздел, нужно ввести команду n     

Дальше нас спрашивает основной или расширенный раздел, выбираем основной p, с этого момента и дальше можно просто нажимать enter, выберется все так, чтобы на диске был один раздел...

В самом конце нужно записать изменения и выйти, для этого команда w

Теперь у нас есть не только диск /dev/sdc, но и раздел на нем /dev/sdc1

Форматирование диска в Linux

После того, как диск создан, нужно на нем создать файловую систему, будем форматировать в ext4, многие думают что форматирование это стирание, но на самом деле, форматирование это создание файловой системы на диске.

На этом и всех других этапах не копируем слепо, а перепечатываем команду под ваш диск, т.е. меняя имя диска

 mkfs.ext4 /dev/sdc1

Вроде всё, наш раздел содан, файловая система на нем, но это еще не всё...

Монтирование диска в Linux

Если в том же Windows для монтирования нужно указать букву диска, то тут нужно указать папку, куда этот диск примонтируется, корень общий, а дальше в подпапки в любое место можно монтировать диски, я буду монтировать в корень, в папку /databases, сперва эту папку нужно создать

mkdir /databases

Для того, чтобы примонтировать идеально раздел, нужно знать его uuid, на обычном компе можно и просто писать /dev/sdc1, но на той же виртуалке при всяких обновлениях Hyper-V у меня диски местами менялись, они и на обычном компе наверно могут поменяться, если шлейфы местами поменять, хотя у меня такого вроде не было, в общем, лучше указывать уникальный uuid раздела, чтобы его узнать, нужно ввести в командной строке

blkid /dev/sdc1


/dev/sdc1: UUID="5228272d-9a5a-4150-9ef0-4f0fde7f6482" TYPE="ext4" PARTUUID="1c54c7c7-01"

Дальше открываем файлик /etc/fstab, предварительно скопируем наш UUID

nano /etc/fstab

Дописываем последней строчкой (диск папка фс параметры...)

UUID="5228272d-9a5a-4150-9ef0-4f0fde7f6482" /databases ext4 defaults 0 0

Теперь проверим, примонтируем всё, что прописано в /etc/fstab и еще не примонтировано

mount -a

И после проверим

mount -l |grep /dev/sdc1

Результат должен быть примерно такой

mount -l | grep /dev/sdc1
/dev/sdc1 on /databases type ext4 (rw,relatime,data=ordered)

Это означает что всё примонтировано...

Да вот только старый механизм подгрузки сломался, раньше была загрузка при которой в GET передавалась функция и в результате она выполнялась с параметрами нужными, а теперь нужно стало возвращать JSON код....

В config.js нужно прописать такое

config.filebrowserUploadUrl = '/upload_ck.php';

А в файле upload_ck.php

<?php
//тут нужно проверить имеет ли данный запрос право выполняться, 
//если нет, то выкинуть 503 и послать нафиг

$path = $_SERVER['DOCUMENT_ROOT'].DIRECTORY_SEPARATOR."media";

if (isset($_FILES['upload']) && isset($_FILES['upload']['name'])) 
{
   
    if (!is_dir($path)) mkdir($path);

    //ваша функция генерации имен файлов
    $name = GEN_FNAME($_FILES['upload']['name'],$path);

    $url = $path.DIRECTORY_SEPARATOR.$name;


    //if move file - exit
    if (!move_uploaded_file($_FILES['upload']['tmp_name'], $url))
        exit('{"uploaded": 0,"error": {"message": "Fail"}');
    


    //resize function
    //MPIMG::resize ($url,$url,1700,1700);

    echo json_encode(['uploaded'=>1,'fileName'=>$name,'url'=>$url]);

}
else
    $message = 'No file has been sent';

В данном листинге используются собственные функции генерации имен и контроля максимального размера, загрузка происходит в папку media, ни в коем случае не рекомендую использовать данный код в таком виде, как минимум, тут еще нужно проверять авторизацию пользователя.

Как такое починить? Да всё просто, вспоминаем про альфа-канал и заменяем слово transparent на #ffffff00

Всем спасибо за просмотр, счастья, здоровья.

Возникает это из-за того, что числа с плавающей точкой не имеют  бесконечной точности и где-то там на сороковм знаке после запятой будет или на единичку больше, или на единичку меньше, например, вы делаете

$a=2.4;

А в памяти сохраняется

2.400000000000000000000000000000000001

или наоборот где то на единичку поменьше...

2.399999999999999999999999999999999999999

Если вы, например, округляете копейки в большую сторону, то во втором случае получите 2.40, а в первом 2.41, т.е. клиенту посчитали цену на количество, он на калькуляторе пересчитал, ровно 2.40 посчитал, а тут выводит 2.41, это вызовет негодование, можно и на штрафы нарваться за такое дело...

Самое лучшее решение, которое мной используется уже несколько лет - изначально округлять по математическим законам на один разряд больше нужного, а потом делитьна 10 и округлять до целых в большую сторону...

Например, нам нужно перевести рубли в копейки:

один рубль равен 100 копейкам
21.5 рубль равен 2150 копейкам

Теперь о наших "ущербных" числах, нужно получить до 2х знаков после запятой

2.40000000000001

домножаем на 1000
2400.00000000001

округлим по математическим законам, справа ноль, округлится до
2400

Теперь, делим на 10 и округляем в большую сторону
240

На php такая округлялка будет выглядеть вот так

function float2int2($n,$m):int 
{
    $n*=pow(10,($m+1));
    $n = round($n);
    return Ceil($n/10);
}

или так

function float2int2($n,$m):int 
  {
    $n*=pow(10,($m+1));
    return Ceil(round($n)/10);
  }

Нужно все входные количества дробные округлять и цены, вести все операции с целыми числами, а в самом конце можно выводить деленное на 100 форматированное число из копеек в рубли.

В базе данных лучше использовать такие типы как DECIMAL, там с ограниченной точностью, по сути как целое хранится, только сдвигается запятая на определенное количество знаков.

И выдает что-то типа command not found или команда не найдена.

Вот например

root@homelab2:# shutdown
bash: shutdown: команда не найдена
bash: shutdown: command not found
root@homelab2:# reboot
bash: reboot: команда не найдена
bash: reboot: command not found
root@homelab2:# a2enmod
bash: a2enmod: команда не найдена
bash: a2enmod: command not found

При этом, все утилиты установлены, дело просто в PATH

Решений тут несколько

1. Вместо su писать su -
2. Вписать в /root/.bashrc в конец строчку

export PATH=$PATH:/usr/sbin

3. В /etc/bash.bashrc вписать алиас (в конец файла)

alias su='su -'

4. В файле /etc/login.defs дописать

ALWAYS_SET_PATH yes

После этого нужно полностью выйти из системы, даже из ограниченного пользователя...

Последний способ наверно самый адекватный...

1. Нет бочки, не нужно напрягать процессор камеры на коррекцию (даже в видоискателе)
2. На широкоугольном объективе есть искажения перспективы

Вот посмотрите, сверху если, то монитор узкий, а если слева то ооочень широкий.

3. Можно снимать с коротких дистанций, хоть на поверхности линзы можно сфокусироваться.

4. Можно смазывать задний фон.

Почти зеркальный фотоаппарат, жаль матрица как на смартфоне стоит, но при хорошем свете можно получить достаточно хорошую картинку.

Единственное,что меня сильно смущает это шумодав, он портит картинку.

Не забываем подписать на нашу группу в вк.

Как же быть? Вспоминаем то что у нас всё идет через NGINX

Проверим что наш nginx собран с нужным модулем, для этого в консоли

nginx -V

Там должен быть параметр сборки

 --with-http_image_filter_module

За это можно особо не париться, в свежих дистрибутивах с этим всё хорошо

Но вот в том же Debian выдаст ошибку

nginx: [emerg] unknown directive "image_filter"

Потомучто нужно установить пакет

apt install libnginx-mod-http-image-filter

А если такой пакет уже утсноавлен, то нужно в самом верху /etc/nginx/nginx.conf прописать

load_module modules/ngx_http_image_filter_module.so;

Открываем конфиг nginx, где прописан наш сайт

У нас там есть что-то типа такого

        location /
        {
        access_log off;
        proxy_pass http://127.0.0.1:3001;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header Host $host;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header X-Forwarded-Proto https;
        proxy_set_header Nginx-Https "on";
        proxy_connect_timeout 2s;
        }

Перед этим еще один раздел location создадим для картинок (обратите  внимание на порт и на адрес для прокси)

Но у нас сервис находится на локальном сервере, поэтому для картинок не будем ничего проксировать, а сразу прокинем папку локальную

  location ~* ^/content/images/(.+\.(?:gif|jpe?g|png))$                      
        {                                                                    
        set $width "-";                                                      
        set $height "-";                                                     
        set $quality "95";                                                   
        if ($arg_w != '')                                                    
        {                                                                    
         set $width $arg_w;                                                  
        }                                                                    
        if ($arg_h != '')                                                    
        {                                                                    
         set $height $arg_h;                                                 
        }                                                                    
        if ($arg_q != '')                                                    
        {                                                                    
         set $quality $arg_q;                                                
        }                                                                    
        #proxy_pass http://localhost:2368;                                   
        #proxy_set_header X-Forwarded-Proto https;                           
                                                                             
        alias /var/www/mysite/content/images/$1;                   
        access_log off;                                                      
        expires 10d;                                                         
        image_filter resize $width $height;                                  
        image_filter_jpeg_quality $quality;                                  
 }                                                                           

Перезагрузим nginx

Тепепь, если открыть любую картинку и добавить к адресу например ?w=100, то увидим что она сразу меньше стала!!!

Если выдает ошибку 415 Unsupported Media Type, значит ваша картинка ну очень огромная, я с таким сталкивался, нужно прописать

image_filter_buffer 6M;

Но тут будет конечно не супер, можете всю оперативку скушать на сервере с такими размерами...

Дальше нужно модифицировать SRC в шаблонах...

Вот тут я запнулся, пришел к выводу, что Ghost нужно или конкретно патчить, или же переходить на альтернативный продукт, жаль что я не имею опыта в NodeJS, но придется его получить! Когда время будет - вернусь к этому вопросу.

Линки

NGINX Docs | Image-Filter

Crop, resize, rotate, and perform other transformations on GIF, JPEG, and PNG images, with the Image-Filter dynamic module supported by NGINX, Inc.

NGINX Documentation

Моя первая в жизни плата получилась вот такой, это не устройство и вообще никуда не пригодится, тут я просто отлаживал техпроцесс...

Вероятно, чуть позже смогу достичь еще более лучших результатов... Но даже такое я смог достичь с 15го раза, да, для начала придется на 1 листе сразу по 4 шаблона выводить, печатать 3 таких листа, разрезать и утюжить, смывать, чистить, снова утюжить, главное не бросайте это дело, пробуйте, пробуйте, если устали, отложите на завтра. Меняйте параметры - время, силу нажима, температуру (мой утюг аж помял плату на максималке).

Пришел к выводу что стеклотекстолит толщиной 1мм вполне пойдет, фольгу тоже лучше брать 18мкм, а не 35, иначе травить будете ровно в 2 раза больше, но даже не в 2, а в 3, т.к. чем дольше травите, тем раствор холоднее и тем медленнее процесс, зависимость нелинейная...

Я залез на Авито и купил 10 отрезков текстоллита по 30 рублей, состояние может и не супер, но пройдя нождачкой получаем идеальную почти поверхность...

Нождачка по опыту в Оби очень хорошая, брать нужно примерно на 600-800, на 1200 можно для совсем таких работ типа стирания тонера без растворителя. Но на 1200 плохо липнет тонер, в общем он на глянец хуже липнет чем на слегка матовый, но главное царапины не должны быть глубокими, на фото выше я вообще начал очень крупной шкуркой...

Шкурить лучше с жидким мылом или фейри, так более гладкая поверхность получается и шкурка не стирается и не засоряется медью...

Когда плату зашкурили, нужно тщательно спиртом или ацетоном пройтись и больше не прикасаться к поверхности, если у вас новый дорогой текстолит, то там шкурить не надо, там говорят идеально тонер ложится на поверхность...

Далее печатаем шаблон в Sprint Layout, советую сразу зайти в копии и натыкать там по вертикали и горизонтали максимум копий, чтобы на лист сразу влезло много шаблонов, потом их разрезать, кстати к шаблонам тоже лучше не прикасайтесь, тонер не трогать на шаблоне, может помешать идеальному прилипанию...

Выбор бумаги для ЛУТ

Бумагу для печати ЛУТом я выбрал Lomond 0102145 (глянцевая, 85г/м², 100листов ), и кто там говорит что дорого?

Менее 4 рублей за один снимок. Да, не пугайтесь что это бумага для струйной печати, а печатать будем на лазерном принтере, у нас вообще редкостное извращение, кто-то на листах журнала печатает, кто то на подложке от самоклейки, кто-то вообще фольгу приклеивает к обычному листу бумаги, с фольгой мы еще попробуем, автор этой статьи вообще впервые в жизни плату делает, пока техпроцесс налаживается...

Если скажете что любая глянцевая пойдет, то нет, у меня валялась фотобумага непонятного производителя, на фото она слева...

Как видно, пятачки не пропечатались

А вот на ломонде вполне годно и полигоны тоже заливает четко

Да, есть мелкая крошка, но она на результат не влияет...

Как говорил, печатать лучше сразу много, я на один лист выводил по 4 штуки

Выбор утюга для ЛУТ

Утюг лучше поискать в кладовке старый советский, скоблить по фольге не очень для нежных современных, у которых нано-покрытия для деликатных тканей и еще желательно утюг без отверстий для отпаривания, так контакт будет равномерным... Если такого нет - поищите на Авито, на крайняк можно пройтись по всяким галамартам и фикспрайсам, поискать утюг без пара и рельефа на подошве...

Подбор поверхности для ЛУТ

Поверхность тоже имеет важную роль, у меня было две разделочные дощечки, тонкая и толстая...

Тонкая имеет явные перекосы, если мы на такое положим плату и утюг, то некоторые места не прогреет!

А вот толстая доска, которая стоит кстати рублей 50 в фикспрайсе, вполне сгодится

Обратите внимание, на обеих дощечках нет ни лака ничего, чтоб ничего не поплавилось, доска потолще еще и убережет лучше поверхность, я к примеру утюжил на стиральной машине, на 1см от поверхности уже стиралка защищена лучше, хотя я на нее еще сверху стелил полотенце и газету.

Лазерно-утюжная технология

1.Подготовка текстолита, нагрев утюга

В общем, процесс такой, обезжиренный текстолит кладем на доску, разогреваем утюг, хоть и советуют на 100%, но мне хватило 80%, чтобы ничего не плыло, переносилось идеально и чтобы текстолит не корежило при нагреве...

2. Первитчный прогрев заготовки

Сперва нужно подогреть сам текстолит, тут главное не перегреть, если разогреть его очень сильно, то будет сложно прицелиться, при первом прикосновении половина рисунка сразу прилепится  и его двигать не получится, но у вас много шаблонов, можете экспериментировать, запаситесь ацетоном, 646 растворителем или на край совсем мелкой нождачкой или кометом/содой + чистой губкой для посуды, будете 20 раз смывать и снова утюжить пока не получится, главное не сцарапать всё покрытие, оно тонкое, поэтому смывать или сцарапывать нужно максимально нежно!

Первичный прогрев нужен для того, чтобы металл не так расширялся относительно бумаги, дорожки не рвутся не смазываются, полигоны не так сильно рвутся... Бумага наоборот дает усадку небольшую, мой экземпляр на заготовке 10*15см не особо усаживался, не заметил сдвига дорожек, вот доказательство - рамка не сдвинулась!

3. Прикладываем заготовку, бумага полупрозрачная, целиться удобно, далее начинаем утюжить, сперва с одного края приклеиваем, потом с другого, далее можно разглаживать, качество разглажки видно сквозь бумагу, тонер начинает просвечивать.

4. Берем или мягкий шпатель или бочонок, я взял маленький скотч (рулончик) и им вдоль и поперек прогладил пока не остыло, потом еще раз утюгом и еще раз прогладил...

5. Чуть ждем чтобы остыло, совсем немного и под воду, я под горячую, чтобы не было перепада температур, бумага почти как писчая, размокает быстро, дальше нежно щеточкой проходим, главное не соскрести тонер, но если всё правильно, то его сцарапать достаточно сложно, дальше сушим, идем за стол под лампу, разглядываем, очень нежно убираем лишнее между дорожками. Но если на этом этапе сразу видны лютые косяки, а первые 10-15 раз это будет, поверьте, то всё нафиг смываем и по-новой утюжим, утюг не выключаем, стопку шаблонов не убираем далеко...

Первые разы у меня получалось вот такое (не прилипало)

Или вот такое (всё поплыло, контакты слиплись, формы дорожек нарушены)

Но на 15й раз получилось вот так, почти идеально, но руку еще надо набить, дорожки 0.1 почти годно, но порвалось, а вот от 0.2 идеально!!!

Кстати про кусочки бумаги между контактами, дорожками (см. на разъем слева внизу)...

Где-то выскреб, где-то для теста оставил, оно протравилось, за это вообще не парьтесь сильно, бумага промокает и сквозь нее травится, химия агрессивная, если передержать то и тонер разъедает, а бумагу вообще за 5 минут разлагает.

Травление

Берем Аммония персульфат, насыпаем в отношении 1 к 2 в горячую воду, в холодной будет вяло протекать...

Опускаем в емкость плату...

Процесс выглядит так

Через 10-15 минут у нас вот такое (остались только дорожки)

Отмываем тоннер растворителем или еще чем, я содой сцарапал, не было под рукой растворителя...

Результат пока не очень идеальный, но это моя первая плата, дальше технологию еще набью...

Далее нужно лудить, я просто намазал дорожки тагсом и прошел паяльником, потом с мылом тщательно промыл платы и протиер спиртом, но получилось не очень, мелкие дорожки отвалились, потом я убавил температуру до 230 и переставли отваливаться, но тут лучше сплав розе или что-то такое, тут тоже руку набью еще.

Видео про лазерно утюжную технологию (ЛУТ) ниже.

Я пока только в теории прикинул на чем буду собирать блок питания и каких он будет размеров. Ну примерно для 170-200 и даже в теории до 500 ватт хватит ферритового колечка на 29мм...  Т.е. блок питания будет достаточно компактным, пока практики с намоткой нет, я соберу инвертор и буду на нем эксперментировать с разными колечками, разными диаметрами, но это в будущем.

Для всех рассчетов сгодятся программы от человека с псевдонимом Старичок. У него их много и для дросселей тоже....

Теперь попробую структурировать всё, что удалось накопать за последнее время, по мере появления дополнительной информации - статья будет пополняться.

Чем отличается импульсный источник питания (блок питания)?

Помните блок питания от приставки Sega? Он такой тяжелый что розетку выламывал из стены и посмотрите на миниатюрный зарядник от вашего смартфона, быстрые зарядники не в счет, они чуть крепнее, у них мощность больше. Но у сеги адаптер примерно на 10 ватт и ваш зарядник к смартфону 5в 1А тоже на 10 ватт, а быстрые зарядки по 20-30 ватт и даже они меньше адаптера от сеги.

Если бы блок питания для компьютера на 700-800 ватт был обычным, то он бы весил килограмм 20 и был размером с весь ваш системник, сейчас пришла эпоха импульсных блоков питания! Они при большей мощности в сто раз компектнее, нужно меньше килограмм меди на производство, получается всё дешевле, но есть свои заморочки с ними, их нужно уметь готовить...

Почему импульсные блоки питания мощнее и компактнее?

Точной формулы вам не покажу, но если кратко, то одной из составляющей, от которой пропорционально растет КПД трансформатора - частота тока. Обычный переменный ток в розетке 50-60герц, а для импульсных источников питания применяется около 50 килогерц, что в 1000 раз больше. Чем выше частота, тем лучше показатели, но сильно высоко задрать не позволят характеристки сердечника, скорость силовых ключей и много других параметров, если ниже сделать, то попадем в звуковой диапазон и будут лишние помехи да еще и сам трансформатор будет раза в 2-3 больше.

На чем мотать импульсный трансформатор?

Для высокочастотных транформаторов уже не сгодится обычная трансформаторная сталь, сердечник ставят из феррита. Лично не проверял, но люди, которые делают блоки питания, говорят что торроид (круглое колечко) компактнее и мощнее, чем Ш-образные сердечники.

Только лишь формой не обойтись, материал тоже у всех разный, есть отечественные кольца типа M1000, M2000, M6000, можно задействовать их, а есть всякие Epcos, самое главное - магнитная пронгицаемость, чем выше, тем меньше витков надо наматывать и еще верхние пределы нужно смотреть по частотам, к примеру Epcos до 150 килогерц написано что держит, а M6000H указан предел в 30 килогерц, для нашего трансформатора 50 килогерцного уже не сгодится.

Можно в том же чипдипе поизучать ассортимент, почитать описания и позабивать в рассчетную программу разные сердечники, попробовать слепить максимально миниатюрный и мощный блок питания в теории, на практике могут быть конечно отклонения и габаритная мощность колечка не соответсовать реальной...

В общем, чем больше колечко, тем меньше на него мотать и тем мощнее может получиться трансформатор, програмка от Старичка поможет сориентироваться и прикинуть что и как...

Чем мотать импульсный трансформатор?

Мотать можно и витой парой и проводом МГТФ, но лучше сгодится эмалированная медь, рублей за 200 можно купить катушку на 100 метров, должно хватить.

Самое главное - импульсные трансформаторы не получится мотать как обычные, толстенными жилами по 2мм, тут есть свои ограничения, и чем толще жилка провода, тем меньше частоту можно будет взять!

Таблица примерно такая, взято тут

Ну а как же нам достичь нужного тока для обмотки? Просто берется жгут из нескольких тонких проводков, он выглядит как плоский шлейф, им наматывают и на выходе все проводочки спаивают...

Чтобы посчитать площадь сечения - нужна формула Пи*R²

R - это радиус, половина диаметра, который получаем со штангенциркуля, не забываем убавить толщину лаковой изоляции.  На один квадратный мм сечения закладывается 3-4 Ампера тока.

Первичная обмотка должна осилить все вторичные, а вторичные должны быть достаточной суммарной площади, чтобы ток отдать нужный и не сплавиться.

Драйвер или инвертор импульсного трансформатора

Драйвера собираются на IR2153 или на SG3525, первая микросхема позволяет буквально из нескольких деталек собрать драйвер, вторая чуть сложнее и уже умнее в плане стабилизации выходного напряжения.

Общая упрощенная схема выглядит так - сперва 220 вольт проходит через диодный мост, там в постоянное 310 превращается, т.к. из переменного мы верха срезаем синуса, то напряжение пульсирует, чтобы такого не было на вход ставят электролиты примерно по 1мкф на 1 ватт и напряжением 400 вольт чтоб не пробило, дальше микросхемой управляется парочка силовых транзисторов на 600 вольт, которые попеременно включаются и создают переменный ток с частотой под 40-50 килогерц и больше, дальше это на трансформатор и на выходе выпрямляется.

Обратная связь лепится через оптопару, с выхода трансформатора снимается напряжение, контроллер понижает или повышает частоту, управляя тем самым КПД трансформатора и подправляя тонко выходным напряжением, когда оно просаживается под нагрузкой, то на вход меняется частота. Но тут нужно быть аккуратным, если выходных катушек несколько, то нагруженную обмотку контролируемую повысит контроллер, а остальные обмотки выходные задираются. И к примеру в компе в китайских блоках бывает 12 вольт проседает до 11.5, контроллер до 12 задирает, а 5 вольт при это до 5.6 поднимается, так можно жесткие диски или юсб-устройства убить.

Тут на ум приходит такое - либо на каждую линию свой трансформатор со своим контролем, либо на выходе стабилизаторы импульсные или линейные, при большой нагрузке линейные превратят блок в печку.

Оптопара представляет из себя светодиод и светочуствительный элемент типа фототранзистора, который проводит ток сильнее, если светодиод светится сильнее, так происходит линейная зависимость тока на выходе и ругулятора на входе в трансформатор.

Без защиты никак

1. Плавный пуск (soft start)

Чем мощнее блок питания, тем больше электролит на входе, и чем больше электролит на входе, тем сильнее выброс энергии в сеть при включении прибора в розетку. Искрящая вилка при включении, мигающий свет, сейчас даже у пылесосов есть плавный пуск, чтобы не шатать электросеть.

В простейших и маломощных блоках просто ставится термистор, принцип действия такой - сперва сопротивление больше, на термисторе рассеивается тепло, он разогревается и сопротивление уменьшается, при этом плавненько, схема выходит на полную мощность. Есть недостаток - если выдернуть и вставить быстро вилку из розетки, то термистор горячий и плавного пуска не будет, ну хоть такое и то лучше чем ничего.

Более продвинутая схема плавного старта сперва через резистор заряжает плавно конденсатор, потом включает на полную мощность и параллельно драйвер с его нагрузкой подключает, вместо резистора иногда ставят транзистор, он плавно увеличивает ток, там буквально пару секунд, а потом замыкается релешкой, тут всё от фантазии зависит.

2. Защита от перенапряжения

Ходят рассказы про обрыв нуля и что в квартиру может прилететь 380 вольт, в этом случае в схему в самом начале, после предохранителя ставится варистор, при определенном напряжении он вдруг коротит схему, сам взрывается, но успевает сжечь предохранитель, и блок питания, и весь прибор остаются живыми.

3. Входной сетевой фильтр

Сетевой фильтр выполняется из конденсаторов и дросселей, гасит как приходящие помехи, так сеть защищает от себя, дросселей два типа ставят сразу или один, один с одной обмоткой, другой с двумя - это синфазный. Но я пока в этой теме не вник, но фильтр не помешает в финальном устройстве, без него сеть загадится.

4. Защита от КЗ и перенапряжения

В некоторых случаях и транзисторы и диоды может разорвать, в другом случае если прибор где-то коротнет, то блок питания выжгет весь прибор, а так он уйдет в защиту и ничего особо не произойдет. Защита делается токовым трансформатором, 2-3 витка толстенным проводов на первичку и побольше витков на вторичку, когда ток протекает по проводнику большой, то на вторичку ток какой-то поступает, который к примеру транзистором усиливается и при определенном значении размыкает схему, блокирует шим-контроллер, тут как токовые клещи, почитайте про токовые трансформаторы, если любопытно.

О новой рубрике

Сегодня я хочу поделиться своим опытом, вероятно, не совсем удачным и правильным, но отрицательный опыт тоже имеет пользу.

С 2006 года я веду разные блоги, сперва это был ЖЖ, потом blog.ru, с 2010 по 2019 сидел на гугловском блоггер.ком, несколько раз в год пишу статьи на хабр. В моей жизни часто происходит такое, что может пригодиться не только другим людям, но и мне самому спустя много лет. Да, я часто заглядываю в блог, ищу статью 10 летней давности, чтобы вспомнить как там это делалось, ибо с некоторыми вещами сталкиваюсь один раз в 10 лет.

Сегодня на сайте Tech-Research я запускаю рубрику "Летопись", это будет что-то похожее на стену во вконтакте или твиттер, тут не будет строгих обучающих статей на конкретную тему, тут будет просто передача опыта. Мой опыт ни в коем случае не нужно считать авторитетным, но сложив десятки таких "опытов" можно приблизиться к некому подобию истины.

Как выглядит видеоблогинг изнутри

Ладно, не будем отвлекаться, в общем, история началась еще несколько месяцев назад, я решил снимать видеоблог на смартфон, у меня тут происходит всякий DIY, в основном, электронника, пайка. Многочасовой процесс фиксируется на камеру (в этот момент желательно не отвлекаться на камеру), далее на Пост-продакшн вырезаются моменты всякие где я долго не могу отковырять край скотча, где жду нагрева паяльника, где роюсь в ящике в поиске нужной детальки. Далее нудные и долгие моменты ускоряются, ключевые моменты озвучиваются, где нужно - добавляется инфографика, текстовые вставки, подсказки... Процесс очень долгий и нудный, на выходе получаем 5-10 минутный ролик, который снимается 1.5 часа и монтируется часа 4 в несколько этапов, на каждом этапе весь ролик просматривается целиком, находятся недочеты, к примеру обрезал фрагмент неровно и в него влезло то, чего не должно быть.

Дак вот, самое главное в этом процессе - камера, про "свет для нищих" расскажу позже, про это, вероятно, даже видео сниму. В качестве "камеры для нищих" смартфон не сгодился...

Почему смартфон не годится для влога?

Смартфон не подходит для видеоблога, конкретно для моего - совсем!

Если вы немного знакомы с фотографией, то должны знать что такое глубина резкости, в общем, когда вы фотографируете человека, а задний фон мутный, то это дает особый акцент на нужном объекте, если пролетела муха, то она тоже не попадет в кадр, т.к. ближе чем объект, если глубина резкости больше, то в кадр попадет не только человек, но и задний фон, на котором он фотографируется или другой объект.

Глубина резкости целиком контролируется диафрагмой, чем сильнее открыта диафрагма, тем меньше глубина и больше смажется ближе или дальше от фокуса. И наоборот, чем сильнее закрыта диафрагма, тем больше попадает в фокус. Т.е. при ручном фокусе нужно отрегулировать так диафрагму, чтобы к примеру в пределах рабочей области всё попадало в фокус, чтобы при движении рук они не смазывались.

Автофокус, каким бы он не был прекрасным - не годится для всякого DIY, посмотрите многих видеоблогеров, которые постоянно ладошку подкладывают под винтик, чтобы показать его, вместо винтика в фокус попадает столешница или еще что. Если вы снимаете свое лицо и бьюти-блоггер, то эта статья не для вас, если вы ходите с камерой и снимаете репортажи, то тоже можете в видоискателе контролировать всё и фокус подстраивать. Но когда вы ставите камеру на штатив, фиксируете ее над столом и несколько часов занимаетесь своим любимым делом и отвлекаться на камеру не хотите, то у вас аналогичная ситуация.

Я не особо разглядывал смартфоны, но подавляющее большинство из них не умеет регулировать диафрагму, она фиксированная, в характеристиках так и пишут f2.3, а не f2.3-8.2, чем меньше цифра после F, тем меньше глубина резкости, больше открыта диафрагма, сильнее мажет задний фон (что круто для портретной фотографии), и при этом, чем сильнее открыта диафрагма, тем светосильнее объектив, т.е. при слабом свете фото будет четче, меньше смазываться, но нам наоборот нужно закрытую темную диафрагму, темноту мы скомпенсируем освещением рабочего места.

Отсюда вывод - нам нужна оптика с ручными настройками и желательно сменная оптика, чтобы подобрать специфичный объектив.

Да даже камеры для видеоблогов не всегда сильно справляются, вот скрин с канала Мурка, не в обиду, я тут не про канал, а вообще про эти все камеры и сложности съемки.

Что есть на рынке из недорогого?

Выбор достаточно прост, если вы располагаете суммой около 60, 70, а то и 100 тысяч на камеру (не забывайте еще про свет, звук, компик для монтажа, вероятно вложения на дизайн, логотипы, анимации, рекламу, камера это только часть расходов), но если на камеру у вас есть буквально 20-30 тысяч, то вы столкнетесь с тем же вопросом, что и я.

Дополнительно поставил задачу 1080р и 50-60 кадров для видео, хочется плавности. Компактные камеры не рассматриваем, там при такой маленькой матрице вообще с закрытой диафрагмой ничего не разглядеть, да и видео они пишут от 10 до 30 кадров.

Такие камеры только детям как игрушка пойдут ну или для съемки нетребовательных видео...

Чего-то адекватного можно добиться на ЭкшнКамерах, но там картинка будет как в дверном глазке, некоторые из них умеют выпрямлять ее и подрезать ровно края, но там это не всё идеально, есть еще объективы от Пиксаэро и всякие с АлиЭкспресс с меньшим углом, но это всё равно игрушки, света потребуется еще больше для таких камер, да и диафрагма опять фиксированная, не сильно лучше телефона.

Дальше идет нечто адекватное типа кэнон или фуджик, но это уже уходит за предел и не совсем то что надо, дальше поясню...

После долгих поисков я наткнулся на всякие Sony типа NEX-5, особенно последняя модель 5t вроде годная, но чуть дальше есть Sony a5100, этот фотик прямо самый крайний из бюджетных, почти как 6000 или 6500, его можно купить за 12 тысяч на авито и в достаточно годном качестве + объектив тысячи за 4. Если нет без объектива, то берите с объективом примерно за 16-17, там часто за эти 17 еще много плюшек продают типа 2-3 дополнительных аккумулятора, сумка, чехол, светофильтры, в общем, люди часто или забивают на всю эту фотографию, т.к. когда нужно нет с собой фотика, а в кармане есть смартфон или же покупают себе альфа 7 или вообще на кэноны/панасоники уходят, в общем, продают обычно и аккумуляторы и всякие дополнительные аксессуары.

Многие хотят много за свои фотики, NEX5t дороже 10-11 с объективом не покупайте, а5100 дороже 16-17 с объективом не покупайте, лучше добавить и уже a6000 взять, объективы sel1650 тоже не берите дороже 4000, расширяйте поиск по всей стране, делайте по всем категориям, иногда не туда размещают объявление, торгуйтесь.

Перегрев беззеркальных камер

Но со всеми этими беззеркалками есть одна большая проблема - перегрев, в столь тонком корпусе разместить массивное охлаждение сложно и все эти NEX, a5000, a5100, a6000, a6500 греются, меньше или больше, но греются, отснять непрерывно 1.5 часа на них нереально, частичное решение этого вопроса и обзор устройства охлаждения этих фотоаппаратов я записал на видео, смотрите, если интересно.

Я прилеплял даже внешний радиатор, ограничение кстати тоже снял на 30 минут, но камера перегревалась, можно в ней между процессором и теплораспределительной крышкой медную пластину прилепить, а далее внешнюю крышку перфорированную выпилить и к ней радиатор уже прилепить, но весь фотоаппарат превратится в нечто колхозное и потеряет мобильность и компактность, еще непонятно что в этом фотоаппарате еще будет перегреваться, может сама матрица тоже перегрузки испытывает при съемке видео, лучше рассмотреть именно видеокамеру, предназначенную для видео... Еще на фотоаппаратах часто нет выхода под внешний микрофон и встроенный тоже не супер.

Выбор ВИДЕОкамеры вместо фотоаппарата.

Долго думать не пришлось, примерно в то же время, что и NEX - выпускались видеокамеры в той же линейке - VG20 и VG30

Видеокамера 2012 года, но снимает не в 5 раз хуже, чтобы переплачивать в 5 раз больше за новинки. Сразу скажу, ищите предложения на авито без объектива, комплектный объектив 18-200 стоит как сама камера, нам не надо вероятно снимать на больших расстояниях, а вот угол наоборот понадобится чуть пошире, минимальное фокусное от 16мм, поэтому, берем объектив mount-e от наших Нексов и 5000/6000/a7 и прикручиваем на нашу камеру.

Сама камера VG30 на авито стоит около 25 тысяч без всяких косяков типа сломанной шторки, но таких предложений часто 2-3 на всю страну, другие хотят 30 тысяч за VG20 со сломанной шторкой, убитой батарейкой, торгуйтесь, мониторьте и вас ждет успех.

С небольшим объективом-блинчиком selp16 камера будет вот такой

Камера пишет аж 5 канальный звук, имеет вход под внешний микрофон, аккумулятора хватает часа на полтора-два, есть какие-то увеличенные, кучу обвеса на али можно найти.

PS: Как не пытался подружиться с VG30, так и не смог!

Камера имеет низкий битрейт, если мой смартфон жмет около 80 мегабит при 1080р/60fps, то у этой камеры около 28, и что самое главное, при увеличении фреймрейта с 30 до 50 кадров, битрейт не особо поднимается, а качество еще сильнее страдает.

В общем, камера на видео такие лютые артефакты давала в виде искажения цветом, смазывания мелких деталек, я едва ее продал за полцены от купленного, сейчас у меня примерно такое происходит...

В общем, фиксирую до сих пор всё смартфоном, сейчас думаю, либо мне снимать процесс пайки мелкотни на микроскоп (который тоже придется выбирать), либо экшн-камеру сверху направить на весь стол, чтобы в 4к снимала и потом увеличивать до 1080, кадрировать нужные участки, а с рук кадры крупные уже телефоном, ну не накопил я еще на годную камеру современную, фотоаппараты не умеют снимать  долго, главное наверно содержимое, а не супер-картинка...

Самое главное, что меня беспокоило - моя оперативка, затарился еще лет 5 назад 2133 оперативкой, сперва она на старом процессоре вообще работала на 1866, потом проц проапгрейдил до 1660v4 и она стала работать на 2133Mhz, но вот при всяких быстрых вычислениях полезно иметь быструю память, у меня 8 планок по 16 гиг, если их все продавать дешево и покупать чуть дороже новую, то тут как минимум 16 тысяч будет потеря...

Итак, вооружился AIDA64, первый замер такой (на штатных)

Эксперимент 1 - попробуем в биосе просто поменять частоту памяти с 2133 на 2400

Эксперимент 2 - поднимем частоту шины с 100 до 100.4, а тайминги с 17 до 16...

Эксперимент 3 - сделаем тайминги вообще 15-15-15

Как видим, латентность памяти еще снизилась на 2 наносекунды

При такой частоте шины тайминги меньше 15 никак не заводились, поэтому, я еще немного поднял частоту шины

Теперь, латентность памяти еще слегка уменьшилась

Т.е. память Patriot Memory PSD416G21332 16gb 2133Mhz легко работает на частоте 2429Mhz с таймингом 15-15-15-40, латентность памяти снижена с 82.8 до 76.8, это задержка уменьшилась на 7%... Примерно на это же число увеличилась скорость чтения и записи.

Как пользоваться штангенциркулем?

Как же пользоваться этим шайтан-прибором? Лет 18 назад нас учили в школе как работать с таким прибором, а сейчас могут и упустить из программы.

Для начала нужно узнать цену деления вашего экземпляра, это может быть и 0.1 мм и 0.05 и даже 0.001 мм, но полагаться на точность таких приборов особо не нужно, самые точные штангенциркули стоят раз в 20 дороже, но дома такое и не пригодится многим.

Попробуем измерить гайку для ключа на 10...

1. Сопоставим нолик на нижней шкале с верхней шкале

На верхней шкале сантиметры и милимметры, видим что у нас почти 1 см или 10 мм, но целых делений будет только 9, значит у нас не 10, а 9мм, это первый этап, понимаем что у нас 9 с чем то мм, почти 1 сантиметр, а вот сколько точно - поймем дальше.

2. Теперь смотрим какое деление на нижней шкале совпадет точно с любым делением на верхней шкале...

Начнем с того, что на нижней шкале каждые 5 делений равняется 1 и пронумерованы 1, 2, 3, ... Если умножить 5 на цену деления 0.02, то получим 0.1, значит тут для удобства каждые 0.1мм пронумерованы.

Ищем какая риска снизу точно совпадет с риской сверху, у нас это одно деление после 8, если бы было точно на 8, то было было 0.8, но у нас еще одна риска правее, как помним, у нас цена деления 0.02, значит к 0.8 прибавляем 0.02 и получаем 0.82!

Если бы на нижней шкале вообще не было цифр, то нужно было бы посчитать сколько делений от 0 до совпавшей риски, у нас это 41 деление, 41*0.02=0.82мм. На менее точных штангенциркулях делений снизу может быть не 50 как тут (10 по 5), а только 10.

3. Конечный результат

В итоге мы посчитали по верхней шкале что у нас 9 целых делений = 9мм, а по нижней посчитали что еще 0.82, складываем, и получаем 9.82 мм, до 1 см не хватает 0.18 мм, видимо припуск чтобы ключик легко надевался, а может просто китайские гайки + китайский штангенциркуль.

Где купить недорогой и качественный штангенциркуль

Мне приехал с Aliexpress штангенциркуль, выглядит достаточно хорошо, нули совпадают, есть царапинки очень слабые, видимо хранили кучей, а потом разложили по чехлам и отправили. Стоит такой прибор около 700 руб со всеми доставками, доставили буквально за 2 недели. Упаковано качественно, в комплекте прочный дермантиновый чехол, с таким чехлом удобнее хранить, а то можно поцарапать его о другие инструменты.

Можно найти и дешевле и электронный пластиковый, но больше половины этих товаров отвратительного качества, неровные губки, не совпадают нули и т.д., но этот штангенциркуль можно считать лучшим из бюджетных для домашнего использования.

Ссылочка на товар, лично проверенный, если не верите - почитайте отзывы других людей.

Чуть позже может и электронный возьму, но с ними всё сложнее, на многих цифры скачут как дикие, половина из них пластиковые, болтаются да и штангенциркуль это такой прибор, который лежит годами, вдруг понадобилось что-то замерить, достал и какая будет досада, когда батарейка сядет.

Резервная копия профиля Firefox

Первым делом на еще рабочей старой системе до переустановки и др. нужно сделать резервную копию, открываем вкладку about:profiles

Видим где находится текущий профиль, жмем открыть папку

Переходим на уровень выше, папку profiles и копируем всю нашу папку...

Восстановление зарезервированного профиля Firefox

Аналогичным образом перехожу в папку с профилями и перемещаю туда свой старый профиль

Теперь в about:profiles делаю следующее

1. Создать новый профиль
2. Пишем имя, любое, хоть вася и указываем папку

Укажем нашу папку, кстати ее можно было разместить не в profiles, а хоть где в корне диска к примеру или на другом диске

Далее жмем в списке профилей Запустить еще один браузер с этим профилем (новый профиль должен появиться внизу)

Теперь важно следующее, взять и закрыть окно со старым профилем, а потом только с новым, если последовательность не соблюдена, то нужно через win+r выполнять firefox.exe -p для запуска нужного профиля.

Немного потренировавшись, можно за пару секунд перетаскивать профиль старый на новый комп или новую систему, очень актуально когда старый комп накрылся, ты с него диск подключаешь для переноса файлов и сразу профиль, все дополнения и настройки, всё будет как раньше

В таких продуктах, как Vmware Player и Virtualbox изначально идет заточка под десктоп и там легко заводится тип подключения мост на wifi адаптер, когда ip адреса прокидываются в вашу беспроводную сеть... Но Hyper-V заточен больше под серверное применение, можете попробовать установить Linux на virtualbox или vmware (тут не говорю про серверный аналог, только десктопный продукт) и пингануть сеть, то пинги будут слегка больше иметь задержки, чем на Hyper-V, к тому же, Hyper-V еще имеет автозапуск в фоне независимо от того зашел пользователь в систему или нет.

Всё это и многое другое, к примеру скорость дисковой подсистемы, определяет выбор в пользу Hyper-V для домашнего Linux-сервера на Windows машине.

Но вот в Hyper-V нет никаких специальных сетевых драйверов-прослоек, которые бы позволяли его использовать по wifi в режиме моста (внешняя сеть), при таком использовании начнутся проблемы с обрывами между машинами и самым правильным решением будет использовать внутреннюю сеть или NAT.

Установка Hyper-V на Windows 10

Hyper-V работает только на редакциях Windows 10 pro, для его активации нужно запустить настройки - приложения -программы и компоненты

Далее нужно зайти в "включени и отключение компонентов"

И тут отметить галочкой Hyper-V, после перезагрузки в пуске появится Диспетчер Hyper-V

Создание внутренней сети в Hyper-V

Первым делом нужно создать виртуальный коммутатор, использовать Default Switch с недавнего времени стало невероятно, т.к. при каждой перезагрузке он сбрасывает ip на свой автоматический.

Для создания виртуального коммутатора, нужно зайти в диспетчер виртуальных коммутаторов

А дальше создать виртуальный сетевой коммутатор, выбрав для него режим внутренняя сеть

Назовем его к примеру VirtMachines

Настройка NAT на Windows 10 в PowerShell для Hyper-v (и не только)

Допустим, все виртуальные машины у нас будут в подсети 192.168.200.0, а шлюз у них будет 192.168.200.1, для этого этот айпи укажем у адаптера для virtmachines

А далее открываем PowerShell от имени администратора (правый клик по кнопке пуск)

И начинаем колдовать...

Первым делом нам нужно настроить сам nat, это snat или прямой нат или подмена источника... Он же маскарадинг. Дело в том, что если во внешнюю сеть улетит ip источника 192.168.200.100, то ответа никак не получит эта машина, для этого всю внутреннюю подсеть нужно скрывать за своим внешним или почти внешним айпи

New-NetNat -Name nat1 -InternalIPInterfaceAddressPrefix 192.168.200.0/24

Теперь в обратную сторону, то что приходит на физическую машину на 80 порт отправим на виртуальную машину с айпи 192.168.200.100

Add-NetNatStaticMapping -NatName nat1 -Protocol TCP -ExternalIPAddress 0.0.0.0 -InternalIPAddress 192.168.200.100 -InternalPort 80 -ExternalPort 80

Обратите внимание, что в прямом и обратном NAT применяется один NatName...

После клавиатуры от logitech (mk240), которая при наборе текста звучит как печатная машинка, сами кнопки на ней может и бесшумные, но дно клавиатуры пластиковое и корпус пустой и тонкий и звучит как барабан. Клавиатура от Microsoft же, очень тихая, кнопки ходят очень мягко и тихо, и корпус достаточно почный, увесистый, в общем она почти не издает звуков.

Первым вопросом у меня было - а как вообще тут скриншот сделать??? Нет ведь кнопки print Screen... У этой клавиатуры много сочетаний клавишь вшитых.

Начнем с того, что есть инверсия функциональных кнопок, например, если вам важнее кнопки f1-f12, чем всякие мультимедийные, то можно сделать инверсию, т.е. функциональные кнопки нажимать без Fn, а мультимедийные с Fn. Для включения инверсии Fn (Fn Lock) нужно нажать Fn+Caps.

• Домой: Fn + левая стрелочка.
• End: Fn+ правая стрелочка
• Page Up/Page Down: Fn+вверх/вниз
• PrintScreen: Fn+Пробел

Если что-то вдруг не работает, то попробуйте установить драйвера.

Через полгода отпишусь вероятно как мне эта клавиатура зашла, мне кажется что кнопки стали шумнее через несколько часов активной печати.

Сразу хочу сказать что после самописного движка или даже после какого-нибудь минималистичного OpenCart, Битрикс покажется невероятно сложной системой - 10 разделов меню, в них куча подразделов, дальше еще куча подразделов, создаю товар, понимаю что в этом товаре надо прописать характеристики, которых раннее не указано нигде, приходится закрывать редактор, переходить в другой раздел, там еще создавать. Опять создаю товар, до этого все товары были в штуках и метрах погонных, теперь в квадратных, опять всё закрываю и иду создавать единицу измерения, потом опять куча кликов чтобы вернуться назад и всё в таком духе. Да, не исключаю что я просто слишком глуп и чего-то недопонимаю. Еще в самом товаре есть куча вкладок с кучей полей, а потом там еще товарные предложения в товаре и в них тоже много вкладок, еще неочевидный момент что когда сохранил товарное предложение, то сам товар то не сохранил и он не появится...

Мне для изменения какого-либо функционала часто проще по базе поискать или в конфигах грепнуть, чем найти это в меню, но на второй день знакомства уже всё проще, всё прийдет с опытом, вероятно, и я хочу поделиться с вами своим небольшим опытом...

Редакции Битрикса

В Битриксе есть около 4х редакций: Старт - где даже фотогалерей нет, в общем ничем не лучше джумлы, только +5.4тыс отдать, далее стандарт - там добавляются форумы, блоги, фотогалерея... Далее идет редакция Малый бизнес за 35.9 тыс, а дальше Бизнес за 72.9тыс...

Малый бизнес и Бизнес - это так раз те редакции, которые могут заинтересовать большинство, т.к. в них есть модуль Интернет-магазин, в более младших этого нет... Малый бизнес - имеет обрезанную версию магазина без остатков по складам, мультиколоночного прайса, ну в общем сравните сами, если хватит обрезанной версии - пользуйтесь ей, если нет, то придется выложить в 2 раза больше. Если не ошибаюсь, то подобные траты можно компенсировать налогами, спросите у вашего бухгалтера, если это так, то сумма может многих не волновать.

Первоначальная установка Битрикс

Достаточно скачать zip файл, распаковать его в папку www на хостинге или локальном сервере, при установке скажет какие настройки php.ini нужно исправить - мне пришлось подкрутить параметры opcache и mbstring, а еще прописать часовой пояс по-умолчанию. При установке можно указать логин и пароль пользователя mysql и бд сама создаст все и развернет, далее логин и пароль администратора сайта, этот этап у меня не вызвал лишних сложностей.

Если для ознакомления нужно запустить, то на официальном сайте битрикса вообще есть готовые образы для виртуалок, у меня просто окружение уже развернуто и мне было так проще. Но если вы не желаете устанавливать Linux, Apache, MySQL.

Первоначальная настройка битрикс

1. Заходим в админку /bitrix/admin/ или же если вы авторизованы, то просто сверху вкладка "Администрирование", а потом слева в меню выбираете Магазин

2. Настройка единиц измерения - заходим в магазин - настройки - единицы измерения (не путать с настройками каталога)

Добавляем там свои единицы измерения, например рулон, упаковка, банка, коробка... Сразу продумайте все единицы измерения, т.к. в процессе создания товаров можете запнуться что нет нужной и нужно возвращаться к этому этапу

3. Название каталога - по-умолчанию у нас прописано "Одежда", но у вас это может быть Бытовая техника или Напольные покрытия или Автотовары или просто каталог... Я назову каталог, так понятнее.

Сразу после сохранения у нас раздел каталога назван каталогом а не одеждой...

4. Создание товаров и категорий в 1С:Битрикс

Товары создаются и редактируются в разделах (Каталог - Разделы), там создаются еще и категории (разделы)...

Тут у нас есть справа вверху синяя кнопка "Создать товар", не совсем очевидно, что при наведении на треугольник у создания товара сожно создать не только товар, но и категорию (раздел), долго думал как создать категорию, пока не стал создавать сами товары...

В будущем конечно вся эта выгрузка и обновление каталога будет автоматически из собственной товароучетной системы, но у меня цель вообще оценить стандартные возможности Битрикса, поиграться с настройками и характеристиками товаров...

Попробуем создать категорию Линолеум, перейдем в разделы (главный) и создадим категорию Линолеум

Линолеум, как и всякие футболки должен группироваться, если в футболках будет для одного товара несколько цветов и размеров, то для Линолеума будут разные ширины и каждая ширина по своей цене, для Обуви тоже будут одни туфли разного размера и, например, разных цветов. В общем, по факту ты покупаешь конкретный товар с конкретными параметрами, но в каталоге несколько отличающихся товаров объединяются в один с несколькими предложениями, это позволяет меньше путать посетителей, выводить меньше товаров в категориях, исключать дубли похожих товаров. В 1С:Битрикс такая группировка называется "Товар с торговыми предложениями".

Но прежде чем создавать такой товар с торговыми предложениями - подумаем чем они будут отличаться и предварительно пропишем свойства торговых предложений...

Я создал два свойства: Ширина и Тип продажи для нашего линолеума...

Далее возвращаюсь опять в Каталог - Разделы - Линолеум и выбираю пункт "Создать товар с торговыми предложениями".

Пропишем название Товара, пока обощенное без уникальных свойств, например, "Линолеум Tarkett хороший", не будем вдаваться в конкретику, у нас просто тестовые данные.

Ниже можно выбрать бренд, но мы его не прописали зараннее, так что не будем ничего выбирать, потом укажем...

На вкладках анонс и подробно можно залить картинки и описания, я так понял что анонс это то что выводится в категории в списке, а подробное описание и картинка будут уже при открытии товара.

Раздел СЕО нам пока не интересен, потом в это вникнем, там по-умолчанию генерируются мета-теги по шаблону, но можно вписать индивидуальные, у меня на самописном движке такое уже есть и тут есть, это хорошо.

Переходим во вкладку Торговые предложения, тут нужно насоздавать конкретные предложения этого товара, у нас они будут различаться по типу продажи (опт или розница) и по ширине.

Жмем добавить, у нас откроется еще одно окно, тут название изначально вписывается от товара к предложению, но вот при попытке выбрать тип продажи опять запнулся на том, что нельзя сразу тут вписать Тип продажи или ширину, у меня в движке так можно, у Битрикс такого нет, поэтому сохраняем как есть и идем создавать значения свойств.

Даже не знаю к чему этот XML_ID, наверно пригодится при синхронизации с товароучетной системой.

Кстати на заметку, тут в списках во всех есть такая кнопка, я думал что это сортировка, а это изменение, имейте ввиду

Венемся опять к нашим торговым предложениям, создадим линолеум опт 3м

И укажем значения характеристик

Нам не даст сохранить товар без указания цены, переходим во вкладку торговый каталог и прописываем цену. Там еще куча вкладок во вкладках, копаться и копаться... Было бы тут логично, если бы цена продажи и название были на главной вкладке, ибо фигня какая-то, очень сложно.

После этого создадим еще "4м опт",  "3м розница" и "5м розница" по аналогии...

Будьте внимательны, галочка активность это публикация на сайте, а не учет дат которые для активности...

У нас получается вот такое

Пробуем сохранить сам товар, снизу кнопка сохранить, иначе все предложения не сохранятся (наверно)...

Но на сайте у нас показывает до сих пор какие-то не наши характеристики для выбора товара, понять не могу почему

Итак, ползал несколько минут по админке, искал какие где галочки и вот что...

1. У одного из предложений я оставил цвет и размер, поэтому у меня тут в списке вывелось лишнее...
2. Там, где мы создавали свойство - нужно в самом низу поставить галочку "используется для выбора торговых предложений"

И вот результат

И в категории

Остается сделать товар чтобы он был в наличии... Заходим в 3м опт и прописываем доступное количество = 1 во вкладке торговый каталог - параметры

Теперь товар выглядит вот так

Укажем у всех то что оно есть в наличии и вот результат

Обратите внимание, оно нам не даст выбрать комбинацию свойств, которых нет, вот к примеру для 3м есть опт и розн, а для 4м только опт

А для 5м только розница

Если в том же месте, где указывали количество на остатке выключить количественный учет и разрешить покупать при отсутсвии, то у нас не будет ничего перечеркивать, актуально для тех, у кого нет своего склада, а есть только свежие остатки от поставщика, они как-бы не точные, т.к. поставщик уже десять раз всем продал, но хотя бы есть вероятность что этот товар не сняли с продаж и он не пропал на складах...

Продолжение следует...

Почему ноутбук?

Почему статья акцентирована на ноутбук? А потому что ноутбук это чаще ультрапортативное устройство с относительно слабой начинкой и не очень большой батарейкой. Если же батарейка очень большая и еще в ноутбук можно добавить много памяти, то это чаще всего не ноутбук, а рабочая станция весом 2 кг. Есть еще ноутбуки с крутыми характеристиками и очень тонкие и легкие, но они часто стоят как автомобиль... Данная статья не только для ноутбуков, но и вообще для компьютеров, которые не блещут избытком ресурсов... Но на ноутбуке в первую очередь нужна максимальная оптимизация, т.к. нужно максимально долго прожить от батарейки и часто у вас только 2-4 гигабайта оперативной памяти, а не 16 и более, как на стационарном компьютере, еще на ноутбуках процессоры экономичные и относительно слабенькие, а не 8 ядерные монстры типа i9.

Windows 10 очень даже хороша...

Не нужно ругать Windows 10 и стремиться поставить Windows 7, во-первых у вас это может не получиться, т.к. современные ноутбуки только на UEFI, на них ничего более раннее не запустится (исключение Win 8), во-вторых сегодня в моде экраны высокой плотности где на 13 дюймов может быть почти 4к разрешение, в более ранних версиях (в т.ч. и в 8) будет всё или слишком мелко или размыто. Только Windows 10 и начиная только с последних выпусков адекватно работает масштабирование... Поэтому выбора особо нет, только десятку и всё.

Да, вы сразу скажете что есть же Linux, который на 200 мегабайт меньше тратит оперативной памяти и такой облегченный и гибкий, но статья не о нем, против линукса ничего не имею, отличная система, но если не повезет, то потребление будет гораздо больше чем в Windows, еще и сканер отпечатков может не заработать и тачпад может не так четко работать... Да и вопрос экономии на системе не столь актуален, когда тот же браузер кушает несколько гигабайт из оперативной памяти.

Чистая переустановка Windows 10 на компьютере/ноутбуке

Первым делом советую при покупке нового ноутбука сделать установочную флешку Windows 10 через официальную утилиту Media Creation Tool.

Попробую объяснить, почему это очень полезно.

1. Скорей всего при покупке ноутбука у вас будет предустановлен предыдущий выпуск, например сейчас актуален 1903, а у вас стоит 1809 или 1803, вы запустите обновление системы, у вас будут долго-долго скачиваться все обновления, система обновлений Windows устроена таким образом, что при каждом накатывании новой версии компонента сохраняется его предыдущая версия для возможности отката и как-бы мы не пытались почистить диск, все равно размер системы не будет таким же, как и был при первой установке...
2. С завода на ноутбуке часто предустановлено ну очень много всяких утилит, которые только тратят ресурсы, там еще и пробные версии антивирусов и много всего другого, это удалять только время лишнее тратить.
3. С завода часто диск размечен так, что у нас еще и скрытый раздел для восстановления системы (переустановки), это только отнимает место на диске...

Взгляните на это фото, у меня мало того что разбит системный диск на два - Windows и Data, что не совсем удобно, т.к. иногда на Data может не хватить немного, а иногда и на системном, когда много софта поставишь, лишние заморочки... Еще у меня 0.5 гиг на winpe, 14gb на onekey, 1gb на WinRE, не знаю зачем это, мне оно не пригодится, но это 15.5 гигабайт пространства просто скушано под какие то восстановительные утилиты заводские.

Думаю теперь я убедил вас в полезности чистой переустановки с полной переразметкой диска (удалить все разделы и нажать установить на неразмеченную область).

Перед тем, как устанавливать систему, советую сделать резервную копию всех установленных драйверов, вдруг не найдете их на сайте производителя, некоторые китайские ноутбуки с отвратительной поддержкой и драйвера для них будете потом искать на всяких форумах...

Создаем установочную флешку через средство создания носителя (скачиваем на сайте Microsoft), устанавливаем систему, дальше устанавливаем все драйвера, если у производителя на сайте есть раздел загрузок, то скачиваем там последние версии, если там есть обновление биоса, то и его можно поставить, часто это решает серьезные проблемы типа залипания тачпада, неправильного энергосбережения, синих экранов и другого.

При первой загрузке новой системы отказываемся от всего, от чего только можно отказаться - отправка диагностических данных, улучшение определения местоположения и всё такое... Обычно я не захожу в учетную запись Microsoft, выбираю автономную.

Первичная настройка/оптимизация Windows 10

1. Советую избавиться от Windows Defender, он любит дико сканировать всю систему и проверять все выполняемые процессы, что иногда загружает процессор на все 100% и потребляет много памяти, для этого сперва выключаем в нем защиту в реальном времени, потом создаем файл .reg с таким содержимым и вставляем в него код (либо руками правим реестр)

Windows Registry Editor Version 5.00

[HKEY_LOCAL_MACHINE\SOFTWARE\Policies\Microsoft\Windows Defender]
"DisableAntiSpyware"=dword:00000001
"ServiceKeepAlive"=dword:00000000

[HKEY_LOCAL_MACHINE\SOFTWARE\Policies\Microsoft\Windows Defender\Signature Updates]
"ForceUpdateFromMU"=dword:00000000
"UpdateOnStartUp"=dword:00000000

2. Если у вас есть сканер отпечатков, то после DWS может отвалиться сканер отпечатков, нужно сперва в службах включить биометрическую службу, а потом в реестре HKEY_LOCAL_MACHINE\SOFTWARE\Policies\Microsoft\Biometrics поставить 1 у ключа Enabled, но лучше DWS не использовать, он устарел и достаточно много других проблем дает.

3. Советую выключить службу Windows Search, любит она шариться в нескончаемых объемах моего многотеррабайтного файлохранилища, а после этого выключить индексацию...

4. Советую выключить восстановление системы (защита системы)

Практика показывает, что при серьезных сбоях ничего в итоге не восстанавливает, но это тратит лишнее место на диске и на фоне делает снимки системы, что тоже кушает ресурсы...

Чтобы зайти в это окно - правой кнопкой по меню пуск, там система, там справа сведения о системе, там дополнительные параметры и вкладка защита, дальше настроить и выключить там...

5. В предыдущем же диалоге кликаем на вкладку дополнительно и там заходим в быстродействие, я там обычно оставляю только сглаживание шрифтов, чтобы лесенок не было и тени окон оставляю, ибо они иногда сливаются.

6. Автоматическое обновление автономных карт

Параметры-приложения-автономные карты, там стоит галочка обновлять автоматически, а зачем нам такое счастье

7. Синхронизация параметров - еще одна штука, рано или поздно вы все равно наверно зайдете в свою учетную запись и тут начнется...

Заходим в параметры - учетные записи - синхронизация ваших параметров, убираем все галочки, меня вот наоборот раздражает, на стационарном компьюетере я одни обои ставлю, на ноутбуке другие, а тут всё синхронизировалось и применилось везде одинаковое, да и вообще слив данных в облако не очень хорошо.

8. Меню пуск - рекомендуемы и последние...

Заходим в параметры - персонализация - пуск, тут я обычно выключаю "показывать недавно добавленные", чтобы не портить порядок приложений в пуске и не дублировать позиции и еще один пуктик важный "показывать иногда предложения", ибо не надо мне тут советовать и мониторить что у меня установлено, а еще один пуктик "показывать последние открытые элементы", ибо тоже нафиг что-то журналировать что последнее а что нет, что открывал и когда открывал...

9. Экран блокировки ползает лишний раз в интернет...

В персонализации выбираем экран блокировки, там фон выбираем просто "фото", а не "Windows-интересное" или "слайд-шоу", и чуть ниже выключаем забавные факты и шутки, мы тут работаем а не шутки смотрим.

10. Фон рабочего стола

В фоне рабочего стола тоже ставил просто фиксированное фото, а не слайд-шоу всякие...

11. Временная шкала, это когда жмешь win+tab, а там помимо открытых окон показывает еще. Заходим в параметры - система - многозадачность, выключаем временную шкалу.

12. Локальный пользовательский словарь - штука которая собирает всё что вы печатаете и какой-то ваш словарь составляет, непонятно что оно туда насобирает, какую полезную информацию смогут вытащить вирусы из хранилища на диске, да и вообще лучше не делать лишнего, поэтому заходим в параметры - конфиденциальность - персонализация рукописного ввода, снимаем там галочку.

13. Журнал действий, еще один пункт в разделе конфиденциальность, тоже его там выключаем и очистить жмем внизу.

14. Фоновые приложения, вот тут то от души можно поработать, в разделе настроек конфиденциальность выбираем фоновые приложения, снимаем там галочки почти со всего, что не требует пуш-уведомлений, например можно оставить для почты, чтобы уведомления о новых письмах всплывали... Чаще там такие приложения, которые вечно ползают в интернет, проверяют наличие обновлений и всё такое, при подключении на мобильном интернете это еще и сэкономит нам трафик...

Пока тут всё, если у вас есть другие советы - пишите в комментарии, добавлю в статью.

Автоматическое обновление системы Windows 10

Многие люди ломают голову как же выключить автоматическое обновление Windows 10, ведь это очень и очень ужасный функционал, на ноутбуке он начинает ставить обновления когда я включаю или выключаю его, отнимая у меня минуты моего времени, у меня человек на телефоне ждет, я говорю сейчас ноут достану, мой ноут включается за 2-3 сек, но вот обновления могут ставить несколько минут, на стационарном компьютере система сама перезагружается ночами и сервера, работающие в фоне на Hyper-V, вырубаются, а на них может в это время идти резервное копирование, обновления нужны, но я ставлю их сам когда плановые работы идут.

Пользователи Windows 10 pro могут покрутить в групповых политиках

конфигурация компьютера -> компоненты windows -> центр обновления системы

Пользователям домашней версии, особенно на ноутбуке поможет включение лимитного подключения на wifi, это убережет от лишних трат трафика при подключении по мобильному интернету

Остановка и запуск приложений

В Windows 10 есть такая неприятная особенность, когда выключаешь компьютер, то оно еще задает вопросы типа завершить эти приложения или нет, в итоге жмешь завершить, но иногда опять же жмешь завершить работу, закрываешь крышку и убегаешь, а ноутбук плавит твою сумку, не раз такое бывало еще на Windows XP.

Как же убрать вопрос при завершении работы и сделать автоматическое завершение всех приложений?

Заходим в реестр, HKEY_CURRENT_USER/Control Panel/Desktop

Создаем строковый параметр AutoEndTasks со значением 1, перезагружаемся и при следующем выключении или перезагрузке не будет задавать лишние вопросы, но это для опытных пользователей, которые всё сохраняют, а потом только завершение запускают...

Второй момент, который меня беспокоил и это только на Win 10 появилось - автоматический запуск приложений, выглядит это так, вы перезагружаетесь или выключаетесь, начинаете работать, а у вас вдруг запускается ворд, эксель, консоль, пара браузеров, текстовый редактор и всё что было до выключения, очень раздражало меня, вроде перезагружаюсь ради того, чтобы очистить память от хлама, а у меня снова куча запущенных приложений. Еси это выключить, то ночами перезагруженный компьютер не вернет все программы на место, поэтому либо вы сохраняетесь и выключаетесь в конце работы, либо с обновлениями у вас наведен порядок...

Заходим в настройки, учетные записи, варианты входа, там снимаем самую последнюю галочку, которая помимо всего еще и перезапускает все приложения при перезагрузке...

Мой Acer Swift 1 должен жить от батарейки даже в средней нагрузке больше 6 часов, а без нее вообще часов 12-13, но он разряжался примерно за 5 часов.

Итак, после того, как я засек сколько работает мой ноутбук и сколько тратится зарядки за час, сразу озадачился вопросом Как сделать диагностику аккумулятора на ноутбуке? Как узнать износ батарейки? Ведь производитель очень размыто дает ресурс аккумулятора, и любой сервис вам в ответ сразу скажет что очень зависит от сценария использования и ничего доказать не сможете.

Способ 1 - Aida64

При помощи Aida64, даже пробной версии вы сможете посмотреть ресурс батарейки, просто запускаем программу, заходим в раздел Компьютер -> Электропитание, а там ищем износ аккумулятора

В результате я увидел примерно такое (извините за качество, на телефон щелкнул, некогда было скриншотить, кидать на флешку, сохранять...)

По картинке видем то что паспортная емкость аккумулятора 53939, при этом контроллер смог зафиксировать максимальную залитую зарядку в него 35886, из этого вывод что износ с аккумулятора 33%...

После того, как я поменял ноут на новый в магазине и снова проверил, то уже вот такая картинка (степень износа 0%)

Способ 2 - стандартными средствами Windows 10

Когда перед вами ноутбук с витрины или б/у из комиссионки или с барахолки, то вам тоже будет полезно его протестировать, берем открываем powershell от имени администратора (правой кнопкой по пуску), дальше вводим такую строку

powercfg energy

После этого нам напишет что отчет сохранен по такому то адресу, копируем этот адрес, вставляет в строку в браузере и крутим открытый файл до сведений о батарее.

Ищем там расчетную емкость и последнюю полную зарядку, делим меньшее на большее, умножаем на сто, получаем оставшийся ресурс...

Еще одним из показателей (но не совсем точным) является smart накопителя, запустим crystal disk info, там покажет общее время наработки, для витринных экспонатов это показатель, для б/у могут поменять накопитель...

Еще есть такой момент, как калибровка контроллера, иногда идет расхождение показаний, нужно хотя бы разок до 0 разрядить и зарядить до 100, новые ноутбуки пару раз полностью зарядить надо до тех пор пока они нормально начнут показывать, так что не спешите идти и менять ноутбук.

1. Создаем на диске C: папку DriversBackup
2. Открываем терминал от имени администратора (или PowerShell)
3. Вводим такую конструкцию

dism /online /export-driver /destination:C:\DriversBackup

3. Ждем окончания, теперь папку C:\DriversBackup на флешку сохраняем..

4. После переустановки системы просто делаем поиск по этой папке...

Очень удобно, когда например надо на ноуте систему поставить на другой диск или на новом ноутбуке чистую систему без лишних утилит заводских поставить, еще удобно например сразу поставить 1903, чем обновлять 1803 или 1809, т.к. потом с обновлениями папку Windows раздует, проще самую свежую сборку установить по чистому...

Windows 10 drivers backup in powershell | tech-research

Если в случае с буквой с и c (латинская и кириллическая) и а/a можно методом ctrl+c, ctrl+f вычислить злосчастное слово, то с такими вещами, как обычный пробел и неразрывный пробел может быть дикое замешательство, что sublime text, что firefox нормально находил первую подстроку во второй, а вот php так не считал...

Для своих исследований я написал вот такую функцию на PHP

define('BR','<br>');

function str_pars($str)
{
	$len = mb_strlen($str);
	echo BR.$str.' (length='.$len.')'.BR;
	for ($i=0;$i<$len;$i++)
	{
		$char = mb_substr($str,$i,1);
		echo 'ch="'.$char.'"('.mb_ord($char).')'.BR;

	}

}

Это выведет посимвольно всю строку и для каждого символа покажет его код UTF, далее можете заглянуть вот сюда.

У меня во всех строках был пробел с кодом 32, а в одной из них 160.

Предварительно код нужно перевести в 16 ричную систему, т.е. 160 = A0, значит по первой колонке ищем U+00A0

Есть и более интересные варианты, когда Й выражается через И и сдвинутую надстрочную галочку ̆, (й) в UTF достаточно много интересных символов. И буква ё и много другого во входных данных может казаться схожим внешне, но разными символами.

Скопируйте символ й в блокнот, попробуйте удалить букву и получите удаление надстрочного....

На хабре есть статья по этой теме

Чтобы нормализовать пробелы и заменить двойные пробелы на одинарные, я использую вот такую конструкцию

$str = preg_replace('/\s{1,}/u', " ", $str);

Вот тут видно что место есть

 df -h |grep /sda1
/dev/sda1          120G          78G   37G           68% /

А если сделать вот так, то увидим что его нет

df -i /
Файловая система  Iнодов IИспользовано IСвободно IИспользовано% Cмонтировано в
/dev/sda1        7987200       7987200      0              100% /

Как такое получается, ну видимо так зарезервировали свободное место на диске...

На веб-сервере чаще всего проблема в сессиях, но удалить их так просто не получится, нужно сделать примерно вот так (предварительно зайдя в папку с сессиями или указав путь до нее вместо точки)

find . -name "sess*" -delete -print

Теперь сидим и смотрим как чистятся сессии... Но нет, оно зависает через несколько сотен тысяч файлов, rsync пустой папки тоже не очень, прочитал на хабре, оказывается лучше

rm -r /path/

т.е. не так ./*, а просто до папки...

Дальше выяснилось, что не только сессиями заполнен диск, нужно искать дальше, на помощь приходит примерно такой скрипт

du -s --inodes * 2>/dev/null |sort -g

Перейдем в корень и попробуем выяснить где тут много файлов...

Можно конкретно указывать где смотреть...

du -s --inodes /var/* 2>/dev/null |sort -g

или

du -s --inodes /var 2>/dev/null |sort -g

ну к этому позже, теперь о том, как чистить устаревшие сессии в кастомных директориях, когда каждый сайт определяет свою папку с сессиями, ну примерно вот так

find /path/to/sess -name "sess_*" -mmin +43200 -delete 

Это чистит куки, у которых время изменения больше 43200 минут, т.е. более месяца... Добавим это в кронтаб раз в 15 минут и можем жить спокойно... За месяц примерно 343278 сессий, при посещаемости 200 человек в сутки должно быть 6000 сессий в месяц, это значит что слишком много кто получает страницы не используя куки, т.е. каждая страница как новый посетитель, это скорей всего, всякие поисковые роботы, парсеры конкурентов...

Нужно будет придумать такой механизм хранения сессий, когда изначально куки выдаются на 30 минут, но если повторно обратишься в течение этих 30 минут, например, товар в корзину добавил или просто перешел с одной страницы на другую, то уже выдавать +10 минут, потом +20, чем активнее пользователь, тем дольше у него куки. К этому вопросу я еще вернусь позже...

PNGQuant (80к ->28k)

Я решил поиздеваться над сайтом одного магазина и попробовать оптимизировать картинку, не важно какой сайт, главвное нужен пример PNG и как он будет выглядеть. В примере будет только часть картинки без названия бренда, чтобы это не было рекламой...

Изначально картинка вот такая (80 килобайт, 16 бит RGBA, non-interlaced)

ls -sh logo2.png && file logo2.png
80K logo2.png
logo2.png: PNG image data, 281 x 56, 16-bit/color RGBA, non-interlaced

Многие выступают против JQuery, т.к. он целую сотню килобайт отъедает ресурсов, а тут один логотип маленький... Просто верстка, очевидно, была торопясь и шаблон просто резался быстро со всеми установками по-умолчанию из фотошопа...

1. Попробуем прогнать через pngquant

pngquant --speed 1 -f -v --ext .png --quality 60-80  logo2.png

Получилось вот так, в 3 раза меньше размер, 8 битный цвет и индексированная карта цветов...

28K logo2.png
logo2.png: PNG image data, 281 x 56, 8-bit colormap, non-interlaced

2. Попробуем откатить результат на оригинал и прогнать немного иначе, до этого программа pngquant выдала нам то что сохранила картинку в 256 цветах...

pngquant --speed 1 -f -v --ext .png 128   logo2.png

24K logo2.png
logo2.png: PNG image data, 281 x 56, 8-bit colormap, non-interlaced

Изменение цветов с 256 на 128 не дало ощутимого прямо 2х кратного падения размера, внешне это тоже не совсем отобразилось.

Попробуем совсем радикальное решение - 16 цветов

pngquant --speed 1 -f -v --ext .png 16   logo2.png 

20K logo2.png
logo2.png: PNG image data, 281 x 56, 4-bit colormap, non-interlaced

Дальше картинка жутко деградирует по цветам, а мы выигрываем какие-то жалкие 30%, из чего следует, что перегон в индексированную 8 битную палитру из 16 битной RGBA дает 3х кратное урезание картинки, тогда как дальнейшее уменьшение цветности результата совсем не дает, а только портит изображение...

Я бы отнес эту утилиту к хорошему решению для уменьшению картинок в 3 раза без потери качества...

OptiPNG

optipng -o7 -strip all logo2.png

56K logo2.png
logo2.png: PNG image data, 281 x 56, 16-bit/color RGB, non-interlaced

OptiPng совсем толком не помолгла, но смотрите что я сделаю дальше, а дальше я снова повторю то что делал раньше....

pngquant --speed 1 -f -v --ext .png    logo2.png

12K logo2.png
logo2.png: PNG image data, 281 x 56, 8-bit colormap, non-interlaced

Всего 12 килобайт и вот результат, примерно как при 24 килобайтах...

Исследовав дальше, я понял, что в pngquant тоже есть опция, но у меня стоит старая версия...

Дальше я обратил внимание вот на такие картинки!

Всего 2 килобайта и нет размытия, а всё потому, что у нас двухцветное изображение, есть таких много изображений на сайте без градиентов и переливов, которые могут в формате PNG быть компактнее JPEG, после прогона через pngquant примерно такой командой (если картинка не 2х цветная, то часто достаточно 64-256 цветов). Утилита optipng, в данном случае, используется для срезания всех мета-данных, но в новой версии pngquant эта опция присутствует и можно обходиться только этой утилитой...

pngquant --speed 1 -f -v --ext .png  2  logo2.png

file banner_bg1.png 
banner_bg1.png: PNG image data, 180 x 179, 1-bit colormap, non-interlaced

Некоторые объекты на сайте типа крестиков, стрелочек, кружков можно вообще сделать через SVG, об этом постараюсь написать статью чуть позже...

ИТОГ

После двух дней опытов на двух своих проектиках я пришел к выводу, что PNG очень компактный и крутой формат, и если делать примерно вот так

optipng -o7 -strip all logo2.png

А потом вот так

pngquant --speed 1 -f -v --ext .png  2  logo2.png

То сперва из файла вырежется всё лишнее и он сам оптимизируется, а потом еще через pngquant будет создана палитра цветов, которые присутствуют в файле и по ним будет сверхкомпактная картинка, я картиночки некоторые с 12 килобайт до 670 байт упростил, без появления размытия и потери качества, просто там нет градиентов, есть только двухцветная картинка... С JPEG я еще разберсь позже, но он вроде изначально вполне хорошо жмется, только мета-информация и теги при использовании с камеры, но протой ресайз средствами PHP очень хорошо вырежет всё лишнее.

Если у вас умирающий скрипт, который некоторое время подумает, а потом снова к базе обращается и может произойти отключение в этот момент, то нужно в my.cnf прибавить таймаут, например, сделать его пару минут

wait_timeout = 120

Но у меня таймаут может быть хоть триста дней, для этого я решил наоборот его убавить, чтобы отловить этот момент и да, если выполняю запросы к базе, то все отлично, отсчитываю 10 сек, снова выполняю и скрипт вылетает, т.к. соединение с базой уже отвалилось. Нужно тут уже сам скрипт подпиливать.

У меня свой класс для работы базы на mysqli, конечно, первым делом подумал о том, что можно проверку соединения делать в момент запроса, но не добавит ли нам это лишних затрат по времени, когда например надо 5 миллионов записей в базу залить, там даже индексы и те добавляют некоторую задержку и я сперва забивал базу данными, потом индексировал поля.

Лучшим решением будет проверка соединения в момент запуска функции, а функция моя чаще выполняет 2-3 запроса и делает это за доли секунды.

Итак, скрипт висит на фоне, висит так пару суток, тут к нему прилетает запрос от Rabbit, он запускает функцию обработки, которая некоторые данные цепляет из базы и тут перед выполнением наших запросиков надо бы проверить соединение и переподключиться...

class DB {
	public $l, 
			$db_name, 
			$last_res, 
			$cnt = 0, 
			$debug=0, 
			$last_rows;
	private $c = []; //connect config

	public function connect(&$c)
	{
		if (isset($c['socket']) && !empty($c['socket'])) 
			@$this->l = new mysqli(NULL, $c['user'], $c['pass'], $c['db_name'], NULL, $c['socket']);
		 else 
			@$this->l = new mysqli($c['host'], $c['user'], $c['pass'], $c['db_name']);

		if ($this->l->connect_errno) 
		{
			http_response_code(503);
			exit("ERROR CONNECT DB");
		}
	}

	function __construct(&$c) {
		$this->connect($c);
		$this->c = &$c;
	}


	public function check_conn () 
	{
		if ($this->l->ping()===false) 
		{
			//проверим еще раз не переподключился ли он автоматом
		    if ($this->l->ping()===false)
		    	$this->connect($this->c);
		} 	
	}

//тут еще дофига методов, но я их не покажу
}

$l - это у нас переменная $mysqli

Я дважды проверил через $mysql->ping, т.к. в некоторых ситуациях в момент выполнения этой функции происходит автоматический реконнект, по умолчанию оно отключено, и даже если включено, то mysqlnd игнорит...

Пока я читаю книгу, данная статья будет пополняться, не знаю на сколько долго я буду в этом разбираться, но даже для самого себя полезно как краткий конспект.

Книга называется Паттерны проектирования, автор Эрик Фримен, примеры там на JAVA, но мне они показались очень понятными, хоть я и веб-разработчик на PHP, но имел дело с Pascal, Delphi, C, LUA, Python и иногда внести правку в код программы на незнакомом языке достаточно просто, т.к. основы то везде одинаковые - условия, переменные, циклы, функции, ввод и вывод...

Шаблоны (паттерны) проектирования - это всего-лишь примеры лучших практик для решения каких-либо задачек, но нельзя описать оптимальное решение для всего абсолютно, ваш проект будет чем то смежным между несколькими паттернами в разных местах и добавлением своих хитростей.

Наблюдатель

Такой паттерн примерно использовался в моей прошлой статье, когда я подписывался на очередь из RabbitMQ, я просто передавал ссылку на свою функцию в класс AMQP и когда сообщение приходило, то тот класс дергал мою функцию.

Главный класс, который управляет ситуацией, например курсы валют через него обновляются. И есть классы наблюдающие, например, у нас входные цены в баксах, а надо в рублях цену обновлять каждый день. И есть несколько таких классов, один в товарах обновляет, другой в XML выгружает. Классы наблюдатели сообщают "главному" классу что когда валюта поменяется - дерни меня, передавая ему например ссылку на свой метод.

Когда наблюдающие классы регистрируются в классе курса валют, то он их в некий массив складывает, потом, когда мы вызываем метод задания курса валюты, то этот класс по событию изменения курса по массиву обходит и дергает все классы, которые в нем зарегистрировались, т.е. подписались на событие изменение курса...  

Декоратор

Это какой-то замудренный паттерн, но я видел его применение во многих кодах на PHP, например в том же PHPExcel. И я тоже такое делаю иногда, просто не знал как это назвать.

Суть заключается в том, что один из классов передается в другой и тот использует его методы, потом этот еще дальше передается в новый класс, тот его использует методы, а методы второго используют из первого класса при этом, каждый раз вызывается функция, которая задействует метод родителя с таким же именем, это какая-то лютая рекурсия. Но в конечном итоге, результат формируется прохождением через цепочку методов, наверно так сложно понять, я попытался изобразить на PHP то что в книге на Java расписывалось.

<?php

//кофе
class Coffee
{
	public $parent_method;

	function __construct(&$m=false)
	{
		$this->method = $m;
	}

	//у кофе есть цена
	public function calc()
	{
		return 100;
	}

	public function descr()
	{
		return "Кофеек";	
	}
}

//сахар
class Sugar
{
	public $parent_method;

	function __construct(&$m=false)
	{
		$this->parent_method = $m;
	}

	//цена сахара + цена класса выше
	public function calc()
	{
		return 10+$this->parent_method->calc();
	}

	public function descr()
	{
		return $this->parent_method->descr().", Сахарок";	
	}
}

//молоко
class Milk
{
	public $parent_method;

	function __construct(&$m=false)
	{
		$this->parent_method = $m;
	}

	//цена молока + цена класса выше

	public function calc()
	{
		return 20+$this->parent_method->calc();
		
	}


	public function descr()
	{
		return $this->parent_method->descr().", Молоко";	
	}
}


$napitok = new Coffee(); //создаем напиток кофе
$napitok = new Sugar($napitok); //добавляем в него сахар
$napitok = new Milk($napitok); //добавляем молоко

echo $napitok->descr().PHP_EOL; //выводим название получившейся смеси
echo "Цена напитка: ".$napitok->calc().PHP_EOL; //выводим цену

Суть в том, что мы создали класс кофе, потом сахар и запихнули в него класс кофе, а потом это еще раз отправили в класс молоко, а потом из последнего класса вызвали функцию генерации описания и подсчета цены и у нас по цепочке вложенности всё выполнилось, результат вот такой (выполняю код в консольке)

~ php decorator.php 
Кофеек, Сахарок, Молоко
Цена напитка: 130

Прикол в том, что можно исключить строчку сахар

//$napitok = new Sugar($napitok); //добавляем в него сахар

И получим вот такой результат

~ php decorator.php 
Кофеек, Молоко
Цена напитка: 120

Этот пример достаточно абстрактный приведен, чтобы показать как можно перезадуйствовать в одном классе другой. Можно привести пример что вместо первого класса у нас будет класс для работы с базой, а второй для работы с данными и в такой цепочке можно первый класс не mysql, а mongodb подключить и следующий класс для работы с данными просто будет стандартные методы выполнять и не знать что у нас там за база, ну это тоже абстрактно очень, главное, чтобы вам было понятен такой фокус.

Если бы мне предложили считать кофе в таком элементарном коде и сделать это методом декоратор, то я бы сделал вообще вот так!

<?php


class Napitok
{
	public $parent_method,$description,$price;

	//конструктор, то что передается при создании класса
	function __construct(&$m=false,$d,$p)
	{
		$this->parent_method = $m;
		$this->description = $d;
		$this->price = $p;
	}

	public function calc()
	{
		if ($this->parent_method===false) 
			return $this->price;
		else
			return $this->price+$this->parent_method->calc();
	}

	public function descr()
	{
		if ($this->parent_method===false) 
			return $this->description;
		else
			return $this->parent_method->descr().', '.$this->description;	
	}
}





$start = false; //переменная с экземпляром по ссылке передается, в первом классе нет родителя
$napitok = new Napitok($start,'Кофе',100);
$napitok = new Napitok($napitok,'Молоко',20);
$napitok = new Napitok($napitok,'Сахар',10);


echo $napitok->descr().PHP_EOL;
echo "Цена напитка: ".$napitok->calc().PHP_EOL;

Я тут просто три класса создал с разными параметрами в конструторе и передал их также по цепочке один в другой...

Фабрика и простая фабрика

Многие путают простую фабрику с фабрикой, в этом мы попробуем сегодня разобраться...

Простая фабрика выглядит примерно так

1. Сперва некая простая фабрика

class SimpleFabrica 
{
	public function create_class($type)
	{
		if ($type===1) return new Class1;
		if ($type===2) return new Class1;
		...
	}


}

2. Потом класс, который ее использует

class Myclass
{
	protected $fabrica;

	function __construct($fabrica)
	{
		$this->fabrica = $fabrica;
	}


	public function prepare($type)
	{
		$newclass = $this->fabrica->create_class($type);
		$newclass->get();
		$newclass->prepare();
		return $newclass->get_result();
	}
}

А потом попробуем всё это задействовать

$fabrica = new SimpleFabrica;
$creator = new MyClass($fabrica);
$result = $creator->prepare(1);

В общем суть этого подхода в том, что есть отдельный класс - фабрика (простая), который в зависимости от типа объекта (переменная $type) создает подходящий класс, а дальше выполняет с ним определенную последовательность. Допустим, нам надо получить страницу или файл, мы передаем типа ftp или http или webdav, у нас создается нужный класс для работы с этим делом и над ним проводятся манипуляции - получить, обработать, вернуть результат...

Но это всё "простая фабрика", это не является полноценной фабрикой, это лишь подход к созданию объектов, он очень часто используется и является помощником паттернов...

Паттерн фабрика

Паттерну фабрика отведено 60 страниц в книге "Паттерны проектирования" серии Head First, чтобы вникнуть в это более глубоко, советую всё же прочитать книгу, это одно из фундаментальных знаний...

Насколько я понял, паттерн фабрика позволяет метод создания экземпляра класса вытащить в подклассы, для начала сделаем вот так

abstract class Myclass
{

	public function prepare($type)
	{
		$newclass = $this->create_class($type);
		$newclass->get();
		$newclass->prepare();
		return $newclass->get_result();
	}

	protected function create_class($type)
	{
		//это будет в субклассах
	}
}

Вообще, изначально в базовом абстрактном классе мы не должны раскрывать create_class, а вот в субклассах определяем логику создания классов.

class Subclass extends Myclass
{
      protected function create_class($type)
      {
        if ($type===1) return new Class1;
        if ($type===2) return new Class1;
        ...
      }
}

Короче фабрика печет пирожки, где для каждого разного пирожка создается специальный повар, а вот какого именно повара привлечь к созданию - сам субкласс определит, создав экземпляр.

Паттерн одиночка

Этот паттерн создает экземпляр в единственном числе, если экземпляр объекта уже создан, то возвращается он, а не его копия, реализация данного механизма усложняется в многопоточном программировании, когда один поток создает, а второй обратился или оба обратились в один момент и для двоих создались разные экземпляры, в многопоточности для каждого языка программирования есть свои методы синхронизации событий. И поэтому, простая проверка на создание экземпляра превращается в некий отдельный механизм, который гарантирует 100% предотвращение дублирования.

Где нельзя дублировать? Ну есть такие вещи, типа монопольный доступ к файлу, контроль очередей или процессов, если к этому будет два разных объекта свою политику вести несогласованную не зная друг о друге, то будут лютые конфликты.

Патерн команда

В простом понимании - основной класс имеет метод execute(), запускающий определенное действие, а дочерние классы этот метод переопределяют, выполняя свои дела.

В более усложенной форме есть массив с командами, есть метод для задания на определенную команду определенного метода, при вызове нужной команды выполняется нужное действие.

Конкретной реализации не стану приводить, скажу что у вас есть массив команд с их названиями и в значениях массива вызов конкретного метода, будь то из этого же класса или же из другого или вообще анонимная функция.

Паттерн Адаптер и декоратор

Описывать подробную реализацию данных паттернов не буду, всё будет понятно и так... Представьте такой момент, когда вы провели массовый рефакторинг, выпилили кучу методов, добавили новые, переименовали другие методы более логично, ваш функционал оказался несовместимым с большей частью кода. Или, например, у вас была библиотека PHPExcel для чтения и генерации Excel-файлов, а потом разработчики решили закопать библиотеку и создали новую PhpSpreadsheet, но у вас так много импортеров из прайс-листов Excel и всяких генераторов Excel файлов с отчетами, накладными, товарными чеками и других документов, предположим, что новая библиотека имеет совсем другие методы для чтения и записи, для работы с оформлением ячеек, конечно, можем пройтись поиском по файлам, найти сотни или тысячи вызовов методов и переименовать их, более того, если в новых методах вместо передачи нескольких переменных нужно уже передавать одним массивом или порядок параметров функций поменялся, то это создает очень большую нагрузку на голову. А представьте что вам нужно в вашей системе поддерживать обратную совместимость со старыми модулями сторонних разработчиков. Тут и идет на помощь паттерн адаптер или фасад, создаем некое подобие старой библиотеки с методами и классами, но в этих методах ничего не делаем, просто вызываем методы новой библиотеки.

В книге написано так - декоратор преобразует один интерфейс к другому, а адаптер не меняет интерфейс, добавляет новые обязанности... К этому вопросу я еще вернусь.

Паттерн Фасад

Этот паттерн помогает делать рутинные действия с другими методами, т.е. методы этого класса будут запускать сразу целую пачку методов другого класса.

Шаблонный метод

В шаблонном методе идет схожий порядок действий, только некоторые из них переопределяются в конкретной реализации, например приготавливая чай и кофе мы наливаем кипяток, добавляем пакетик чая или ложечку кофе, дальше сахар, а дальше в кофе молоко, а в чай лимон, т.е. некоторые стадии в этом порядке меняются, но весь алгоритм очень похож. Поэтому, создается некий шаблон и определяются специфические действия в конкретной реализации.

Если у вас есть что добавить по паттерну фабрика - пишите в комментариях.

Статья будет пополняться, сперва я хотел писать статью под каждый паттерн отдельно, это было бы лучшим решением, т.к. больше страниц просмотрят, больше рекламы, но лучше собрать больше для себя конспект структурированный по всему, чем писать нелепый бред.

Мне понадобилось вытаскивать по конкретному слову его данные, для этого составил табличку такого типа

В поле gram прописываются некие теги по данному слову, а gram_descr - описание этих тегов (это пока для тестирования и анализа первая штука).

Например вот так

Можно прибегнуть к системам полнотекстового поиска, может так и сделаю, но меня первым делом смущает работа по http некоторых таких систем, если надо будет 1000 запросов в секунду кидать, ну я их еще проверю, еще планирую потестировать всякие MongoDB.

У меня получилась таблица с более чем 2.2 миллионов строк, попробуем поискать по ней слово "клавиатура", для того, чтобы гарантированно без всяких кешей получать время запроса, будем добавлять после SELECT параметр SQL_NO_CACHE. Выполняю несколько раз и получаю минимальный результат...

Итак, поехали, попробуем получить клавиатура... Как видим, 2.4 сек, иногда до 3.4 доходило, это очень ужасно.

Теперь попробуем по точному совпадению key=>val. Ситуация особо не меняется, странно, но даже дольше выполняется, несколько раз перезапускал и оно только вот так, 2.5 сек, такой результат еще более ужасный.

Теперь попробуем такую мощную штуку, как полнотекстовый поиск, для этого нужно добавить полнотекстовый индекс к полю word...

ALTER TABLE `morph` ADD FULLTEXT(`word`);

К слову, у меня этот индекс был уже изначально на момент тестирования, выполняем запрос

SELECT SQL_NO_CACHE *  FROM `morph` WHERE MATCH(word) AGAINST('клавиатура')

И о чудо, 0.0004 сек, вот такой результат более чем приличный

Но если мы будем искать всякие местоимения, частицы, союзы и другое в стиле - "за", "с", "а", "мы", "я"... И еще такие слова как ёж, уж, Ра.

В конфигурации my.cnf есть такой параметр, если нет, то по умолчанию стоит 4, все что короче - игнорнируется.

ft_min_word_len = 4

Тут видно, что предлог "за" есть в таблице..

Но так не сможет его найти, т.к. есть ограничение

Давайте попробуем снять это ограничение, пропишем в конфиг [mysqld]

ft_min_word_len = 1

Ничего не выходит, наверно нельзя по одной или двум буквам искать, значит нам это не совсем подходит... Но мы можем например выделить все слова до 3х символов в отдельную таблицу и там будет искать их быстро обычными методами...

В любом случае, этот метод будет достаточно хорош для поиска по текстам на сайте, например по описаниям товаров, если особенно на обычном хостинге, где нет Sphinx, ElasticSearch и другого такого.

Определим сколько у нас максимальное по длине слово

SELECT SQL_NO_CACHE *, char_length(word) as `l`  FROM `morph` ORDER BY `l` DESC

Получим 35, слова такие конечно редкие, но мы должны предусмотреть максимальную базу данных

Попробуем тип поля сделать не text, а varchar 50, а потом поискать стандартным способом через like, ничего не поменялось...

Попробуем сравнение изменить на utf8_bin

С Like ситуация не поменялась, с полным WHERE тоже, но теперь появилась возможность сделать простой индекс не полнотекстовый для поля word

ALTER TABLE `morph` ADD INDEX(`word`);

После добавления индекса к полю, у меня стало искать за доли секунды

При таком раскладе, скорость получения данных по словам будет 2500 слов в секунду, не плохо... Правда сравнение utf8_bin накладывает некоторые ограничения, например нет регистронезависимого поиска, нужно при выборке и хранении понижать регистр, хотя тут вроде итак всё в нижнем регистре.

Попробуем поменять сравнение в поле на utf8_unicode_ci, и снова перестроить индекс может там не сильно будет потеря, да, MariaDB вполне справляется, то что пишут на форумах про ускорение в сравнении bin наверно уже устарело.

Теперь попробую еще одну идею, добавить в таблицу поле length и записать в него длину, сделаем его INT(2), ну максимум у нас все равно слово может быть 50 букв, хотя это там даже не слово, а какие то длинные названия. И сделаем поле индексированным.

Сделаем такой запрос для его заполнения

UPDATE morph
SET morph.length = CHAR_length(morph.word)

А теперь попробуем поискать вот так

SELECT SQL_NO_CACHE * 
FROM(SELECT  *  FROM morph WHERE length=1) as t
WHERE word='б'

Нет, это не дало результата должного, уже нет такого критичного времени, которое может оптимизироваться, но идея заключалась в том, чтобы выбрать по индексированному полю с длиной строки, а потом из этого уже по слову искать.

Выводы: если нужна выборка по текстовому полю, например ЧПУ страницы сайта, то надо использовать поле varchar фиксированного размера и добавлять к нему индекс, как видите, с миллионами записей справляется идеально... Если же нужен поиск по текстам описаний (text) с вхождением слов, то лучше использовать полнотекстовый поиск, он достаточно быстрый.

По-умолчанию вот так, первый день недели воскресенье

А хочется вот так, чтобы был понедельник первым днем

Интересно как это поправить?

Для этого заходим в папку с нашим phpmyadmin (у меня это /usr/share/phpmyadmin), находим файл js/functions.js

Там ищем вот такой участок

 PMA_addDatepicker($(this), type, {
                showMillisec: showMillisec,
                showMicrosec: showMicrosec,
                timeFormat: timeFormat
            });

И приводим его к такому виду (добавим запятую после timeFormat и строчку firstDay:1)

 PMA_addDatepicker($(this), type, {
                showMillisec: showMillisec,
                showMicrosec: showMicrosec,
                timeFormat: timeFormat,
                firstDay:1
            });

Я лишь рассмотрю некоторые из них...

1. Просто отправлять на сервер запросы раз в секунду или 20 раз в секунду, смотря как критичны задержки, например долбить аяксом на свой сервер и если он ответил что-то, то обновлять информацию в приложении (например фронтенд сайта на стороне браузера).
2. Открыть сокет и слушать данные, но это не везде реализуемо легко, зависит от типа приложения...
3. Веб хуки или CallbackAPI, это больше при обмене сервер-сервер, когда ваш сервер тоже может принимать запросы от основного, и если там что-то происходит - он вам отправляет данные и вы их обрабатываете, тут лучше применять механизм очередей, складывать быстро и отвечать ок, а потом на фоне обрабатывать.
4. Long Pooling (Long Pool api) - вы отправляете запрос и ждете, как только данные появляются, вам приходит ответ, об этом способе хотел рассказать сегодня в этой статье.

Long Pooling

Итак, что же это такое Long Pooling? Как он работает? Попробуем в этом разобраться. Представьте такой момент когда вы открываете сайт, но у вас висит белый экран пустой, крутится кружочек, думает, думает, вот проходит уже 15 секунд, а он всё думает, а потом загрузился с ответом что ничего нового, ждали например 30 секунд.

Если данные появились раньше чем через 30 секунд, то сервер отдаст ответ как только так сразу, например через 0.2 секунды.

Как только мы получили ответ от сервера - снова отправляем запрос и ждем.

Что мы от этого имеем? Мы получаем новые данные по мере их поступления сразу, если новых событий достаточно мало, а у нас задержки критичные не больше секунды, то при первом способе мы бы отправляли 60 запросов в минуту, а так достаточно например только 2х.

В отличии от веб-хуков (способ 3) - нам не требуется какой-то сервер разворачивать и слушать с него запросы, мы можем находиться на сером ip, внутри локальной сети, не открывать порты в локалку с роутера.

Но если вы делаете сервер с поддержкой long pooling, вам нужно конкретно продумать и настройку самого сервера и ваших скриптов, наверно лучше организовать очереди и молниеносно выбрасывать список сообщений, а не долбить базу, не выполнять сложные обработки.

Раньше я делал на том, что всегда знаю, т.е. использовал RAM-таблицы mysql для обмена между несколькими скриптами, но там слишком большая нагрузка начиналась, когда запрос несколько раз в секунду в базу кидал для получения новых сообщений, да и последнее время решил не использовать то что давно знаю, а постоянно что-то новое осваивать, что и вам советую.

Один скрипт работает и просит периодами второй что-то там обработать и тот ему отвечает, этот получает информацию... Очень удобно...

Ну стратегия использования у каждого будет своя, можно даже сверхбыстро входящие данные примнимать с сайта и потихоньку их разгребать отложенно из очереди. Некоторые люди используют RabbitMQ, чтобы статистику собирать с тысяч серверов своих, а другим скриптом в фоне тихонечко это раскладывать по полочкам, в итоге сервера при отправке статистики не ждут пока скрипт ее обработает, а просто кидают и не ждут пока эту информацию обработают и примут...

Установка сервера RabbitMQ

Первым делом ставим сам сервер, он у нас может находиться как на локальной машине, так и на общей машине в сети. Удобно если использовать единую точку обмена информацией между кучей серверов, где каждый может не ждать ответа, а просто кидать сообщения куда надо и заниматься дальше своими делами, периодами проверяя не ответил ли ему кто-то.

Установка RabbitMQ на сервер под Debian 9 происходит вот так

apt-get install rabbitmq-server

Веб-интерфейс RabbitMQ

Если вы желаете потренироваться, помониторить и посмотреть наглядно что у вас происходит на сервере, в RabbitMQ есть плагин, который предоставляет веб-интерфейс, очень крутая фича.

Веб-интерфейс в RabbitMQ включается следующим образом:

rabbitmq-plugins enable rabbitmq_management

После этого, можете зайти на свой сервер по порту 15672

Создание пользователя в RabbitMQ

Но, чтобы работать дальше с RabbitMQ, нам нужно создать пользователя, пусть он будет называться userok а пароль у него будет pass123

Для добавления пользователя администратора, нам нужно ввести в консоли следующее

rabbitmqctl add_user userok pass123
rabbitmqctl set_user_tags userok administrator
rabbitmqctl set_permissions -p / userok ".*" ".*" ".*"

После этого можете заходить с этим логином и паролем в веб-интерфейс на порт 15672 тут можно и поиграться с очередями и посмотреть что получается в результате работы ваших приложений.

Работа с сообщениями

На этой странице вы найдете исчерпывающий список библиотек для реализации работы с RabbitMQ.

Нам же сегодня нужно придумать как применить это в проекте на php.

Cудя по описанию, pecl amqp library собрана на C-клиенте RabbitMQ

Исходники проекта и его описание с примерами использования вот тут на гитхабе.

Как я подумал, то что в репозитории Debian названо php-amqp - это оно и есть, попробуем его установить

apt-get install php-amqp

Дальше из официальных примеров можем составить примеры кода передающей и принимающей стороны, немного упрощаю...

Сохраним этот файл с именем send.php

<?
//Establish connection to AMQP
$connection = new AMQPConnection();
$connection->setHost('127.0.0.1');
$connection->setLogin('userok');
$connection->setPassword('pass123');
$connection->connect();
//Create and declare channel
$channel = new AMQPChannel($connection);
//AMQPC Exchange is the publishing mechanism
$exchange = new AMQPExchange($channel);


//название цепочки
$routing_key = 'hello';


//это важно при отсутствии цепочки с именем hello
$queue = new AMQPQueue($channel);
$queue->setName($routing_key);
$queue->setFlags(AMQP_NOPARAM);
$queue->declareQueue();


//тут уже просто размещение сообщения
$message = 'test '.microtime();
$exchange->publish($message, $routing_key);

//а тут отключение
$connection->disconnect();

Тут нужно понимать, если мы по Long Pool будем данные собирать, то в цикле будет бесконечное получение обновлений c сервера  и раскидывание по цепочкам, клиент обновлений не будет тратить время на какой-то там анализ, он молниеносно раскидывает в цепочки и всё. Ну и логичным будет блок декларирования цепочки на всякий случай один раз в начале запускать, а дисконект где-то после цикла или его вообще тут не будет, т.к. скрипт сколько живет столько и будет общаться с RabbitMQ

Long Pool - это что за зверь? Об этом будет отдельная статья...

Дальше принимающий скрипт, примерно такой, создадим его с именем reseive.php

$connection = new AMQPConnection();
$connection->setHost('127.0.0.1');
$connection->setLogin('userok');
$connection->setPassword('pass123');
$connection->connect();
//Create and declare channel
$channel = new AMQPChannel($connection);
//AMQPC Exchange is the publishing mechanism
$exchange = new AMQPExchange($channel);
$callback_func = function(AMQPEnvelope $message, AMQPQueue $q) use (&$max_consume) {
	echo PHP_EOL, "------------", PHP_EOL;
	echo " [x] Received ", $message->getBody(), PHP_EOL;
	echo PHP_EOL, "------------", PHP_EOL;
	$q->nack($message->getDeliveryTag());
	sleep(1);
	
};
try{
	$routing_key = 'hello';
	
	$queue = new AMQPQueue($channel);
	$queue->setName($routing_key);
	$queue->setFlags(AMQP_NOPARAM);
	$queue->declareQueue();
	echo ' [*] Waiting for messages. To exit press CTRL+C ', PHP_EOL;
	$queue->consume($callback_func);
}catch(AMQPQueueException $ex){
	print_r($ex);
}catch(Exception $ex){
	print_r($ex);
}
echo 'Close connection...', PHP_EOL;
$queue->cancel();
$connection->disconnect();

Открываем два терминала, например по SSH на нашу виртуалку, на одном стартуем php reseive.php, он будет жить пока не нажмешь ctrl+c, теперь на втором будем запускать php send.php и смотреть на вывод первого, если всё работает, то сиесекундно при выполнении первого скрипта во втором будет сообщение, вот так работает доставка. Работает она быстро.

Это всего лишь вводный курс, если вы захотите разобраться с этой технологией, то вам придется много экспериментировать, лучше если это будет на реальном проекте, желательно не на том, который по-работе, лучше по фану что-то делать.

Вы можете почитать полную документацию на php.net, только она на данный момент кроме датского никакой язык не поддерживает, может быть руки дойдут, переведу, анализируя код, вот ссылка http://docs.php.net/manual/da/book.amqp.php

Второй пример - у меня рабочий комп на Windows 10, но разработку я веду на Linux, который в виртуальной машине под Hyper-V, Debian из коробки подгружает модули Hyper-V, которые делают 10 гигабитную сеть между машинами и между хостом и гостевыми машинами, если расшарить сетевую папку из линукса в Windows, то можно работать через сетевую папку и отклик будет настолько быстрым, что скорость не будет отличаться от локальной папки, только вот приходится немного подкрутить параметры, чтобы достигнуть желаемого без всяких подтормаживаний...

1. Ставим сервер Samba

apt-get install samba

2. Создаем папку, которую будем шарить, например project создавать папку в корне - плохой тон, но мне пофиг, у меня временный сервак для всяких опытов и все файлы на одном разделе диска...

mkdir /project

3. Открываем наш конфиг

nano /etc/samba/smb.conf

И начинаем разбираться с параметрами, можно удалить всё содержимое и заменить вот таким, можно почитать описания, что то подправить....

[global]
   interfaces = eth0
   bind interfaces only = yes
   deadtime = 15
   disable netbios = yes
   dns proxy = no
   domain master = yes
   encrypt passwords = true
   guest ok = no
   hosts allow = 192.168.200.0/255.255.255.0 127.0.0.1
   hosts deny = all
   invalid users = nobody root
   load printers = no
   max connections = 10
   netbios name = techresearch
   preferred master = yes
   preserve case = yes
   printable = no
   server string = Samba Share
   ; это невероятное шаманство, сильно ускоряет все операции
   socket options = TCP_NODELAY IPTOS_LOWDELAY SO_RCVBUF=131072 SO_SNDBUF=131072
   strict sync = no
   sync always = no
   syslog = 0
   workgroup = WORKGROUP
   log file = /dev/null
   log level = 0


[project]
   browseable = yes
   path = /project
   guest ok = no
   create mask = 0750
   writable = yes

Обратите внимание на eth0 - название интерфейса, это достаточно важный параметр, когда ваш сервер смотрит и в интернет и в локальную сеть, нужно разрешить только локальную сеть.

А второй параметр 192.168.200.0 - даже если у меня каким-то образом прокинется порт в локалку и запрос прилетит с маршрутизатора, то всё равно IP адрес не будет разрешенным.

4. Теперь надо добавить пользователя для подключения, прописать его пароль, обратите на параметр -a, он добавляет пользователя (локального) в samba и позволяет задать для него отличающийся от системного пароль

smbpasswd -a user

При изменении пароля делается всё тоже самое, только без параметра, если же захотите удалить пользователя, то флаг -x, для отключения -d, для обратного включения -e, узнать все параметры можно через -h

Потом перезагрузим

/etc/init.d/samba restart

Дальше можно проверять, win+r, вводим ip машины

Вводим логин и пароль, если не хотите вводить пароль и логин, но сохранить пароль на папку - можно его в самбе сделать совпадающим с локальным на Windows, в ограниченных редакциях Windows не дает сохранить пароль, поэтому там только вот так решается

Как видим, всё работает

Не забудьте еще дать соответственные права на чтение/запись в папку, которую расшариваем...

Хочу сказать, что алгоритм на других линуксах аналогичный, только там вместо apt-get будет yum или еще какой менеджер пакетов.

Статья несет больше образовательный характер, чтобы получить готовый алгоритм и не вдаваться в подробности - можете пролистать до конца. Если загуглить склонение существительных после поличества, то можно найти много готовых примеров кода на разных языках программирования - JavaScript, C, PHP, но если вникнуть в суть самого алгоритма, то вы его сможете написать на любом языке, хоть на паскале, поэтому, решил разобраться в этой теме...

Для начала попробуем просклонять несколько слов - Товар, Ящик, Зубочистка, Конфета

Попробуем упростить эту таблицу

Т.е. мы имеем всего три формы слова, если в пределах от 0 до 9

1. Для одного - именительный падеж (кто/что)
2. От 2х до 4х - родительный падеж (кого/чего)
3. От 5 до 9 и 0 - множественное число (много конфет, много ящиков, много товаров...)

но количество 0 нужно обратывать правильно, писать пусто или нет в корзине ничего или конфет сегодня не будет...

Продолжим наше исследование на диапазоне от 11 до 30, теперь уже по одному слову...

С 11 до 19 ситуация не меняется, но вот если сравнить таблицу первую с 0 до 10 с таблицей от 20 до 30, то ситуация в точности повторяется, очень интересно!

А что за числа с 11 до 19, это числа с окончанием "надцать" (одинадцать, пятнадцать, девятнадцать).

Теперь можете перепроверить, но я уже проверил сам, с 0 до 100 ситуация повторяет в точности ситуацию с 0 до 10,  исключением из этого будет только  то, что заканчивается на "надцать". Я бы даже сказал что от 0 до 9, во всех числах берется последняя цифра и по ней решается какая форма слова будет.

А что дальше? Дальше подставляйте хоть 1000, хоть миллион, ситуация повторится, решающими будут две последние цифры, если число заканчивается на 11-19 и во всех остальных случаях одна последняя цифра.

Какой алгоритм получится в результате?

1. Отсекаем две последние цифры от числа, проверяем не находится ли это в диапазоне от 11 до 19, если так, то отдаем множественное число (п3).
2. Отсекаем еще раз от этого одну последнюю цифру - если 1, то отдаем именительный падеж (п1)
3. Если это цифра от 2 до 4, то отдаем родительный падеж.
4. Во всех остальных случаях множественное число.

В некоторых алгоритмах просят вводить три формы слова, где-то 1,3,5, а где-то 1,2,4 или 1,2,7, но это сути не меняет, мы будем входными параметрами в функции использовать количество 1 (яблоко),2 (яблока),5 (яблок).

Пример на моем любимом PHP

$n - количество

$f1 = яблоко

$f2 = яблока

$f5 = яблок

public static function num_morph($n, $f1, $f2, $f5) 
	{
	    $n = (abs($n) % 100); //отсекаем две последние цифры от цисла
	    
		//если это от 11 до 19, вернем множ. число
	    if ($n>=11 && $n<=19) return $f5; 

	    $n1= $n % 10; //отсекаем от этого последнюю цифру

        //единственное число                     
	    if ($n1==1) return $f1;
		
        //родительный падеж
	    if ($n1>1 && $n1<5) return $f2;
        
        //во всех остальных случаях множественное число
	    return $f5;
	}

Если остались вопросы - задавайте в комментариях...

1. Внешняя часть
2. Админка
3. Системная часть

Внешняя часть

Внешняя его часть легко локализуется при помощи правки шаблона - сперва скачиваем в админке шаблон, потом переименовываем полученный zip, обратно загружаем, получаем новую папку в content/templates, правим шаблоны, перезагружаем блог, радуемся. Но некоторые части мне не удалось найти в шаблоне, видимо они подгружаются из системы.

Админка

Мне лично не мешает то что все надписи на английском, всё интуитивно понятно, но вот не все ведут блоги единолично, кто-то является компанией, где куча редакторов, некоторые из которых не могут быстро адаптироваться в этом интерфейсе...

Сколько не грепал готовый сайт - не смог найти нигде в локализациях строчки из админки, они жестко забиты в js приложение админки, можно просто открыть js приложение

nano /core/built/assets/ghost.min-*.js

Искать нужные строчки из админки и заменять на свои.

Делать это руками не по-админски, поэтому, напишем такой скриптик для начала

#!/bin/bash
F=$1

re ()
{
sed -i -re "s|${1}|${2}|g" "${F}"
}

re "Title & description" "Заголовок и описание"

Сохраним его с именем rus_admin.sh сделаем на него флаг исполнения

chmod +x rus_admin.sh

Ну и попробуем выполнить (внимание, путь до вашего ghost уникальный, может не совпадать с моим, завивит от сборки, поэтому смотрите что там).

Еще перед выполнением сделайте бекап файлика, вдруг чего поломается...

bash ./rus_admin.sh ghost.min-a8ab0ab912a793319197ba23bc890afd.js

Потом я перезапустил ghost и увидел вот такое

Т.е. работает...

Идем дальше, добавим замену строк на всю админку, только будьте аккуратны, если будем делать замену по словам delete или другим односложным строкам из одного слова, есть великая вероятность наткнуться на замену самого кода или переименовать саму функцию,  я руководствуюсь тем, что в названиях функций нет пробелов и заменяемые строки достаточно длинные (2-3 слова через пробел)

У меня получился вот такой скрипт

#!/bin/bash
F=$1

re ()
{
str='s|"'${1}'"|"'${2}'"|g'
echo $str
sed -i -re "${str}" "${F}"
}
resub ()
{
sed -i -re "s|${1}|${2}|g" "${F}"
}
re "View site" "Просмотр сайта"
re "Manage" "Управление"
re "Posts" "Публикации"
re "Pages" "Страницы"
re "Your posts" "Публикации"
re "Your pages" "Страницы"
re "Staff" "Пользователи"
re "All posts" "Все публикации"
re "All pages" "Все страницы"
re "Draft posts" "Черновики"
re "Published posts" "Опубликованные"
re "Published pages" "Опубликованные"
re "Scheduled posts" "Запланированные"
re "Scheduled pages" "Запланированные"
re "Featured posts" "Особые публикации"
re "Featured pages" "Особые страницы"
re "Search authors" "Поиск по авторам"
re "Search tags" "Поиск по тегам"
resub 'Sort by:' 'Сортировка:'
re "Newest" "Новее"
re "Oldest" "Старее"
re "Recently updated" "Недавние изменения"
re "All authors" "Все авторы"
re "All tags" "Все теги"
re "You haven[\]'t created any pages yet!" "У вас нет страниц."
re "Create a new page" "Создать страницу"
re "New page" "Новая страница"
re "New post" "Новая публикация"
re "Staff users" "Пользователи"
re "Invite people" "Пригласить"
re "Active users" "Активные"
re "Suspended users" "Отключенные"
#re "Owner" "Владелец"
#re "Author" "Автор"
re "Invite a New User" "Пригласить"
re "Save" "Сохранить"
re "Saved" "Сохранено"



re "Settings" "Настройки"
re "General" "Основные"
re "Design" "Дизайн"
re "Tags" "Теги"
re "Code injection" "Внедрение кода"
re "Save settings" "Сохранить настройки"
re "Title & description" "Заголовок и описание"
re "The details used to identify your publication around the web" "Подробности, идентифицирующие ваши публикации в интернете"
re "The name of your site" "Название сайта"
re "Used in your theme, meta data and search results" "Описание, используется в вашей теме, мета-данных и результатах поиска"
re "Site timezone" "Часовой пояс сайта"
re "Set the time and date of your publication, used for all published posts" "Задает время и дату ваших публикаций"
re "Publication Language" "Язык публикаций"
re "Upload Image" "Загрузить картинку"
re "Publication icon" "Иконка публикаций"
re "Publication logo" "Логотип публикаций"
re "Publication cover" "Фон публикаций"
re "Expand" "Раскрыть"
re "Close" "Закрыть"
re "The local time here is currently " "Текущее локальное время "
re "Integrations" "Интеграции"
resub "Ghost allows you to inject code into the top and bottom of your theme files without editing them. This allows for quick modifications to insert useful things like tracking codes and meta tags." "Ghost поддерживает внедрение кода в раздел head и в нижнюю часть страницы. Это позволяет вставлять всякие счетчики, аналитики, скрипты и собственные мета-теги"

Но в конце концов я понял такую вещь - не всё получится вот так просто локализовать, надо брать исходник админки с шаблонами из github и собирать самостоятельно... Малость удалось насобирать, но не всё... Ибо компилированный файл содержит структуру тегов в виде массивов с такой сложной вложенностью, а в исходниках файлов это всё более понятно...

Если кому-то нужна локализованная админка - напишите комментарий, я попробую пересобрать из исходников всё это дело...

Эта локализация действует и на приложение Ghost для компа

Сборка Ghost из исходников для локализации админки и системной части.

sudo apt-get update && sudo apt-get install yarn

yarn global add knex-migrator grunt-cli ember-cli bower

git clone --recurse-submodules https://github.com/TryGhost/Ghost.git
cd Ghost

Заходим в /core/client/app/templates, правим шаблончики

Потом компилим систему

yarn setup

Потом собираем prod версию

grunt prod

Теперь можно хватать js админки и закидывать в свой сайт...

Более подробно об этом написано на Github, если есть какие-либо вопросы - обращайтесь, разберемся вместе.

curl -sL https://deb.nodesource.com/setup_10.x | bash -

apt-get install nodejs

Теперь у нас есть npm и node, можно ставить всякие gulp, cleancss и другие полезности...

Вот, инструкция на этот случай!

1. Заходим в папку с phpmyadmin, находим там файлик config.sample.inc.php копируем его в config.inc.php, открываем, находим строчку типа $cfg['blowfish_secret'] и вставляем ниже нее

$cfg['blowfish_secret'] = 'fhkghgkgkjhgkgklas'; 
$cfg['LoginCookieValidity'] = 7*24*60*60;

это определит время сессии на семь дней, вполне достаточно, чтобы каждый день не переавторизовываться...

Но тут не всё, сам php тоже имеет такой параметр в php.ini, как  session.gc_maxlifetime поставим его на 604800 (7 дней)

; After this number of seconds, stored data will be seen as 'garbage' and
; cleaned up by the garbage collection process.
; http://php.net/session.gc-maxlifetime
session.gc_maxlifetime = 604800

Перезапустим apache, если у нас модуль или fpm, там уже зависит от вашей конфигурации.

Вот и всё, спасибо за внимание. Если вам интересно как установить phpmyadmin не из пакета Debian, а самостоятельно, то кидайте свои вопросы в комментарии, напишу для вас инструкцию.

Вот такую ошибку я встретил сегодня в mysql, когда решил отключить буферизацию, в MYSQL и PHP есть такой механизм работы с базой данных

MYSQLI_STORE_RESULT и MYSQLI_STORE_RESULT

В первом варианте получает весь результат в некий буфер и дает с ним работать, во втором варианте получает как-то построчно без буфера, экономит память, но имеет ряд недостатков.

Во-первых, нельзя получить SQl_CALC_FOUND_ROWS

Во-вторых, как сегодня выяснилось - пока все строки из результата не выгрузил, нельзя выполнять еще один запрос. Но как вариант, можно создать второй экземпляр mysqli и пока из первого проходим записи - вторым писать.

Для решения этой ситуации, вводящей в заблуждение, я отключаю кеширование в mysql.

Чтобы проверить состояние текущих настроек - можно или в phpmyadmin зайти в раздел переменные и там через ctrl+f поискать нужное среди кучи вариантов, либо же ввести запрос

SHOW VARIABLES LIKE "query_cache%"

Поставим query_cache_size на 0 и query_cache_limit тоже

SET GLOBAL query_cache_size=0;
SET GLOBAL query_cache_limit=0;

Но после перезапуска сервера это вернется обратно, тут или вот так выключать каждый раз, ну а можно прописать эти параметры в my.cnf

query_cache_limit = 0
query_cache_size = 0

Но в последних версиях, уже вроде бы в 5.7 кеш по умолчанию выключен, поэтому там еще и query_cache_type=OFF на рабочем сервере при достаточном объеме оперативки лучше включить данным методом... А вот на MariaDB кеширование включено, вероятно что в некоторых дистрибутивах mysql сервер будет со своими конфигами, поэтому выключение кеша актуально.

Еще один момент, если вам просто нужно обкатать некоторые запросы и оптимизировать их по времени, то можно просто добавить после SELECT SQL_NO_CACHE, но когда у вас движок и вы не вникая в запросы хотите посмотреть на каких страницах какое время генерации и только потом залезать в запросы, то выключение кеша через настройки БД будет лучшим решением, конечно, на продакшн такое не делайте...

Итак, у нас есть sublime text, так уж повелось, мне проще вести разработку прямо в текстовом редакторе без всяких продвинутых средств разработки, иногда это конечно же вообще прямо по ssh делается на хостинге, когда в руках есть мобилка с ssh клиентом и вдруг обнаружилась недоработка в коде... Да и по цене sublime достаточно недорогой, я его приобрел еще до подорожания курса доллара, но сейчас речь не о том.

У нас SublimeText3 и Windows10,  первым делом ставим пакет, сперва устанавливаем Package Control (он нам еще пригодится), оригинальная инструкция вот тут https://packagecontrol.io/installation

1. На клавиатуре CTRL+`
2. Вбиваем вот этот кусок и жмем энтер

import urllib.request,os,hashlib; h = '6f4c264a24d933ce70df5dedcf1dcaee' + 'ebe013ee18cced0ef93d5f746d80ef60'; pf = 'Package Control.sublime-package'; ipp = sublime.installed_packages_path(); urllib.request.install_opener( urllib.request.build_opener( urllib.request.ProxyHandler()) ); by = urllib.request.urlopen( 'http://packagecontrol.io/' + pf.replace(' ', '%20')).read(); dh = hashlib.sha256(by).hexdigest(); print('Error validating download (got %s instead of %s), please try manual install' % (dh, h)) if dh != h else open(os.path.join( ipp, pf), 'wb' ).write(by) 

3. Жмем комбинацию на клавиатуре ctrl+shift+P  и там вбиваем Install, выбираем Install package

4. В открывшемся окне ищем Minify

5. После установки перед нами откроется документашка, в ней пример конфига и вообще описание установки недостающих инструментов из npm.

Документацию советую почитать, там написано что есть два режима - минификация и, так сказать, форматирование (Beautify) к красифому виду, чуть позже рассмотрим форматер и для PHP, удобная штука, которая расставит все отступы и весь код в читаемый вид превратит... Но это уже в следующей статье.

6. Теперь устанавливаем node.js, в которой куча инструментов для форматирования css, js, html... Зайдем на сайт https://nodejs.org/en/ и скачаем последнюю версию nodejs

7. Теперь откроем терминал (можно PowerShell) и введем следующее

npm install -g clean-css-cli uglifycss js-beautify html-minifier uglify-js minjson svgo

8. Теперь остается настроить конфиг нашего плагина

заходим в меню prefences -> package settings -> minify -> Settings User

там вбиваем вот такой текст, полный дефольтный конфиг по тому же пути можно найти, только Default, оттуда только те элементы, которые переопределеяются копируем

{
              "open_file": false,
              "auto_minify_on_save": true,
              "allowed_file_types": [
                  "css",
                  "js"
              ]
}
    

Можно еще добавить, например, JSON, но мне и так достаточно, я вообще оставил только css и js.

Но при попытке минифицировать файл вылетает ошибка! И css и json вылетает ошибка!!!

File AppData\Roaming\Sublime Text 3\Packages\Minify\Minify.py", line 65, in handle_resultsublime.error_message(' '.join(cmd) + '\r\n\r\n' + output.decode('utf-8'))UnicodeDecodeError: 'utf-8' codec can't decode byte 0xad in position 11: invalid start byte

В общем, надо перезапустить саму программу SublimeText, я целый час дебажил эту фигню, пытался понять в чем дело, даже некоторые основы на питоне познал, а оказалось что просто переменные окружения не подгрузились для выполнения утилит...

P.S. кстати, форматтер этот, где beautify - может превращать минифицированный файл обратно в удобочитаемый, удобно, когда надо подправить чужой проектик, который уже собран и минифицирован, а исходных файлов нет.

Как запустить?

Чтобы завести свой блог на Ghost - первым делом понадобится хостинг, можно конечно и на их сайте прикрутить свой домен и платить абонентку, но иногда купить дешевую VPS будет проще, а если на DigitalOcean, то там вообще есть готовые виртуалки.

Но сегодня речь пойдет о том, как настроить на своем сервере, ну или не совсем на своем или не совсем на сервере, у кого-то есть корпоративный сервер, работающий 24/7, а кому то можно просто старый ноутбук или неттоп повесить рядом с роутером в коридоре и всё настроить. Еще в будущем рассмотрим такой вариант, как выгрузка всего блога в формате html для размещения на github (бесплатно) или на слабом компьютере типа Raspberry Pi или умный роутер с флешкой может сгодиться, в случае со статическим блогом не надо nodejs,php,mysql, ничего не надо, только любой веб-сервер и ftp/sftp чтобы грузить блог со своего компа. Ну сегодня не об этом, опять я отвлекся.

В общем, нам нужен docker и nginx, сам nginx у меня стоит без контейнера, он проксирует все контейнеры, разные сайты на разных технологиях устроены, иногда нужны разные версии ПО для разных проектов, уже имел опыт поломки зависимостей пакетов, когда вся система рухнула, поэтому сейчас контейнеризирую. О том, как установить docker можно почитать на официальном сайте.

Установка самого блога в контейнер

В общем, создаем папку для нашего блога, там будет храниться весь контент, при переезде можете разворачивать контейнер и контент перенести с базой.

mkdir /var/www/mysite

После этого создадим конфиг

nano /var/www/mysite/config.json

И впишем конфиг, тут всё уже предрешено, вам только url поменять надо на свой, все остальные пути это внутренние пути в контейнере

{
  "url": "http://tipa-mysite.ru",
  "server": {
    "port": 2368,
    "host": "0.0.0.0"
  },
  "database": {
    "client": "sqlite3",
    "connection": {
      "filename": "/var/lib/ghost/content/data/ghost.db"
    }
  },
  "mail": {
    "transport": "Direct"
  },
  "logging": {
    "transports": [
      "file",
      "stdout"
    ]
  },
  "process": "systemd",
  "paths": {
    "contentPath": "/var/lib/ghost/content"
  }
}

Дальше просто создадим контейнер, который будет доступен на порту 3001

docker run -d \
--restart=always \
--name tipa-mysite.ru \
-p 3001:2368 \
-v /var/www/mysite/content:/var/lib/ghost/content \
-v /var/www/mysite/config.json:/var/lib/ghost/config.production.json \
ghost

Если будет проксироваться с nginx из этого же компа, то ограничим на локалхост, чтобы извне только было по 80/443 на nginx доступно, а сам контейнер недоступен будет

docker run -d \
--restart=always \
--name tipa-mysite.ru \
-p 127.0.0.1:3001:2368 \
-v /var/www/tech-research.ru/content:/var/lib/ghost/content \
-v /var/www/mysite/config.json:/var/lib/ghost/config.production.json \
ghost

Теперь открываем URL tipa-mysite.ru/ghost там регистрируем нашего первого пользователя, пишем site title это не для пользователя, а для сайта, оно будет вот внизу писаться

При регистрации еще можно создать других редакторов этого блога.

Правильная настройка https (с костылями)

Добавить https достаточно просто, если у вас установлен nginx и certbot от letsencrypt, но вот сам движок нужно донастроить, иначе у вас все sitemap будут по-старому на http, а это плохо для СЕО.

Достаточно в конфиге config.json изменить url на https, но дальше происходит нечто невероятное - блог начинает сам по себе редиректить на https с https, ведь наш nginx по 3001 порту обращается и без шифрования, а контейнер думает что надо бы перенаправить на https и сайт вылетает с бесконечным цикличным редиректом, чтобы это исправить - надо в nginx прописать заголовок X-Forwarded-Proto равным https, чтобы движок думал что итак всё норм и мы на протоколе https.

 вот так:

 location /
        {
        access_log off;
        proxy_pass http://127.0.0.1:3001;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header Host $host;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header X-Forwarded-Proto https; # эта строка фиксит редирект
        proxy_set_header Nginx-Https "on";
        proxy_connect_timeout 2s;
        }

Решение костыльное, но пойдет, позже разберемся и в этой теме

Подсветка кода

Для того, чтобы списать код, нужно три косых кавычки вбить (```) и пробел или enter

Но чтобы подсвечивался код, вам нужно или изначально выбрать тему типа как у меня, где всё это есть, либо использовать casper, тогда нужно зайти в админку, там Code injection

В шапку кидаем

<link rel="stylesheet"
      href="//cdnjs.cloudflare.com/ajax/libs/highlight.js/9.15.6/styles/monokai-sublime.min.css">
<script src="//cdnjs.cloudflare.com/ajax/libs/highlight.js/9.15.6/highlight.min.js"></script>

А в футер

<script>hljs.initHighlightingOnLoad();</script>

Вроде получилось...

Вместо monokai-sublime.min.css можно вписать другой стиль, подробнее можете посмотреть тут демку https://highlightjs.org/, главное писать ссылки на файлы min.css, меняя monokai-sublime на понравившийся стиль

Добавление комментариев в блог Ghost

Сегодня поговорим о том, как вставить комментарии на блог Ghost, будем использовать сервис комментариев Disqus. Вообще, статья может пригодиться для таких сайтов, как wix, blogger, wordpress, joomla и других, пусть эта статья будет о том, как добавить комментарии Discus на популярные движки сайтов, но на примере блога на Ghost.

1. Заходим на сайт https://disqus.com/
2. Если не авторизованы, то авторизуемся, скорей всего у вас уже есть учетная запись, через которую вы комментировали другие сайты.

заходим через твиттер, фейсбук или гугл

3. Дальше в самом низу жмем Install disqus

4. Тут выбираем I want to install Disqus on my site (я хочу установить Discus на мой сайт).

5. Заполняем форму, вписываем название сайта, выбираем категорию, язык, жмем кнопочку Create site

6. На следующем этапе у нас выбор тарифа, ну выбираем пока Basic, т.к. он бесплатный, а мы еще даже 9 долларов в месяц не зарабатываем на своем новом блоге. Тут еще есть Free, но в нем написано что для сайтов где нет рекламы и вообще полностью некоммерческие. Позже еще подумаем, может быть хватит средств на оплату Plus...

7. На следующем этапе выбираем движок, у нас это Ghost

8. Теперь у нас есть инструкция и код для вставки, тут написано что в папке шаблона надо найти файл post.hbs (yourghostdir/content/themes/casper/) и в нем вписать перед закрывающимся {{/post}} код (где-то внутри), я вставил код перед </article>

Нужно перезагрузить блог или же просто выбрать другую тему, а потом снова основную.

Получаем то, что теперь видно внизу данной статьи, прошу прощения за рекламу, я постарался засунуть ее в конце статей, чтобы вас это отвлекало только после полного прочтения и перед комментированием.

Облако тегов в Ghost блоге

Итак, открываем файл шаблона default.hbs, в нем перед открывающимся тегом <footer> вставим для начала такой код

{{#get "tags" limit="all"}}
  {{#foreach tags}}
    <a href="{{url}}">{{name}}</a>
  {{/foreach}}
{{/get}}

В результате получим вот такой выхлоп перед футером

Как видим, вывело абсолютно все теги, которые есть на сайте, теперь попробуем стилизовать это всё.

1. Обернем это всё в div class="tag_list"
2. Добавим заголовок, чтобы было понятно что это такое, но т.к. это у нас не столь заголовок статьи/содержимого, сколько просто поясняющий элемент, мы не будм его оборачивать тегами <h1> - <h6>, а закинем в тег <span class="header_bl"> и стилизуем
3. Сами теги закинем в список <ul>/<li> и тоже стилизуем, поехали...

Сам код у нас будет выглядеть вот так

<div class="tag_list">
   <div class="inner">
       <span class="header_bl">Список тегов</span>
		<ul>

{{#get "tags" limit="all"}}

  {{#foreach tags}}
    <li><a href="{{url}}">{{name}}</a></li>
  {{/foreach}}
{{/get}}

		</ul>

	</div>
</div>

Выхлоп получился вот таким (кстати, чтобы увидеть изменения - надо перезапустить Ghost или же просто через админку выбрать другой шаблон и снова свой).

Теперь будем стилизовать этот блок, по идее, исходник нашего screen.css находится в папке темы в папке assets/css но действующий файл (минимизированный) находится в assets/built/ самое простое решение будет просто подправить уже в папке built, как пересобрать тему, мы рассмотрим (вероятно) позднее, сейчас просто добавим свой стиль css в Ghost для собственных доработок шаблонов...

Допишем в default.hbs в раздел head, сразу после screen.css свой custom.css

    {{!-- Styles'n'Scripts --}}
    <link rel="stylesheet" type="text/css" href="{{asset "built/screen.css"}}" />
    <link rel="stylesheet" type="text/css" href="{{asset "css/custom.css"}}" />

Дальше создадим /assets/css/custom.css и впишем в него следущие строчки для стилизации

.tag_list {
border-top: 1px solid #d9d9d9;
padding: 10px;
background:#fff;
}

.header_bl {
font-size:15px;
font-weight:bold;
text-transform:uppercase; 
}


.tag_list ul {
padding:5px 0; 
}

.tag_list ul li {
display:inline-block;
margin: 4px;
padding:0;
}

.tag_list ul li a {
display: inline-block;
background: #fbfbfb;
box-shadow: 0 0 3px #d0d0d0;
border: 1px solid #d0d0d0;
padding: 3px 5px;
font-size: 13px;
border-radius:4px;
color:#777;
}

.tag_list ul li a:hover
{
text-decoration:none;
box-shadow: none;
color:#666;
}

В результате вот такое получается

Стили и верстка не претендуют на звание эталонной, я больше по бэкэнду специализируюсь, статья носит ознакомительный характер, вы можете стилизовать свой блог индивидуально.

Дополнительные теги в статье в блоге Ghost, тема Casper

В некоторых сторонних темах дополнительные теги выводятся сразу, но в Casper, только один главный тег и больше ничего, это тоже можно поправить...

В документации на Ghost есть описание этих моментов.

В общем так, заходим в папку нашего шаблона, открываем файл post.hbs

и перед строчкой

<h1 class="post-full-title">{{title}}</h1>

прописываем

{{tags from="2" separator=" | " prefix="Дополнительные теги: "}}

from="2" - означает что нужно вывести тег, начиная со второго,

separator=" | " - означает что между тегами нужно поставить такой символ и плюс от него пробелы слева и справа,

а prefix - дает указание в начале всего этого перечисления указать такой текст.

В итоге, у нас получится вот такой код

...

<header class="post-full-header">
                <section class="post-full-meta">
                    <time class="post-full-meta-date" datetime="{{date format="YYYY-MM-DD"}}">{{date format="D MMMM Y$

                    {{#primary_tag}}
                        <span class="date-divider">/</span> <a href="{{url}}">{{name}}</a>
                    {{/primary_tag}}

                </section>

                {{tags from="2" separator=" | " prefix="Дополнительные теги: "}}





                <h1 class="post-full-title">{{title}}</h1>
            </header>
    
...

Турбо-страницы Яндекс на блоге Ghost

Либо турбо страницы, либо свой кастомный RSS

В общем, алгоритм такой

1. Открываем файл settings/routes.yaml
2. Приводим его примерно к такому виду (после routes: добавить три своих строчки)

routes:
  /turbo-rss/:
    template: turbo-rss
    content_type: text/xml

collections:
  /:
    permalink: /{slug}/
    template: index

taxonomies:
  tag: /tag/{slug}/
  author: /author/{slug}/

3. В корне шаблона создаем файл turbo-rss.hbs

<?xml version = "1.0" encoding = "UTF-8"?>
<rss
  xmlns:yandex="http://news.yandex.ru"
  xmlns:media="http://search.yahoo.com/mrss/"
  xmlns:turbo="http://turbo.yandex.ru"
  version="2.0">
<channel>
<title><![CDATA[ {{@blog.title}} ]]></title>
<description><![CDATA[ {{@blog.description}} ]]></description>
<link>{{@blog.url}}</link>
<language>ru</language>
<image>
    <url>{{@blog.url}}/favicon.png</url>
    <title>{{@blog.title}}</title>
    <link>{{@blog.url}}</link>
</image>
<lastBuildDate>{{date format="YYYY-MM-DDTHH:mm:ss ZZ"}}</lastBuildDate>

{{#get "posts" filter="tags:-[en]" limit="all"}}
    {{#foreach posts}}
    <item turbo="true">
        <title><![CDATA[ {{title}} ]]></title>
        <link>{{url absolute="true"}}</link>
        <turbo:topic><![CDATA[ {{title}} ]]></turbo:topic>
        <turbo:source>{{url absolute="true"}}</turbo:source>
        <author><![CDATA[ {{author.name}} ]]></author>
        <pubDate>{{date format="YYYY-MM-DDTHH:mm:ss ZZ"}}</pubDate>
        <media:content url="{{feature_image}}" medium="image"/>
        <turbo:content><![CDATA[ {{content}} ]]></turbo:content>
    </item>
    {{/foreach}}
{{/get}}

</channel>
</rss>

4. Рестарт Ghost, чтобы изменения вступили в силу.

Пример для турбо RSS взят вот у этого хорошего человека на GitHub, но его формат даты имеет привязку к локали, я поменял на более интернациональный формат даты...

Тут пример разметки RSS для турбо от Яндекса

После подключения в вебмастере можно увидеть примеры своих статей...

(c) картинка взята с сайта Yandex.ru

Продолжение следует...