Перенос баянометра на новый хостинг окончен. / длиннопост :: баянометр

баянометр длиннопост 

Перенос баянометра на новый хостинг окончен. В качестве нового хостинга был выбран VDS на hetzner. Посмотрим как он себя покажет, но в любом случаи, хуже очень вряд ли будет


Так же хотелось бы рассказать предысторию, а так же извиниться перед всеми за регулярные проблемы в работе

Дело в том, что на ранних этапах существования баянометра в качестве хостинга я использовал сервера клиентов, которых я брал на  довольно длительную поддержку. В общем то мощностей было более чем достаточно и никому это никогда не приносило никаких хлопот, но, уходит клиент - переносишь весь баянометр, что мягко говоря не ок. Так что первоначальная задумка в том, что бы предоставить бесплатный продукт для пользования без постоянного вложения средств в него, мягко говоря не состоялся, и стало понятно что для того чтобы это существовало в сколь либо стабильном виде, нужно купить отдельный VDS и не заниматься этой хренью, и был выбран хостинг который себя очень хорошо зарекомендовал, правда в формате аренды именно выделенных серверов, а не VDS. Всегда было все хорошо, без перебоев, поддержка реально 24/7, все красиво, так что кредит доверия был крайне высок, но, на поверку оказался бесконечный вагон проблем... Дело в том, что они как то на столько криво снимают бекапы серверов, что после них хочется пойти резать вены. Примеры того что случалось после "бекапов":

- Тупо отвалилось половина сервисов

- Битые таблицы базы данных

- Потеря данных

- Краш разметки

- Краш загружчика

- Затирание MBR

- Просто исчезновение всей системы в небытие


И это не преувеличение а реально список того что случалось

И вот как бы история длиться около года. Было сменено 3 дистрибутива, наверное все файловые системы, включая btrfs, xfs, ext4, ext3, ext2. Что бы не менялось - результат один и тот же. 3 часа ночи, бекап, проблемы. Не каждый день конечно, но, с завидной частотой. Иногда по месяцу ничего не происходило и все работало, а иногда я восстанавливал систему по 4 раза на неделе. В общем то, почему оно так происходит - для меня загадка. Может правда я на столько долбоеб, а может все таки хостинг дерьмо с идиотом админом. Изза чего правда чувствую себя идиотом - терпильность. Каждый раз сидел и слушал что все поправят, себя уговаривал, думал что разрешиться, вместо того что бы свалить на другой хостинг. Как говориться, первый раз - случайность, второй раз - совпадение, третий раз - закономерность. Потому повторно прошу прощения за неправильные решения принесшие столько неудобств.

Дополнительно прикрепляю сборку скринов только некоторых проблем которые происходили после магических бекапов:

SeaBIOS (version re 1-1.S.3-0-ge2fc41e-prebuiIt.qemu-project.org) Machine UUID 24d5244c-48ec-4475-8a41-ade944c4e00c Booting from Hard Disk...
Boot failed: not a bootable disk
No bootable device. Retrying in 1 seconds.
iayanometr:/srv # touch test
touch: cannot touch 'test': Read-only file



Так же, вместе с переездом были немного увеличены мощности сервера

Помимо этого, сейчас идет формирование новой базы данных хешей для новой системы поиска основанной на OpenCV(ORB). Посмотрим как она себя покажет на больших объемах данных, но, результаты крайне обнадеживающие. А именно, OpenCV не очень хорошо переваривает искажения картинки, по типу watermark или смены цвета, но, ему абсолютно плевать на кроп картинки, и имея даже четверть исходной картинки - можно найти оригинал


Подробнее
SeaBIOS (version re 1-1.S.3-0-ge2fc41e-prebuiIt.qemu-project.org) Machine UUID 24d5244c-48ec-4475-8a41-ade944c4e00c Booting from Hard Disk... Boot failed: not a bootable disk No bootable device. Retrying in 1 seconds. iayanometr:/srv # touch test touch: cannot touch 'test': Read-only file system jayanometr:/srv tt Generating ”/run/initramfs/rdsosreport.txt” Entering emergency mode. Exit the shell to continue. Type "journalctl” to view system logs. You might want to save 'Vrun/initramfs/rdsosreport.txt” to a USB stick or /boot after mounting them and attach it to a bug report. Give root password for maintenance (or press Control-D to continue): Inode 2361012 was part of the orphaned inode list. Fix? yes Pass 2: Checking directory structure Pass 3: Checking directory connectivity Pass 4: Checking reference counts Pass 5: Checking group summary information Block bitmap differences: -(1474624—1474687) -(2655264—2655327) -(5308032—5308159) (5360640—5361151) -7905292 Fix? yes Free blocks count wrong for group #45 (6896, counted=6960). Fix? yes Free blocks count wrong for group #81 (27049, counted=27113). Fix? yes Free blocks count wrong for group #161 (1076, counted=1204). Fix? yes Free blocks count wrong for group #162 (4685, counted=4941). Fix? yes Free blocks count wrong for group #163 (8378, counted=9620). Fix? yes Free blocks count wrong for group #241 (3003, counted=3004). Fix? yes Free blocks count wrong (3558162, counted=3604970). Fix? yes Inode bitmap differences: -1966085 -(2361008—2361009) -(2361011—2361012) Fix? yes Free inodes count wrong for group #240 (1000, counted=1001). Fix? yes Free inodes count wrong for group #288 (6354, counted=6358). Fix? yes Free inodes count wrong (2966992, counted=2966916). Fix? yes /dev/sdal: *-*-*-*-* FILE SYSTEM WAS M0DIFIED *-*-*-*-* /dev/sdal: 178812/3145728 files (0.4/ non-contiguous), 8977942/12582912 blocks :/root#
баянометр,длиннопост
Еще на тему
Развернуть
кхм... как раз сейчас занимаюсь тем, что пытаюсь окончательно свалить по-дальше от hetzner. Вот все было хорошо, пока не понадобилось пообщаться с саппортм. Он там что есть - что нету. Один хрен не помогут. А еще их любят DDoSить.
Ну по ддосу - это скорее из-за их популярности. Как речь о самих серверах - у них как раз таки всё хорошо. Но защиты от ddos - нет. Если кого-то заливают, то заливают и твои сервера до кучи. Тут ничего не поделать. А сервера с защитой от ддос - у ддос провайдеров. Ну или дополнительно брать у кого-то услугу защиты. А стоит оно вагоны золота.
Сколько лет не использую Hetzner, никогда проблем с саппортом не было, что на физических, что на виртуальных их серверах. Ты случаем не хотели ли от техподдержки чего-то сверх прописанного в договоре?
dadv dadv 03.05.202000:08 ответить ссылка 0.8
А если не секрет, с какого хостера съезжаешь в Hetzner?
dadv dadv 03.05.202000:07 ответить ссылка 0.1
hostkey. VDS дерьмо, по итогу, к выделенкам никаких претензий не имел никогда. На сколько актуальна инфа - не знаю
ExtraDJ ExtraDJ 03.05.202000:42 ответить ссылка -0.1
Посмотри в сторону А1, юнайтед хостер, кобвеб, копако, телеком италия. Если вообще далеко хостинг нужен, то телмекс, кларо аргентина или кларо Колумбия. Они что то из хостинга предлагают. А еще они являются нашими клиентами и проблем с саппортом мало когда есть.
Сколько же кушает баянометр? В канадских рублях если можно
omgster omgster 03.05.202000:12 ответить ссылка 0.0
На hetzner цены есть.
Был взят CPX41 по цене 22.90€
У хетцнера отвратительная абузоустойчивость. Она не просто нулевая, она отрицательная. Если на тебя подадут десяток-другой однотипных жалоб, то они даже разбираться не будут, а просто дадут тебе 24 часа на слитие данных и пнут под зад. Знакомый так влетел, попал под флэшмоб. Так что имей это в виду, на всякий случай.
sprspr sprspr 03.05.202000:14 ответить ссылка 0.7
Об этом знаю, и знаю что у них свои косяков хватает, но, баянометр к любым жалобам не имеет никакого отношения, по очевидным причинам. Пнут под зад - не вопрос. И так делаются бекапы каждые сутки, так что баянометр такой, всегда на чемоданах
Подозреваю, что знакомый занимался чем-то провоцирующим жалобы. У меня ровно обратный опыт - было несколько случаев, когда у Hetzner случались ложные срабатывания их системы мониторинга и они раз за разом присылали письма с жалобами на якобы абузинг. Каждый раз разбирательство показывало, что это false positive и техподдержка признавала это, а потом они, видимо, починили свою систему и ложные срабатывания прекратились.
dadv dadv 03.05.202001:12 ответить ссылка 0.1
Это не проблема. В хетцнер, на удивление, живые люди работают, и даже если к ним прилетают абузы, достаточно легко разобраться через саппорт.
Правда, исключением из всего этого являются абузы от РКН. Я не знаю, какие у них отношения, но тот факт, что некоторые магистрали врезаны прямо в их сеть (насколько я знаю), играет большую роль.
Но если нет проблем с РКН, то хетцнер, наверное - лучше, что можно найти с ДЦ поблизости.
Другое дело, что я не знаю, что вы там делаете, в каких объемах и как, но мне очень странно, что вы не можете работать даже на дешёввх DS, которые стоят ~€50. Возможно, стоит подумать о том, что ресурсы сервера можно использовать куда эффективнее.
Госпадя, типовой говнохостинг теряет харды. Увы в этом случае в практике спасает переход на селектэл (не реклама). Очень много мучений было ранее.
Проблема селектела в том, что он в России. Хоть и все прочие показатели у него, вроде, ок. Но по своей воле я бы в российских ЦОДах ничего бы размещать не стал.
Облачный сервер (https://selectel.ru/services/cloud/servers/) и делай что хочешь. Заблочат, поднимешь уже тогда из бекапа на импортном. Мания преследования хороша, но практика показывает, что все риски ты не учтешь, даже на (строгих) закардонных хостах.
Вопрос о стабильности будет решен, а по по поводу запросов (это же баянометр а не торрент для ркн) не думаю, что стоит парится.
Пусть тут напишут тысячу причин, но в реалиях все проще.
Не хочу иметь ничего общего с компаниями в РФ
вопрос о стабильности основной или тут еще вероисповедание и иные моральные предпочтения?
мне кажется это ты как веган. есть много причин почему не стоит пользоватся хостингом в рф. да селектел млжет и не плохи. но почему нет - увы пока больше
исходя из вышеописанного не могу не согласиться, что в данном случае главное не только стабильность. Так то в рф вообще нынче никаких гарантий (гарант сдулся), в обозримом будущем увы и ухудшение положения.
Причин дохерна. Если вкратце, то если прикидываешься своим - к тебе относятся как к дерьму. Прикидываешься чужим - ищут как бы тебя въебать. Простой пример, из последних, который я лично наблюдал. reg.ru. После информирования хостера о том что ты прекратишь пользоваться их услугами, заблокировали хостинг полностью и требовали деньги за восстановление доступа, при том что хостинг был оплачен на пару месяцев вперед. Аргументировали они это тем что клиент обязан компенсировать свой уход, и соответственно убыток компании. И подобных примеров у меня наберется несколько десятков, если не больше. Я даже не вижу смысла все это расписывать. Тебе нравиться - пользуйся. Мои проекты никогда на хостинге РФ не будут, по огромному количеству причин
За reg.ru полно грешков, вот один из эпических: https://habr.com/ru/company/poiskvps/blog/413553/ , и подведенные спустя год итоги: https://habr.com/ru/post/449682/

Не, первое правило ведения бизнеса в РФ - золотое.
Psilon Psilon 03.05.202015:52 ответить ссылка 0.1
как мне сказал один хороший знакомый про reg.ru "что ждать от регистратора, он же не хостер".
На собственном опыте (3 проекта сейчас готовлю к миграции с reg.ru) столкнулся с его невежеством и удручающим качеством услуг. Под избыточной нагрузкой сам юнит сервера уходит в ребут, объясняют защитой, хз от чего.
Я таки дико извиняюсь, нафига авторизация на баяноетре?? Или это старая ссылка на него и где новая или опять что-то сломалсь???
о
X
"I * JoyReactor - смешные картинка X ^ phpMyAdmin	X +
<-	-> С £> А Не защищено | bayanometr.xyz
★ © ^ | ;
Приложения
1
»
Добро пожаловать в phpMyAdmin
	Язык - Language	
		
		
	Русский - Russian	T
		
Deprecation Notice in ./libraries/classes/Url.php#251
Array and string offset
Haspen Haspen 03.05.202000:45 ответить ссылка 0.5
Это старый сервер, морда от phpmyadmin. Базы переносил, вот и поднял
Подожди чуть чуть, должны обновиться DNS. Хотя странно. Уже давно должны были обновиться
фух, а то думал опять к Наташе бежать жаловаться что я всё уронил, спасибо тебе мил человек.
Haspen Haspen 03.05.202000:47 ответить ссылка -1.5
а мог бы pma побрутить
Поздно. Сервер уже похоронен
а мог бы..
Было бы что брутить... Там в общем то ничего не было, кроме каких то около тестовых баз
Пхпмайадмин на сервере? А ты затейник.
Диджейка Joyradio в DigitalOcean с аптаймом 2 года, фронтенд Joyradio в OVH недавно перезагрузился после 3 лет аптайма. OVH роскомнадзороустойчив, просто пересылают тебе письма и вертись как хочешь
Ты что-то явно делаешь не так
DO и OVH все же далековато до Hetzner по соотношению цена/ресурсы. Понятное дело что Hetzner добивается этого тем что хостит много чего на домашнем железе, но если надо хостить что-то что не приносит денег - это вполне терпимо.

Но если нужен хостинг, которому насрать на абузы, то прямой путь в OVH, тут не поспоришь. Им пофиг вообще на все, не только на РКН.
OVH не настолько дороже хетзнера чтобы терпеть всю ту херню что происходит у них из года в год
А что с hetzner не так то? У меня там виртуалка уже лет 5 и, кроме какого-то момента когда у них в течение недели штормило сеть, никаких проблем не было с ними.
Ох, очень долго перечислять.
* Никто никогда не забудет историю с убитыми дисками в новых дедиках
* lara вместо нормальной IP-KVM консоли. Удачи тому кто попытается с ее помощью что то сделать
* Это гавно выше, еще и платное с повременной оплатой
* То что они продают на аукционе не стоит даже пробовать арендовать
* Постоянные разьебы всего https://www.hetzner-status.de/en.html, последний раз когда я ими пользовался в течении недели корневые маршрутизаторы половины регионов падали пачками с периодичностью в 12 часов. Как вижу там до сих пор постоянные Switch fault
* Из за желания левой пятки тебя могут вежливо попросить собрать вещи и уйти за несколько дней, что непросто если инфраструктура большая. Желание может быть вызвано чем угодно - сомнительной абузой, ошибкой их сканера, подозрением в майнинге, торговле криптовалютами (или любой другой фигне, которую они считают нехорошей)
* Как-то чтобы разорвать отношения ребята серьезно попросили послать им факс с подтверждением
* Очень долго перечислять, можно почитать приключения других ребят на одном древнем форуме https://searchengines.guru/showthread.php?t=725528&page=100

Тебе вероятно повезло, моя многолетняя история взаимоотношений с хетзнером вынуждает больше никогда там ничего не держать, и терпеть отвратительный саппорт OVH
Хм... познавательно. Спасибо, если буду что-то серьезное поднимать то учту эту информацию. Так то у меня там уже мало что осталось после того как дома сервак поставил, в основном для обхода РКН использую.
По своей практике могу сказать
Забудь про тех.поддержку. Они не делают нихера вообще. Ответы по 12+ часов
Забудь про абузоустойчивость и что либо хотя бы капельку нарушающее даже самый мелкий закон
Забудь про то что они будут за тебя делать бекапы
В остальном вроде бы все хорошо
В общем то в случаи баянометра все 3 пункта не играют никакой роли, а цена приятная, потому такой выбор. Если бы не цена - я бы ушел к digitalocean, или собрал бы сервер максимально дешевый в размещении и кинул бы его в дата-центр
Я написал это сообщение, пошел смотреть впервые за два года как там диджейка и уронил к хуям. Нормально, че
а какая у радивы посещаемость?


зы: упчок в августе кану убил :(
На самом деле, именно с VDS мне практически не приходилось иметь дел. Работаю я в 9 из 10 случаев с закрытыми системами, типа закрытых CRM, автоматизированных складов, курьерских служб и т.д. А там как бы собирается сервер, шифруется в 3 слоя, дублируется, и все на этом. Или своя "серверная", или кидают это добро в дата-центр. В обоих случаях зачастую оно там гниет годами вообще без какого либо вмешательства. Хрен с ними с шаред хостингами, они по определению дерьмо, это всегда знал да понимал, но никогда не думал что на столько много гемороя с VDS
Спасибо за совет, гляну OVH
С виртуальными серверами в Hetzner проблем нет никаких, пока ты не нарушаешь прописанных в договоре условий и оперативно реагируешь на абузы в случае ложных срабатываний.
dadv dadv 03.05.202010:47 ответить ссылка 0.0
Новенький, да? Тогда точно боянометр должен быть твоим настольным инструментом.
а гайд по нему есть?
ты на него ещё ссылки найди попробуй
футер сайта 99% людей не читают
А ведь было здравое предложение: http://joyreactor.cc/post/4325399
Uriel Uriel 07.05.202012:47 ответить ссылка 0.0
Больше 5-ти лет работаю с hetzner и с чисто технической точки зрения - проблем с ними никогда не было. По абузам может быть да, но это совсем другое.
Я когда-то делал похожий баянометр для телеграм-чатика, по моим экспериментам очень неплохо получился вариант с хэшом цветового момента. Они и повороты, и ресайзы нормально определяет.

Более надежный вариант - считать хэш по разным метрикам, например AverageHash/BlockMeanHash/ColorMomentHash/MarrHildrethHash, и потом соответственно отсюда пытаться найти похожую картинку.

В общем, желаю успехов.
Psilon Psilon 03.05.202015:48 ответить ссылка 0.1
Только зарегистрированные и активированные пользователи могут добавлять комментарии.
Похожие темы

Похожие посты
■ Demo application ImageHash
□
X
: [[«*>■ Dl ^ [□]	. {o}6 I (2) <
AverageHash DifferenceHash Perceptual Hash
Browse
Load
Clear
73051550389305359
1112177781819418778
14419936282921065570
AverageHash DifferenceHash PerceptualHash Browse Load
Clear
73051550389305359
1112177781817321882
подробнее»

баянометр разработка длиннопост

■ Demo application ImageHash □ X : [[«*>■ Dl ^ [□] . {o}6 I (2) < AverageHash DifferenceHash Perceptual Hash Browse Load Clear 73051550389305359 1112177781819418778 14419936282921065570 AverageHash DifferenceHash PerceptualHash Browse Load Clear 73051550389305359 1112177781817321882
&И, 07 Зал 2017 14:37:06 +0300
Последнее обновление:	07 иап 2017 13:35:25 +0200
подробнее»

anon новый баянометр

&И, 07 Зал 2017 14:37:06 +0300 Последнее обновление: 07 иап 2017 13:35:25 +0200