«Сам сломаю, сам и починю» — как я эпически нажал не туда на проде
Про такие ошибки обычно говорить не принято, потому что во всех интеграторах работают только безгрешные небесноликие люди. У нас, как известно, на уровне ДНК отсутствует возможность ошибаться или быть неправыми.
Но я рискну. Надеюсь, мой опыт кому-то будет полезен. Есть у нас один крупный заказчик, онлайн-розница, которому мы полностью поддерживаем фабрику Cisco ACI. Своего админа, компетентного по этой системе, у компании нет. Сетевая фабрика — это группа коммутаторов, которая имеет единый центр управления. Плюс ещё куча полезных фич, которыми очень гордится производитель, но в итоге, чтобы всё уронить, нужен один админ, а не десятки. И один центр управления, а не десятки консолей.
Начинается история так: заказчик хочет перенести на эту группу коммутаторов ядро всей сети. Такое решение обусловлено тем, что архитектура ACI, в которую «собрана» эта группа коммутаторов очень отказоустойчивая. Хотя это не типично и в целом фабрика в любом ЦОД не используется как транзитная сеть для других сетей и служит только для подключения конечной нагрузки (stub network). Но такой подход вполне имеет место быть, поэтому заказчик хочет — мы делаем.
Дальше произошло банальное — я перепутал две кнопки: удаления политики и удаления конфига фрагмента сети:
Ну а дальше по классике — нужно было собрать заново часть развалившейся сети.
По порядку
Коллеги, просьба перенести настройки портов Leaf 1-1 101 и leaf 1-2 102, порты 43 и 44, на Leaf 1-3 103 и leaf 1-4 104, порты 43 и 44. К портам 43 и 44 на Leaf 1-1 и 1-2 подключён стек 3650, он пока не введён в эксплуатацию, переносить настройки портов можно в любое время.
То есть они хотели перевести кластер серверов. Нужно было настроить новую виртуальную порт-группу под серверное окружение. По сути дела, это рутинная задача, простоя сервиса на такой задаче обычно нет. По сути своей порт-группа в терминологии APIC — это VPC, который собирается из портов находящихся физически на разных коммутаторах.
Проблема в том, что на фабрике настройки этих порт-групп привязаны к отдельной сущности (которая возникает вследствие того, что фабрика управляется с контроллера ). Этот объект называется port policy. То есть к группе портов, которые мы добавляем, нужно ещё сверху применить общую политику как сущность, которая будет управлять этими портами.
То есть нужно было сделать анализ, какие EPG используются на портах 43 и 44 на нодах 101 и 102 для того, чтобы собрать аналогичную конфигурацию на нодах 103-104. После анализа необходимых изменений я начал настраивать ноды 103-104. Для настройки нового VPC в существующей политике интерфейсов для нод 103 и 104 нужно было создать политику, в которую будут заведены интерфейсы 43 и 44.
И там есть в GUI один нюанс. Я создал эту политику и понял, что в процессе конфигурирования допустил незначительную ошибку, — назвал её не так, как принято у заказчика. Это не критично — потому что политика новая и ни на что не влияет. И мне эту политику нужно было удалить, поскольку изменения в неё уже внести нельзя (название не меняется) — можно только удалить и заново политику создать.
Проблема в том, что в GUI есть иконки удаления, которые относятся к политикам интерфейса, а есть иконки, которые относятся к политикам коммутатора. Визуально они почти идентичны. И я вместо того, чтобы удалить политику, которую я создал, удалил всю конфигурацию для интерфейсов на коммутаторах 103-104:
Вместо удаления одной группы фактически удалил все VPC из настроек ноды, использовал delete вместо trashbin.
В этих каналах были VLAN, чувствительные для бизнеса. По сути дела, после удаления конфига я отключил часть сетки. Причём это было не сразу заметно, потому что фабрика управляется не через ядро, а у неё отдельный менеджмент-интерфейс. Меня не выкинуло сразу, не произошло какой-то ошибки на фабрике, поскольку действие было предпринято администратором. И интерфейс считает — ну если вы сказали удалить, значит так надо. Никакой индикации ошибок не было. ПО решило, что идёт какая-то реконфигурация. Если админ удаляет профиль leaf, то для фабрики он перестаёт существовать и она не пишет ошибки о том, что он не работает. Он не работает — потому что его целенаправленно удалили. Для ПО он и не должен работать.
В общем, ПО решило, что я Чак Норрис и точно знаю, что делаю. Всё под контролем. Админ не может ошибаться, и даже когда он стреляет себе в ногу — это часть хитрого плана.
Но примерно через десять минут меня выкинуло из VPN, что я поначалу не связал с конфигурацией APIC. Но это как минимум подозрительно, и я связался с заказчиком, уточнить, что происходит. Причём следующие несколько минут я думал, что проблема в технических работах, внезапном экскаваторе или сбое питания, но никак не конфиге фабрики.
У заказчика сеть построена сложно. Мы по своим доступам видим только часть окружения. Восстанавливая события, всё похоже на то, что началась ребалансировка трафика, после чего через несколько секунд динамическая маршрутизация оставшихся систем просто не вывезла.
Тот VPN, на котором я сидел, — это был админский VPN. Обычные сотрудники сидели с другого, у них всё продолжало работать.
В общем, ещё пара минут переговоров ушла на то, чтобы понять, что проблема всё же в моём конфиге. Первое действие в бою в такой ситуации — сделать роллбек на прошлые конфиги, а только потом уже читать логи, потому что это прод.
Восстановление фабрики
На восстановление фабрики — с учётом всех звонков и сбора всех причастных — ушло 30 минут.
Нашли другой VPN, через который можно зайти (это потребовало согласования с безопасниками), и я откатил конфигурацию фабрики — в Cisco ACI это делается в два клика. Ничего сложного нет. Просто выбирается точка восстановления. Занимает это 10–15 секунд. То есть на само восстановление ушло 15 секунд. Всё остальное время было потрачено на то, чтобы понять, как получить удалённое управление.
После инцидента
Ещё день мы разбирали логи и восстанавливали цепочку событий. Потом собрали звонок с заказчиком, спокойно изложили суть и причины инцидента, предложили ряд мер, чтобы свести к минимуму риски подобных ситуаций и человеческого фактора.
Договорились, что конфиги фабрики мы трогаем только в нерабочие часы: ночное и вечернее время. Проводим работы обязательно с дублирующим удалённым подключением (есть рабочие VPN-каналы, есть резервные). Заказчик получает от нас предупреждение и в это время наблюдает за сервисами.
Инженер (то есть я) на проекте остался тот же. Могу сказать, что по ощущениям доверия ко мне стало даже больше, чем до инцидента — думаю, как раз потому что мы быстро сработали в ситуации и не дали волне паники накрыть заказчика. Главное — не пытались спрятать косяк. По практике я знаю, что в этой ситуации легче всего попытаться перевалить на вендора.
Похожие политики работы с сетью мы применили и к другим заказчикам на аутсорсе: это тяжелее для заказчиков (дополнительные VPN-каналы, дополнительные смены админов в нерабочие часы), но многие поняли, зачем это нужно.
Так же мы покопались глубже в ПО Cisco Network Assurance Engine (NAE), где нашли возможность сделать на фабрике ACI две простые, но очень важные вещи:
- первое – NAE позволяет сделать анализ планируемого изменения, еще до того, как мы его выкатили на фабрику и отстрелили себе все, спрогнозировав как позитивно или негативно изменение скажется на существующей конфигурации;
- второе – NAE уже после изменения позволяет измерить общую температуру фабрики и увидеть как это изменение в конечном счете повлияло на состояние ее здоровья.
Если интересно больше деталей — у нас завтра вебинар про внутреннюю кухню техподдержки, будем рассказывать, как всё устроено у нас и у вендоров. Ошибки тоже будем разбирать)
Источник
Сломал почини не можешь
Нет,не все сломанное ремонтопригодно,Не все болезни лечаться,А вот Солнце-да,встает согласно своего порядка
Не все и не всегда,есть вещи которые не чинятся,и болезни,которые не лечатся.Потери,которые невосполнимы.
Да. Это так. Самое главное -научиться ждать..Тогда обязательно всё произойдёт. и придёт радость. во всём.
Нет. Всё сломанное после ремонта-борохлит. Всё вылечинное-после болит. И солнце после тёмной ночи слепит!
Тогда будем верить)))
Я не могу. Я погрязь в грехе и пороке( Удачи тебе, раз можешь плыть!
Спасибо))) просто найди свой путь:)
Не все, конечно , можно починить и не все можно вылечить, но мы все хотим верить в лучшее, иначе зачем жить?
не все можно починить) не все можно вылечить) и ,тем более, после темной ночи. может быть пасмурно, дождь)
Второе это ужасно!
В теории все верно. Но в жизни то инструмента подходящего нет, то лекарства, то разбудить бывает некому.
Нет. Сломали многое, но никто не починил ничего, Ну а многое нельзя вылечить, И не всегда встает солнце
Сказка какая то)) починить можно,но будет не так как было,а всё что болело со временем опять заболит.
чернобыльский реактор что-то не чинят,от рака всё больше людей умирает,даже мировых знаменитостей
Не все, что сломано можно починить. К тому же любое сломанное и починенное — уже не может быть целым.
Все что должно сломаться, обязательно сломается, все что не должно ломаться, все одно сломается.
Не-а 
Что мне уже интересно.
Все достаточно прозаично
Привет очаровашка, значит ты приятненькая проза! Но пока прочитать ее не представляется возможным.
Было бы желание))) просто нужно читать между строк))
можно в декабре будет очередной опыт провести, как раз самая длинная и тёмная ночь должна быть))
Что бы ни случилось, запасись терпением — солнце должно снова взойти. Оно всегда так поступает.
Не все можно починить, и вылечить. Ну а то что после темной ночи всегда встает солнце это точно
нет когда человек сломаеться его невозможно починить! когда душа болить трудно его вылечит
Нет. Недаром есть в городах помойки с непочиненным хламом и неизлечимо больные инвалиды.
да точно в той ночи ого го встали и мало не показалься ио ли солнце ио ли киска пробежала
истинная правда. Я видела мамочек, которые счастливо проживали жизнь, потеряв ребенка.
Конечно не так. Разбитая чашка, уже никогда не станет новои и целой, как её ни склеивай
Я верю что да, иначе нет смысла двигаться дальше, если бы впереди было темно и холодно
Источник
Что будет, если не чинить сломанные вещи
Про «закон разбитых окон» все знают. Если в доме разбито одно окно, через некоторое время все окна будут разбиты. Если, ясное дело, не принять меры: вставить стекло, организовать охрану, камеры повесить…
Есть ещё одно проявление этого закона. Если что-то сломалось в доме, а вы это не смогли, не успели или не захотели починить, через некоторое время сломается ещё что-то. И ещё что-то. И ещё… Вскоре дом будет полон сломанных вещей.
Я знала женщину, которая готовила в мультиварке. Мультиварка удобная вещь, несомненно. Но тонкость в том, что кухня этой женщины была напичкана дорогой техникой: плита, духовка с разными функциями, микроволновая печь, электрогриль, ещё какая-то печка…
Все это было сломано. Причём не за один раз, не молния ударила и не электричество скакануло, как говорят. Постепенно все ломалось.
Сломалась и машина. И двери автоматические в гараже. И ещё масса всего сломалась. Можно сказать, цепная реакция началась.
Да, техника иногда ломается в ответ на эмоциональное состояние человека, есть такой загадочный феномен. Но есть и другой; если не починить сломанное, отложить ремонт, потому что некогда, денег нет или неохота, начнёт ломаться все остальное. Порча распространится на все имущество.
Сломанная вещь — магнит для разрушений. И для болезней. Которые увеличиваются в геометрической прогрессии. Система начинает разрушаться из-за пустячной поломки, которую не чинят.
Может, правильно солдата наказывают за оторванную пуговицу? А нас так беспокоит мелкая дырочка на колготках, — ее же не видят? Но хочется немедленно зашить дырочку или надеть целую вещь.
Женщина с мультиваркой тосковала и болела. Она переживала потерю работы очень сильно. Когда мультиварка тоже сломалась, она стала заваривать готова сухие супы кипятком из чайника. Ну, и готовую еду заказывать иногда…
Но потом она начала чинить сломанное потихоньку. И жизнь ее тоже потихоньку стала налаживаться. Работа хорошая нашлась, — а долго ничего не получалось!
Так часто бывает. Надо сразу стараться чинить то, что сломалось, как можно быстрее! Чтобы сломанный элемент не повлёк разрушение всей системы и лавину несчастий…
Или надо выбросить сломанное. Чтобы оно перестало быть частью системы. Иногда это — единственный выход…
Источник
Нужно сломать, чтоб потом уметь починять
Давно не писал нормальных постов, вот решил исправится. В общем, этот пост, как и предыдущие, есть продолжением моей саги о том, как я стал электронщиком.
Было мне лет 13-14, был расцвет кассетных китайских магнитофончиков всяких форм и размеров. На этой волне китайской штамповки я иногда зарабатывал себе пару копеек, устраняя несложные поломки. В общем, в один прекрасный летний день ко мне приехал паренек из старашаков, привез магнитофон двухкассетный. Говорит «Не включается совсем, надо сделать». Я покумекал немного и со словами «Давай, посмотрю что там», магнитофон взял.
Вечером того же дня я магнитофон разобрал. С трансорматора не было питания. Поломка чепухневая, если б не одно «но». Магнитофон был не совсем уж штамповкой, относительно качественным и мощным, и, чтоб обеспечить эту мощность, усилителю требовалось хорошее питание. Его должен был обеспечивать тот самый трансформатор. Помню, вроде бы там 12 вольт было. Причем однополярное питание. У меня уже был опыт работы с блоками питания, причем весьма неплохой, до этого где-то годом ранее я примерно с такой же поломкой сжег себе мультиметр)))
В общем, с другого транформатора дал туда 12 вольт, магнитофон заработал, но уже на трети громкости звук стал запинаться, а на половине напряжение проседало настолько, что магнитофон на мгновение вырубался полностью. Нормального мощного трансформатора у меня не было, о чем я поведал на следующий день старшаку. «Ну, сделать полюбому надо» -сказал старшак — «я отблагодарю. Но ты сделай. А то печаль будет. понял?». Через часа два старшак приехал снова с парой ушатанных магнитофончиков — «вот тебе запчасти, чтоб сделал. Сиди и делай. Увижу гулять пошел — по шее надаю. Понял?». В общем, я нажил себе проблему)))
Пару дней я сидел дома и думал, как побороть проблему. Нужен был более мощный трансформатор. Или более мощный старшак))))
Проблему решил колхозом, прилепив два самых мощных трансформатора, что у меня были. Я выпрямил напряжение двумя диодными мостами и уже после мостов запаралелил питание. Магнитофон стал более-менее стабильно работать, ушатанный трансформатор с него я оставил себе в качестве трофея. Получил благодарность от старшака — он проставился пивом, водкой, самогоном)) Ну и я получил еще одну крышу по его словам))
А с трансформатором история только начинается. Летом я денежку зарабатывал по всякому, а вот зимой у меня оставалась только электроника. И если до нового года все старались починить себе телевизоры, то после нового года в деревне не оставалось зарабока от слова «совсем». Очень редко можно было что-то перехватить. И вот перед весной я подумал что негоже дохлым трансформаторам валятся, надо бы сдать их на медь, как раз и копейка будет. Начал курочить, под молоток попал и тот смый трансформатор. Я раздолбал магнитопровод и начал ковырять обмотки. И, сразу же под слоем изоленты (вернее, термоскотча) я обнаружил какую-то неведомую фигню. К которой шли два провода. Один внутрь обмотки, второй был концом (или началом) вторички. Я проверил эту штуку мультиметром — ток не проводит ни в какую сторону. Проверил обмотку — ток проводит. Полез в коробку с трансформаторами, начал перебирать все, что у меня были, и стараться пальцами нащупать такую же фигню. На одном нашел. Обмотка звонится в обе стороны как исправная. Аккуратно содрал термоскотч и выковырял неведомую фигню. Проверит мультиметром — звониться в обе стороны. И тут до меня дошло что это такое. Предохранитель. Чуть позже я уже узнал, что это термопредохранитель, узнал и принцип его работы. Но на тот момент я понял, что это предохранитель. И что я только что ушатал крутой трансформатор, в котором всего лишь нужно было поменять этот самый предохранитель. И что летом я мог не колхозить с магнитофоном, а поменять предохранитель. Это всё дошло буквально в одно мгновенье. Всего одно слово «предохранитель».))
В общем, суть этого рассказа в том, что иногда (а, зачастую, в электронике почти всегда) для того, чтоб понимать, что куда и зачем, чтоб понимать, как это устроено, как это работает и как это починить, нужно сломать что-то подобное. Сломать полностью, чтоб оно уже не поддавалось восстановлению. Но не просто разбить-раскурочить, а изучить строение изнутри. И потом, благодаря этому одному, можно починить тысячи подобного)
Ну, раз рассказ за трансформаторы, то и видео своё сюда прилеплю про трансформаторы.
Дубликаты не найдены
Я вот никогда не мог понять логику такого размещения этого предохранителя. Он должен быть легкодоступным для замены, так какого хрена он туда упрятан? Спасибо, хоть не в начало обмотки.
Чтоб температуру обмотки нюхать, а не погоду на Марсе.
Он там не для замены, а от пожара. Замене подлежит трансформатор, а не предохранитель.
А жаль выкидывать исправный транс. Думаю, мало кто и выкидывает. И чем не годится внешняя плавкая вставка? Возможно, у меня не хватает знаний, чтобы понять.
Раз сработал термопредохранитель, значит, не такой уж он и исправный. Изоляция перегрета, возможно межвитковое. У меня как-то раз на вид абсолютно исправный транс чуть квартиру не спалил — хорошо, полыхнул на столе из негорючего ДСП. В такой ситуации как раз и пригодился бы термопредохранитель, но вот не было его там.
Логика, по-моему, простая — чтоб тратили денежки на новый трансформатор. Ну, по крайней мере за бугром.
А иногда на некоторых трансформаторах был отдельный вывод от точки соединения термопредохранителя с обмоткой, и если термопредохранитель перегорал, то можно было легко его обойти, снижая таким образом безопасность изделия.
Рассказ хороший. И видео ,наверное, тоже. Почему «наверное» — потомучто на 30 минут про обмотки .
Можете на 19:41 перемотать, на мой взгляд самая интересная часть видео)
Как говаривают у нас в кабинете, когда всё работает и становится скучно :
«А давайте что-нибудь сломаем, а потом героически починим?»
Мы себе так усилок от Сони чинили, тоже уже хотели колхозить с трансформатором, но в итоге, поставили общий предохранитель, поменьше, и проводом обошли термопредохранитель.
А термопредохранитель разве сам не востанваливается? ()_()
Мой деревенский гугл двухтысячных
Всем привет, ребята. Это продолжение серии моих постов о моем становлении на пути электронщика. Кто их читал, тот в курсе, а кто не читал — я вырос в деревне, в, скажем так, небогатой семье и это самое небогатство толкнуло меня на путь электронщика. Описанное в этом посте было в начале нулевых, мне на то время было 12-14 лет и я делал свои первые робкие шаги в мир электроники.
На первых шагах я имел дело с ламповой техникой (это был еще конце девяностых и в деревнях вовсю использовались ламповые телевизоры теми людьми, у которых денег на новый не было). Понимание как работает радиолампа пришло само собой: вот есть анод, вот катод, греемся нитью накала чтоб добиться температуры эмиссии электронов и подаем анодное напряжение. Дальше управляем током с помощью сетки или нескольких сеток. Для меня это было просто. Но на дворе уже явно не восьмидесятые и повсюду транзисторы. Лампы отживали последние годы (хотя в городах их можно было встретить лишь в мастерских и на рынке). В попавших в мои руки платах сплошь и рядом транзисторы. В подаренной дядей Валерой книжке — схемы на транзисторах. Да, я собрал пару простейших схем и они заработали. Но собрал как обезьянка — методом упорного повторения. Понимания, как это работает, у меня не было ни малейшего. Но было осознание, что понять надо, иначе ничего из меня в плане электронщика не выйдет. Пойти и спросить у дяди Валеры мне не позволяла гордость. Вернее, пойти — позволяла, я часто к нему забегал. Но признаться, что не могу понять, как работает транзистор. Для меня это было смерти подобно)
Я много читал. Как ни странно, читать я любил (и сейчас люблю). Читал в основном научную фантастику. И читать я начал рано. Жизнь была сильно сурова и я сбегал от нее в книжки, там мне было комфортнее.
Я помню девяностые, отключение электричества по вечерам минимум на 2 часа. Помню то, что мама называла «каганэць» — крышка с банки, в ней подсолнечное масло, туда мокнули кусок нитки толстой, которая была бахромой на платке, и подожгли. Помню, как эта штука потрескивала, горя, и неистово чадила. Но давала свет в долгие зимние вечера. Как я читал под этим «каганцэм» Кира Булычева, Айзека Азимова, Станислава Лема. А еще помню чай с веток малины или вишни, которые давали этому чаю характерную горечь) Но пост не об этом, а о том, где я брал книги — о деревенской библиотеке.
В библиотеку я захаживал часто, проблема транзистора заставила меня перейти из маленького зала с детской литературой (не знаю почему, но фантастика почему-то хранилась именно в детском отделе, хоть и на отдельном стеллаже) в зал взрослой литературы. Позже я найду там и перечитаю очень много чего интересного, и мемуары Покрышкина «Пламенное небо», и «Контроль» Суворова, и «Как закалялась сталь» Островского, и много чего другого интересного и важного, но в то время я устремился к полкам с книгами об электронике. Для начинающих там было немного литературы, я взял пару книг, которые библиотекарь с неохотой на меня выписала, мол «мал еще такое читать». Как я ни лопатил книги, как я ни лопатил мой деревенский гугл — библиотеку — а понять, как работает транзистор, не мог. Там было всего несколько книг, в которых описывался принцип работы транзистора, но в одной было очень заумно и нужно было иметь кучу знаний, которых у 12-ти летнего меня попросту не было, во второй сильно туманно и очень далеко от того, что я мог понять. Это сейчас, в эру интернета, можно просто загуглить, открыть десяток сайтов с объяснением одного и того же, и на одном из сайтов найти ТО объяснение, которое именно ТЕБЕ легче всего понять. А тогда я об интернете знал только из пары статей в газетах да из книжек, которые отставали от реальной ситуации лет на 7-10. И был тот интернет еще настолько слабо развит, что, скорей всего, я не нашел бы в нем того, как работает транзистор))) Этого, конечно, я не знал и просто лопатил библиотеку. Я стал брать все книги по электронике подряд домой, по две-три за один раз, и стараться их читать. Я понимал, что у меня мало знаний, но книги по физике для школьного курса, которые я тоже старательно прочитал, мне нисколько не помогли — электронике там было посвящено очень мало. Поэтому я читал то, чего не понимал и очень радовался, когда начинал что-то понимать. Со временем этого «что-то» становилось больше. Но было и то, что заставило меня, любителя книг, возмутится всем сердцем и разумом. У некоторых книг, нет, Книг (именно так, с большой буквы, ибо они мне знания дали) , отсутствовали страницы. Они были варварски вырваны. Заметил я это случайно, когда читал «В помощь радиолюбителю» (было такое издание регулярное) и не увидел статьи, которая была в содержании. В общем, мало того, что литературы в местном аналоге гугла было крайне мало — так и та была испорчена)))
Со временем, будучи в гостях у дяди Валеры, я увидел у него пару-тройку тетрадей, в которые были вклеены вырезки из книг. Он тогда честно сказал, что это он вырывал листы из библиотечных книг. На моё полное отчаяния «Зачееем. » он ответил «Ну а что, их все равно больше никто не читает, а так вся нужная мне информация всегда при мне». Что ему ответить я не нашел, ибо был в состоянии легкого шока, потому просто промолчал.
В общем, спустя наверно аж пару лет я смог таки понять как работает транзистор. Мне на глаза попался чей-то труд, в котором транзистор сравнивался в водопроводом, в котором краником (то есть базой, сигналом на базе, ручкой краника, легкой струйкой воды, которая нажимала на подпружиненную заслонку и приоткрывала её) можно было управлять огромным потоком воды, проходящей через этот краник (током через транзистор). Только с этого примера я смог с легкостью срисовать картину происходящего и ужаснуться, как же я не мог понять всех тех других примеров, которые были в других книжках. Потом я снова взял в библиотеке заумную книжку, прочитал перед этим немножко про строение атома и смог уже полностью понять какие процессы протекают в P-N переходах. Это меня научило тому, что если тебе что-то непонятно, то это не значит, что ты тупой, это значит, что тот пример, который ты пытаешься постигнуть — он не для тебя. Для тебя будет другой пример, который ты поймешь с полуслова. А если хочешь понять без примера — то нужно огроменную кучу знаний. При чем иногда не просто знаний, а знаний из смежных областей в том числе. Это научило меня не сдаваться, если что-то не получается, а идти вперед, ища раз за разом новые возможности для шага вперед.
А запах деревенской библиотеки я помню до сих пор. Так пахнет каждая библиотека, в которой я когда-либо был. Особенный запах, запах книг — для меня это запах знаний.
Ну и напоследок бонусом видео с теми самыми злополучными транзисторами — как их проверить мультиметром. Знаю, что много в сети информации на эту тему, но может именно моё объяснение кому-то будет понятней, чем все остальные)))
Источник
