Русский
Русский
English
Статистика
Реклама

Накопители

Перевод NANDкромантия трансплантация флэш-памяти наживую

31.05.2021 16:13:25 | Автор: admin

Нередко при анализе встроенной системы происходят преднамеренные, а иногда и нет, изменения, которые приводят к тому, что целевая система выходит из строя и впадает в так называемое состояние кирпича. В некоторых случаях для ее реанимации достаточно выполнить сброс к заводским настройкам, в иных же приходится прошивать систему при помощи интерфейса отладки (JTAG/SWD/*) или вручную через внешнее устройство памяти (SPI/NOR/Nand/eMMC). В данной статье мы рассмотрим весьма креативный метод раскирпичивания системы после подобного сбоя.

Как-то в свободное время я возился с памятью маршрутизатора, где в качестве загрузчика использовалась прошивка CFE (Common Software Environment). В ходе моего взаимодействия с CFE в попытке определить аргументы, передаваемые при загрузке в ОС устройства, конфигурация системы была случайно повреждена:

CFE> bPress:  <enter> to use current value        '-' to go previous parameter        '.' to clear the current value        'x' to exit this command94908AC5300R               ------ 0394906REF                   ------ 07GT-AC2900                  ------ 08Board Id                          :  8  X     <---- whoopsNumber of MAC Addresses (1-64)    :  10  ^C   <---- more whoopsxMemory Configuration Changed -- REBOOT NEEDED <---- whoops saved. flow memory allocation (MB)       :  14  ----

В тот момент я понял, что для сохранения этих случайных изменений осталось выполнить заключительную операцию сохранения/записи, поэтому решил просто физически перезапустить устройство, чтобы избежать внесения изменений. После перезапуска возникла ошибка:

Shmoo WR DMWR DM   0000000000111111111122222222223333333333444444444455555555556666666666   012345678901234567890123456789012345678901234567890123456789012345678900 ------++++++++++++++++++++++++++X+++++++++++++++++++++++++++----------01 --+++++++++++++++++++++++++X++++++++++++++++++++++++++----------------02 X---------------------------------------------------------------------03 X---------------------------------------------------------------------MEMSYS init failed, return code 00000001MEMC error:  0x00000000PHY error:  0x00000000SHMOO error:  0x10c00000  0x00000082 0x00000000

Когда маршрутизатор снова заработал, то тут же выдал вышеприведенную ошибку и в CFE не вошел. Без возможности обратиться к загрузчику конфигурацию изменить было нельзя, а процесс его восстановления тоже не представлялся возможным. Онлайн-поиск решения по этой ошибке ничем не помог и привел в тупик. Единственным выводом было, что при повреждении CFE подобным образом устройство впадает в состояние кирпича. Тогда я переключился на работу с резервным девайсом, чтобы получить ответ на изначальный вопрос по интересовавшим меня аргументам. К слову говоря, установка kernp mfg_nvram_mode=1 mfg_nvram_url=BADURL была особенно интересна.

Позже я вернулся к своему кирпичу, чтобы найти способ его восстановления. В нем используется Broadcom SoC, и, как выяснилось, доступ к JTAG обеспечивается через нераспаянные контакты на плате:


После перебора контактов JTAG с помощью JTagulator мне удалось подключиться, используя OpenOCD.

$ openocd -f ../interface/jlink.cfg -f bcm49.cfgOpen On-Chip Debugger 0.11.0-rc2+dev-gba0f382-dirty (2021-02-26-14:07)Licensed under GNU GPL v2For bug reports, read    http://openocd.org/doc/doxygen/bugs.htmlDEPRECATED! use 'adapter speed' not 'adapter_khz'Info : Listening on port 6666 for tcl connectionsInfo : Listening on port 4444 for telnet connectionsInfo : J-Link V10 compiled Dec 11 2020 15:39:30Info : Hardware version: 10.10Info : VTarget = 3.323 VInfo : clock speed 1000 kHzInfo : JTAG tap: bcm490x.tap tap/device found: 0x5ba00477 (mfg: 0x23b (ARM Ltd), part: 0xba00, ver: 0x5)Info : JTAG tap: auto0.tap tap/device found: 0x4ba00477 (mfg: 0x23b (ARM Ltd), part: 0xba00, ver: 0x4)Info : JTAG tap: auto1.tap tap/device found: 0x0490617f (mfg: 0x0bf (Broadcom), part: 0x4906, ver: 0x0)Info : JTAG tap: auto2.tap tap/device found: 0x0490617f (mfg: 0x0bf (Broadcom), part: 0x4906, ver: 0x0)Info : bcm490x.a53.0: hardware has 6 breakpoints, 4 watchpoints

Другой способ восстановления системы реализуется через флеш-память, а именно микросхему Macronix NAND:


И здесь я задумался. У меня ведь есть рабочее устройство, на котором я вполне могу запустить загрузчик. А что, если при этом попробовать заменить его рабочий чип NAND на поврежденный, чтобы перепрошить?

Прежде, чем что-либо пробовать, я спросил коллегу, что он думает по поводу столь дурацкой идеи. Оптимистичных прогнозов он не дал, да и я, честно говоря, на них не особо рассчитывал. В итоге мы заключили небольшое пари по результату моего эксперимента, и я вернулся к работе.

Первым делом предстояло выяснить, переживет ли система удаление NAND в работающем состоянии? Я понимал, что для ответа на этот вопрос мне потребуется более методический подход, нежели просто обдать работающее устройство горячим воздухом и извлечь микросхему. Для начала нужно было выяснить, как NAND запитана. Судя по схеме, Vcc подключены к микросхеме в следующих местах:


Определив дорожки подключения Vcc, проще всего ответить на основной вопрос можно было отключив их от NAND при работающей системе. Чтобы это сделать, изначально я попробовал отсечь эти дорожки и добавить проводные перемычки (рекомендую 36 AWG Magnet Wire), которые можно будет разъединить после запуска загрузчика:


С правой стороны я отсек трассу питания подальше, решив, что это место будет более удачным, поскольку от него запитывается несколько контактов NAND. При установке первой перемычки трассу я отсек небольшим ножом и зачистил покрытие абразивным карандашом:


Получилось так себе, потому что карандаш оказался великоват, и в итоге я оголил чересчур большой участок. Лучше использовать остроконечный нож, чтобы не натворить бардак и получить что-то подобное:



Припаяв и соединив провода, я запустил маршрутизатор и, дождавшись старта загрузчика (CFE), с помощью команды dn (dump nand) убедился в доступности NAND, затем обесточил микросхему, разъединив провода.

CFE> dn------------------ block: 0, page: 0 ------------------00000000: 00000000 00000000 00000000 00000000    ................00000010: 00000000 00000000 00000000 00000000    ................00000020: 00000000 00000000 00000000 00000000    ................<CUT FOR LENGTH>----------- spare area for block 0, page 0 -----------00000800: ff851903 20000008 00fff645 c2b9bf55    .... ......E...U00000810: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.00000820: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.00000830: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.*** command status = 1CFE>web info: Waiting for connection on socket 1.[JCFE>web info: Waiting for connection on socket 0.[JCFE> ----       <----- VCC Removed (reboot)

После отключения питания (отмечено как Vcc removed), устройство перезагрузилось и не смогло запустить загрузчик, так как NAND была недоступна. Проблема оказалась в том, что точка отсечения питания справа отключала его подачу не только на NAND, но и на SoC. Чтобы не усложнять, я просто восстановил этот отрезок и проделал всю ту же процедуру с установкой перемычки в точке ближе к NAND:


Вернув систему в строй и повторив предыдущий тест, я получил ответ на изначальный вопрос: когда питание отключается разъединением проводов перемычки, система продолжает работать, что подтверждается командой dn:

<----- NAND VCC Removed CFE> dn------------------ block: 0, page: 2 ------------------Status wait timeout: nandsts=0x30000000 mask=0x80000000, count=2000000Error reading block 000001000: 00000000 00000000 00000000 00000000    ................<CUT FOR LENGTH>Status wait timeout: nandsts=0x30000000 mask=0x80000000, count=2000000----------- spare area for block 0, page 2 -----------00000800: 00000000 00000000 00000000 00000000    ................00000810: 00000000 00000000 00000000 00000000    ................00000820: 00000000 00000000 00000000 00000000    ................00000830: 00000000 00000000 00000000 00000000    ................Error reading block 0 *** command status = -1      <----- Expected error reading NAND CFE>CFE>CFE><----- NAND VCC Enabled CFE>CFE> dn------------------ block: 0, page: 3 ------------------00001800: 00000000 00000000 00000000 00000000    ................00001810: 00000000 00000000 00000000 00000000    ................<CUT FOR LENGTH>----------- spare area for block 0, page 3 -----------00000800: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.00000810: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.00000820: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.00000830: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.*** command status = 1      <----- Successful NAND readCFE>

После того, как я убедился в возможности отключения NAND на работающей системе без влияния на загрузчик, очередным шагом было попробовать физически извлечь отключенную NAND из платы.

Прогрев микросхему горячим воздухом, я поочередно приподнял пинцетом сначала правую, а затем левую стороны:


В результате этого процесса система перезапустилась и провалила попытку войти в загрузчик:

CFE> ----    <----- NAND Removed (reboot)BTRMV1.6CPU0L1CDMMUIMMU7DATAZBBSMAINOTP?OTPPUSBTNANDIMG?FAIL----         <----- FAIL boot loop

Так как стороны микросхемы при ее отсоединении я поднимал поочередно, посматривая при этом в консоль, то стало очевидно, что перезагрузка произошла при подъеме именно левой стороны:


Наиболее вероятной причиной было изменение состояния контактов Read Enable (RE#) или Ready/Busy (R/B#). Чтобы это проверить, я добавил к обоим перемычки:


Тут NAND пришлось установить на место, чтобы вернуть систему в загрузчик. Затем я в очередной раз отключил ее питание, разъединив ведущие на Vcc провода, а дорожкиRE# и R/B# привязал к земле (заземлил?):


Затем я снова поочередно извлек правую-левую стороны микросхемы, поглядывая в консоль загрузчика:


На этот раз он остался активен, и система в перезагрузку не ушла. Закончив очередной этап головоломки, я перешел к следующему установке поврежденной NAND в работающее устройство.

Для припаивания NAND снова использовался горячий воздух. Первая попытка оказалась безуспешной, так как некоторые контакты замкнуло при моей попытке выровнять чип по обеим сторонам. На этом этапе ввиду сбоя в очередной раз пришлось ставить обратно рабочую NAND.

Во второй попытке я уже использовал небольшой листок бумаги для изолирования одной стороны NAND на время выравнивания и закрепления другой:


После установки первой стороны бумажку я убрал и припаял вторую. Загрузчик остался активен. Следующим шагом нужно было восстановить контакты RE#, RB# удалением заземляющей перемычки, а также вновь соединить перемычку Vcc. После окончательного восстановления подключения я выполнил dn, чтобы убедиться в доступности NAND:

CFE> dn------------------ block: 0, page: 0 ------------------00000000: 00000000 00000000 00000000 00000000    ................00000010: 00000000 00000000 00000000 00000000    ................00000020: 00000000 00000000 00000000 00000000    ................<CUT FOR LENGTH>----------- spare area for block 0, page 0 -----------00000800: ff851903 20080000 00c2b822 c978ff97    .... ......".x..00000810: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.00000820: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.00000830: ffffffff ffffffff ffee9423 4ba37819    ...........#K.x.*** command status = 1   <----- Success!CFE>

Тест чтения завершился успешно, и через веб-интерфейс загрузчика я прошил микросхему заводским образом:

web info: Waiting for connection on socket 1.[Jweb info: Upload 70647828 bytes, flash image format.[J   <----- Image UploadCFE> ........Setting JFFS2 sequence number to 13Flashing root file system at address 0x06000000 (flash offset 0x06000000): <-----Image Write.................................................................... .............................................................................................................................................................................................................................................................................................................................................................................................................................................................................................Resetting board in 0 seconds...----BTRMV1.6CPU0L1CDMMUIMMU7DATAZBBSMAINOTP?OTPPUSBTNANDIMG?IMGLUHD?UHDPRLO?RLOPUBI?UBIPPASS    ----<CUT FOR LENGTH>CFE version 1.0.38-161.122 for BCM94908 (64bit,SP,LE)Build Date: Mon May 13 08:23:21 CST 2019 (defjovi@ubuntu-eva02)Copyright (C) 2000-2015 Broadcom Corporation.Boot Strap Register:  0x6fc42Chip ID: BCM4906_A0, Broadcom B53 Quad Core: 1800MHzTotal Memory: 536870912 bytes (512MB)Status wait timeout: nandsts=0x50000000 mask=0x40000000, count=0NAND ECC BCH-4, page size 0x800 bytes, spare size used 64 bytesNAND flash device: , id 0xc2da block 128KB size 262144KB<CUT FOR LENGTH>Initalizing switch low level hardware.pmc_switch_power_up: Rgmii Tx clock zone1 enable 1 zone2 enable 1.Software Resetting Switch ... Done.Waiting MAC port Rx/Tx to be enabled by hardware ...DoneDisable Switch All MAC port Rx/Tx*** Press any key to stop auto run (1 seconds) ***Auto run second count down: 0Booting from only image (address 0x06000000, flash offset 0x06000000) ...  <----- Success!!111!Decompression LZMA Image OK!Entry at 0x0000000000080000Starting program at 0x0000000000080000/memory = 0x20000000Booting Linux on physical CPU 0x0Linux version 4.1.27 (jenkins@asuswrt-build-server) (gcc version 5.3.0 (Buildroot 2016.02) ) #2 SMP PREEMPT Fri Jun 19 13:05:44 CST 2020CPU: AArch64 Processor [420f1000] revision 0Detected VIPT I-cache on CPU0


Как видно из вывода, прошивка прошла успешно, и система загрузила ОС устройства.

Уверен, некоторые читатели спросят: Почему просто не использовать для перепрошивки NAND специализированный программатор? Это абсолютно уместный вопрос, и, быть может, так даже правильнее, чем заниматься всей этой чепухой.

И все же считаю, что здесь будет уместна цитата персонажа из к/ф Парк Юрского периода, которого играл Джефф Голдблюм:

Ваши ученые настолько озабочены вопросом о том, могут ли они что-то сделать, что забывают приостановиться и подумать, а надо ли вообще это делать.


Подробнее..

Обратная сторона копирайта

22.04.2021 20:09:52 | Автор: admin

16 ноября 2012 года на сайте Республиканского исследовательского комитета (Republican Study Committee, или RSC), объединяющего более 170 членов палаты представителей США от республиканской партии, появился занимательный доклад. Документ провисел в открытом доступе не более суток его убрали под предлогом того, что он не соответствовал принятым стандартам RSC и не прошел всех согласований. Впоследствии доклад так и не вернулся на страницы сайта. О чем же говорилось в этом документе и почему его так поспешно изъяли из публичного доступа?

Таинственный доклад, с полным текстом которого по-прежнему можно ознакомиться на Scribd, представлял собой последовательную критику сложившейся системы авторского права и вскрывал основные недостатки копирайта в цифровую эпоху. Хотя авторы документа закономерно опирались на законодательство США, многие обозначенные в нем проблемы актуальны для всего мира. Кратко перечислим основные тезисы.

1. Копирайт наносит ущерб науке, задерживая ее дальнейшее развитие

Многие научные работы XX века защищены авторским правом и отсутствуют в свободном доступе. А между тем их могли бы использовать в своих изысканиях молодые ученые и совершать новые открытия, способствуя дальнейшему научно-техническому прогрессу.

2. Копирайт ограничивает доступность литературы

Технически все когда-либо созданные человечеством печатные тексты можно было бы оцифровать и выложить в открытый доступ, создав гигантскую цифровую библиотеку, в которой любой желающий смог бы отыскать нужное произведение на предпочитаемом языке. Однако появлению такого ресурса препятствует копирайт. Даже в эпоху стремительного развития цифровой дистрибуции вам все равно приходится пользоваться услугами традиционных библиотек. И хотя ряд учреждений оцифровывают доступный книжный фонд для лучшей сохранности и внутреннего использования, по закону они не имеют возможности публиковать цифровые копии литературных произведений в сети.

3. Ограничение развития различных отраслей искусства

Если бы срок защиты авторских прав был разумно ограничен, это стимулировало бы появление множества новых произведений на основе старых. Так, например, фанатское сообщество, сложившееся вокруг Звездных войн, получило бы возможность не только создавать собственный контент, развивающий популярную вселенную, но и монетизировать его, что потенциально могло бы подарить нам с вами куда более интересные и увлекательные фильмы, чем невнятная последняя трилогия.

Ограничение сроков действия копирайта пошло бы на пользу и такому направлению, как создание ремиксов. Данная проблема в большей степени актуальна для США, хотя имеет место и в ряде других стран. Согласно законодательству Соединенных Штатов Америки, диджей может свободно играть ремиксы лишь на живых выступлениях, тогда как запись альбомов для большинства независимых музыкантов является роскошью, которую они попросту не могут себе позволить, поскольку авторские выплаты правообладателям достигают 100 тысяч долларов за каждый используемый семпл.

По мнению авторов доклада, решить эти проблемы можно лишь путем радикального сокращения срока действия авторских прав, который не должен превышать 12 лет. Сейчас копирайт действует на протяжении всей жизни автора плюс в течение 70 лет после его смерти.

4. Цензура

Доступ к документам, на которые могут опираться историки и журналисты в своих исследованиях, может быть ограничен под предлогом защиты авторских прав, благодаря чему заинтересованная сторона сможет препятствовать появлению неугодных ей публикаций, имеющих историческое или общественное значение.

Книги, преданные забвению

Все перечисленные пункты достаточно очевидны и вряд ли требуют научного базиса для подтверждения, однако подобные труды существуют. Одной из самых ярких работ является исследование американского писателя, профессора Иллинойского университета Пола Хилда. В своих изысканиях он опирался на WorldCat крупнейшую в мире библиографическую базу данных, созданную Фредериком Гридли Килгуром еще в 1967 году и успешно развивающуюся и по сей день. Этот ресурс содержит свыше 240 миллионов записей практически обо всех видах произведений, когда-либо созданных на 470 языках мирах, что позволяет собрать весьма точную статистику.

Профессор Иллинойского университета, писатель Пол ХилдПрофессор Иллинойского университета, писатель Пол Хилд

Проанализировав сведения, представленные на WorldCat, ученый обнаружил интересную закономерность. По мере распространения грамотности и развития технологий в XX веке, количество ежегодно создаваемых печатных трудов значительно превысило показатели XIX века, причем это касается как художественной, так и научной литературы. Для сравнения: в 1980-х годах было издано в 8 раз больше новых книг, чем в 1880-х. С учетом такого распределения можно было бы ожидать, что в ассортименте магазинов книги, написанные в конце XX века, будут встречаться примерно в 8 раз чаще, нежели книги, впервые увидевшие свет в конце века XIX. Однако на деле распределение выглядит совершенно иначе.

Как видно из приведенного графика, шансы встретить в магазине книгу, написанную в период с 1820 по 1920 год, значительно выше, чем что-то более современное. Все дело в том, что произведения, увидевшие свет в этот временной период, уже получили статус общественного достояния и могут быть перепечатаны без дополнительных авторских отчислений или выкупа эксклюзивных прав у автора.

Продавать новые романы выгодно лишь в течение ограниченного периода времени: при наличии должной маркетинговой кампании охватить максимум целевой аудитории удается уже в первые год-два, затем же продажи существенно падают, поэтому выпуск дополнительных тиражей оказывается нецелесообразным. И хотя затраты на цифровую дистрибуцию несоизмеримо ниже по сравнению с издержками на печать бумажных книг, издателю все равно необходимо иметь лицензию на распространение соответствующего произведения, а приобретать таковую на срок более 2 лет опять же не имеет смысла, если только речь не идет о каких-то мегапопулярных тайтлах. С научными трудами все совсем печально: будучи слишком нишевыми, они и так плохо продаются, исчезая с книжных полок куда быстрее проходных дамских романов.

Из всего сказанного выше профессор делает неутешительный вывод:

Авторское право в том виде, к которому мы привыкли, способствует снижению уровня доступности книг. Существующая модель бизнеса стимулирует издателей продавать новые книги лишь в течение пары лет после релиза. Повторно книги возвращаются в магазины лишь по истечении авторских прав, притом в гораздо меньшем ассортименте.

Как видите, первые два пункта неудобного доклада о вреде копирайта имеют вполне научное обоснование. Причем проблема заключается не только в невозможности создания глобальной библиотеки, на что сетовал автор, но и в снижении доступности литературы в целом, обусловленном особенностями издательского бизнеса.

Устранение конкурентов: быстро, эффективно, законно

Справедливость же третьего тезиса можно с легкостью подтвердить многочисленными примерами из игровой индустрии. Вспомним тот же MERP (Middle-Earth Roleplaying Project) глобальную модификацию для Skyrim, разработчики которой поставили перед собой весьма амбициозную цель, пожелав не просто в точности воссоздать в виртуальном пространстве мир Средиземья, но и сделать настоящую RPG мечты во вселенной Властелина колец, где игрок мог бы примерить на себя роль Фродо Бэггинса и пройти нелегкий путь от Хоббитона до Ородруина, дабы уничтожить Кольцо Всевластия, или же оставить могущественный артефакт себе, попытавшись стать новым Властелином.

Разработка мода началась в 2008 году. Изначально небольшая команда энтузиастов взяла за основу движок Oblivion, однако после выхода следующей части Древних свитков ребята, оценив возможности обновленного Creation Kit, решили перенести свои наработки на новые рельсы. Возможно, этот проект никогда не дошел бы до релиза, разделив судьбу множества других фанатских долгостроев, застрявших на этапе вечной альфы, а может быть, однажды мы с вами действительно смогли бы поиграть в величайшую ролевую игру всех времен. Однако финал этой истории оказался куда прозаичнее: 31 августа 2012 года моддеры получили официальное письмо от юристов Warner Bros. Interactive Entertainment, в котором правообладатель потребовал прекратить дальнейшую работу над модификацией, пригрозив энтузиастам судом. Оно и понятно: на тот момент студия Monolith уже работала над Middle-earth: Shadow of Mordor, официальный анонс которой состоялся всего год спустя, и Warner Bros. не хотела конкуренции даже в виде бесплатного мода.

Похожая судьба ждала и мультиплеерный шутер Star Wars: Galaxy in Turmoil. Фанаты вселенной Звездных войн, опечаленные отменой Battlefront 3, решили создать собственный мультиплеерный шутер с нуля, взяв на вооружение игровой движок Unreal Engine 4. Разработчикам удалось довести проект до вполне играбельного состояния и даже выпустить в раннем доступе Steam, но однажды письмо счастья пришло и на их e-mail.

Electronic Arts, получившая эксклюзивные права на разработку игр по легендарной вселенной, оказалась недовольна появлением подобной игры: лишние конкуренты, особенно на фоне лутбоксового скандала, разворачивающегося вокруг нового Battlefront, который EA на старте всеми силами пыталась превратить в pay-2-win-проект, издателю были не нужны, тем более в виде абсолютно бесплатной игры.

Однако авторы Star Wars: Galaxy in Turmoil не сдались. Они полностью удалили все ассеты, так или иначе связанные с франшизой Звездных войн, переформатировав игру в научно-фантастический сетевой шутер с элементами киберпанка. Данный шаг помог уберечь проект от закрытия, но не от краха: без должного продвижения, которое было не по карману разработчикам, без громкого имени и статуса наследника того самого Battlefront, который так полюбился сообществу, игра перестала развиваться, растеряв львиную долю пользовательской базы.

Двухмерный файтинг My Little Pony: Fighting is Magic один из тех редких примеров, когда фанатская работа смогла выжить после релонча. Подобно создателям Star Wars: Galaxy in Turmoil, получив иск от Hasbro, авторы файтинга (команда из 9 человек, известная в сети под именем Mane6) полностью переработали оригинальную игру и привлекли необходимые для завершения разработки средства через краудфандинговую платформу Indiegogo, сумев добраться до полноценного релиза, который состоялся 30 апреля 2020 года. На этапе перезапуска проекта команда Mane6 нашла неожиданную поддержку в лице аниматора My Little Pony Лорен Фауст, которая помогла энтузиастам с созданием новых персонажей для файтинга в характерном визуальном стиле. Новая версия игры получила название Them's Fightin' Herds.

Впрочем, история Them's Fightin' Herds скорее исключение, чем правило. В Hasbro обратили внимание на проект слишком поздно: на момент, когда Mane6 получила официальное требование прекратить разработку, файтинг уже был достаточно известен в кругу ценителей и даже едва не вошел в перечень официальных дисциплин ежегодного киберспортивного турнира Evolution Championship Series благодаря уникальным движениям и комбо. Сложись обстоятельства иначе, игра канула бы в Лету, как и многие другие подобные проекты.

Продолжение Chrono Trigger под кодовым названием Crimson Echoes (Square Enix), ремейк Metal Gear Solid (Konami), MMO во вселенной покемонов PokeNet (Nintendo) перечислять отмененные по воле правообладателей фанатские проекты и их убийц можно бесконечно. И если мотивацию той же Nintendo еще можно понять (как ни крути, японский гигант старательно развивает принадлежащие ему франшизы), то Konami ведет себя подобно собаке на сене из поговорки, ведь во вселенных некогда знаковых Silent Hill и Metal Gear сегодня выходят лишь автоматы патинко.

Вот как выглядит официальный ремейк MGS 3 от KonamiВот как выглядит официальный ремейк MGS 3 от Konami

Но, так или иначе, все эти примеры наглядно доказывают правоту авторов упомянутого нами доклада о вреде копирайта в его нынешнем виде.

Правообладатели на страже нравственности

Четвертый же пункт претерпел в наше время весьма неожиданную трансформацию. Если авторы доклада говорили прежде всего о цензуре со стороны политических сил, стремящихся скрыть нелицеприятные факты о тех или иных событиях, то сегодня мы с вами сталкиваемся с таким явлением, как цензура корпоративная, которая зачастую оказывается куда более бессмысленной и беспощадной.

Обратимся к событиям лета 2020 года. 10 июня на фоне массовых протестов в США стриминговый сервис HBO Max снял с ротации нестареющую киноклассику Унесенные ветром. После закономерного недовольства подписчиков конгломерат WarnerMedia выпустил следующее заявление:

Унесенные ветром это продукт своего времени, изображающий в том числе некоторые из этнических и расовых предрассудков, которые, к сожалению, были распространены в американском обществе. Подобные расистские моменты были ошибочными тогда и неприемлемы сегодня. Мы считаем, что показ этого фильма без объяснения и осуждения этих моментов безответственен.

Все это противоречит ценностям WarnerMedia, поэтому, когда фильм вернется на HBO Max, он вернется с обсуждением его исторического контекста и осуждением подобных предрассудков. При этом кинолента будет представлена без изменений, ведь поступить иначе все равно что заявить, что этого никогда не существовало. Для создания более справедливого, равноправного и инклюзивного общества необходимо признать и понять собственную историю.

Вчерашняя классика может впасть в немилость по воле трендовВчерашняя классика может впасть в немилость по воле трендов

Спустя 15 дней фильм действительно вернулся в каталог HBO Max. Впрочем, иного исхода сложно было ожидать: вряд ли кто-то осмелился бы предать забвению картину, завоевавшую 8 статуэток Оскар и включенную в 1989 году в Национальный реестр фильмов США. Однако теперь перед началом фильма зрителям демонстрируется лекция профессора Чикагского университета кинематографии Жаклин Стюарт, повествующая о стереотипном изображении афроамериканцев в кино, а вторую часть картины предваряет запись круглого стола на тему Сложное наследие Унесенных ветром, состоявшегося на кинофестивале TCM в 2019 году.

А вот современным сериалам повезло куда меньше. Так, Netflix, BBC и BritBox отказались от проката скетч-шоу Маленькая Британия. Причиной этого послужило неподобающее поведение актеров, которые карикатурно изображали представителей других рас. Тот факт, что британские комики Мэтт Лукас и Дэвид Уильямс изначально стремились создать максимально неполиткорректное шоу, в котором бы высмеивались все возможные стереотипы и пороки общества (причем в первую очередь под удар попали коренные англичане), руководством стриминговых сервисов был благополучно проигнорирован. Впал в немилость даже документальный (!) сериал Полицейские, выходивший с 1989 года: телеканал Paramount Network объявил о закрытии шоу всего за 5 дней до премьеры 33-го сезона. Официальной причиной для этого послужило унижающее человеческое достоинство изображение афроамериканцев.

Если в нулевых над скетчами Лукаса и Уильямса смеялся весь мир, то сегодня их шоу считается аморальнымЕсли в нулевых над скетчами Лукаса и Уильямса смеялся весь мир, то сегодня их шоу считается аморальным

Не остался в стороне и Дисней, хотя медиагиганту и понадобилось для раскачки больше времени. В соответствии с новой политикой инклюзивности компания ввела ограничения на доступ к ряду классических полнометражных мультфильмов в стриминговом сервисе Disney+, которые долгие годы оставались визитной карточкой компании. Такие анимационные ленты, как Питер Пен, Думбо, Книга джунглей, Коты-аристократы, и ряд других произведений перестали отображаться в детских профилях, а их описания были дополнены предупреждениями о содержащихся в мультфильмах расовых и культурных стереотипах, существовавших во время создания произведений.

Целесообразность подобного поступка вызывает вопросы. Если вы еще не прочли манифест Диснея, то попробуйте навскидку вспомнить, что такого криминального было в перечисленных мультфильмах. Вряд ли, будучи ребенком, вы задумывались о том, что вороны из Думбо являются прообразом уличных комиков, высмеивающих африканцев в характерном гриме (так называемый блэкфейс), а имя их главаря и вовсе отсылка к Законам Джима Кроу времен расовой сегрегации в США. Это весьма тонкий момент, на который могут обратить внимание лишь взрослые, хорошо знающие историю.

Да и для того, чтобы отыскать расистский подтекст в песенке Короля Луи, блестяще исполненной джазовым музыкантом Луи Прима, надо очень постараться. Во всяком случае, на формирование мировоззрения ребенка это произведение уж точно никак не повлияет (ну разве что привьет вкус к хорошей музыке).

Впрочем, повышение возрастного рейтинга весьма мягкая мера, ведь Дисней уже не раз демонстрировал, на что способен в борьбе за нравственные устои общества. Достаточно вспомнить хотя бы релиз фильма Всплеск, в котором все сцены с обнаженной Дэрил Ханна, даже самые невинные, на которых и так не разглядеть каких-либо подробностей, были любовно зацензурены с помощью компьютерной графики (к слову, довольно низкого качества).

А еще раньше Диснея уличили в удалении целого эпизода из культового мультсериала Симпсоны, один из персонажей которого, Леон Камповски, считал себя Майклом Джексоном и разговаривал его голосом, однако совершенно не умел петь. Так что в случае с классическими мультфильмами все еще обошлось малой кровью.

Поиск глубинных причин подобных действий со стороны правообладателей не является целью сегодняшнего материала, тем более что все и так достаточно очевидно. С одной стороны, громкие заявления и демонстративные поступки способствуют расширению рынка сбыта за счет повышения лояльности потенциальных клиентов, придерживающихся определенных политических и социальных взглядов. В то же время отказ от спорного контента позволяет компаниям избегать судебных исков от представителей тех или иных сообществ, о чем, в частности, напрямую заявляла Sony.

Напомним, что еще в апреле 2019 года компания объявила об ужесточении контроля за контентом эротического характера в играх, выходящих на платформе PlayStation. В интервью The Wall Street Journal официальные представители Sony четко обозначили причины данного поступка:

Мы обеспокоены тем, что можем стать целью судебного преследования, социальных акций, а также понести репутационные потери, которые негативно отразятся на деятельности компании в будущем.

В своем стремлении угодить вокальному меньшинству Sony пустилась во все тяжкие, начав с цензуры обложек для дисковых изданий и дойдя в конечном счете до вырезания пикантных моментов даже из игр с рейтингом 18+.

Слева версия обложки для семейной консоли Nintendo Switch, справа для взрослой PlayStation 4Слева версия обложки для семейной консоли Nintendo Switch, справа для взрослой PlayStation 4

Новый регламент ударил по небольшим студиям. Все дело в том, что на первых порах у Sony вообще не было строгих критериев или письменного свода правил: ужесточение требований в отношении взрослого контента в играх вступило в силу неожиданно для всех, вскоре после череды скандалов, связанных с движением MeToo (судя по всему, именно они и послужили основной причиной столь скоропалительного пересмотра внутренней политики). И если крупные издатели вроде Capcom могли позволить себе выпускать специальные версии игр для консолей PlayStation, то у инди-разработчиков начались серьезные проблемы.

В Devil May Cry 5 мотоцикл Данте обзавелся мощными ксеноновыми фарами, призванными скрыть прелести ТришВ Devil May Cry 5 мотоцикл Данте обзавелся мощными ксеноновыми фарами, призванными скрыть прелести Триш

Трудности заключаются в том, что мы понятия не имеем, что нам скажут, до того как завершим работу над игрой и отправим ее на рассмотрение. Даже если еще несколько дней назад такой контент считался допустимым, это не значит, что завтра игру не отправят на доработку. Внесение корректив в готовый проект обходится очень дорого, к тому же мы терпим убытки из-за переноса релиза.

Здесь обозначена вторая по важности (после самого факта корпоративной цензуры) проблема постоянно меняющиеся правила игры. Те же Унесенные ветром снимались во времена действия Кодекса Американской ассоциации кинокомпаний, более известного как Кодекс Хейса (назван по имени Уильяма Харрисона Хейса, возглавлявшего ассоциацию в период с 1922 по 1945 год). Данный свод правил включал в себя 11 пунктов, соблюдение которых было обязательным, и еще 25 носящих рекомендательный характер. Хотя в этом перечне было немало странных (даже по тогдашним меркам) требований, если кинокартина им соответствовала, ее выпускали в прокат без каких-либо ограничений.

Уильям Харрисон Хейс главный борец за нравственность в Голливуде начала XX векаУильям Харрисон Хейс главный борец за нравственность в Голливуде начала XX века

Сегодня ситуация в корне отличается. Мы с вами точно не знаем, что может произойти в следующий момент, какие тренды станут актуальными, какие политические или культурные веяния зародятся завтра. Для независимых создателей контента, будь то игровые инди-студии, небольшие музыкальные коллективы или авторы независимого кино, это может оказаться фатальным: проект, на реализацию которого ушли годы, способен в одночасье превратиться в токсичный актив, с которым не захочет иметь дело ни один издатель, звукозаписывающий лейбл или стриминговый сервис. В таких условиях смогут выживать лишь максимально беззубые творения, стремящиеся угодить всем и, как правило, не имеющие ничего общего с понятием искусство.

Для нас же с вами как потребителей контента последствия будут также весьма печальными: в эпоху цифровой дистрибуции правообладатель способен отменить или искалечить любое неправильное произведение, вырезав неудобные моменты, и никто ничего не сможет с этим поделать. Увы, главным девизом современного бизнеса стала любимая фраза Беликова Как бы чего не вышло. В рамках превентивного damage-control правообладатели предпочитают заблаговременно избавляться от всего, что потенциально может принести репутационные и/или финансовые потери, а когда речь заходит о миллионах и даже миллиардах долларов, интересы конечного потребителя уже мало кого волнуют.

Мой магазин мои правила: ноу-хау от Ubisoft

Впрочем, помимо исчезновения тех или иных произведений из сервисов цифровой дистрибуции в силу истечения сроков действия прав на их распространение или в угоду современным трендам, существует и еще одна серьезная проблема, для обозначения которой лучше всего подойдет такой эпитет, как произвол издателя.

Ранее мы уже обращались к теме копирайта в цифровую эпоху применительно к онлайн-магазинам компьютерных игр, однако прошлая публикация была встречена читателями неоднозначно: кто-то решил, что мы критикуем конкретно Steam (хотя на самом деле мы критиковали сложившуюся модель дистрибуции в целом, при которой издатель может сделать с приобретенной вами игрой все, что посчитает нужным, в том числе изменить до неузнаваемости и даже отобрать), а кто-то не воспринял высказанные опасения всерьез. Но Ubisoft расставила все точки над i, убедительно доказав, что мы были правы, хотя компания и превзошла все наши самые смелые ожидания.

Еще 12 мая 2020 года издатель изменил текст пользовательского соглашения, в котором появился весьма интересный пункт 8.2, касающийся условий прекращения действия учетной записи, необходимой для использования сервисов Ubisoft. Согласно ему, компания может закрыть ваш аккаунт в том случае, если он был неактивен более 6 месяцев. Разумеется, ни о какой компенсации денежных средств, потраченных на игры, речи не идет, о чем прямо сказано в пункте 8.3.

Обновленное EULA вызвало жаркие споры, причем у французского издателя нашлось и немало защитников, утверждавших, что речь идет о профилях, заблокированных после взлома или выявления факта использования читов, и что, вообще, все эти соглашения пишутся так, чтобы в случае чего прикрыть издателя в юридическом поле, а на самом деле никто ничего удалять, конечно же, не будет.

Однако все оказалось куда прозаичнее: пункт 8.2 не имеет скрытых трактовок, и понимать все, что в нем изложено, следует буквально, в чем ряд пользователей уже смогли убедиться самолично, получив спустя полгода вот такие замечательные письма счастья.

С точки зрения бизнеса обосновать данный шаг легко. Лояльной аудитории Ubisoft, которая покупает и играет в игры издателя на постоянной основе, бояться нечего: они и так будут регулярно авторизовываться в сервисе и никогда не получат подобный email. В то же время это неплохой способ стимулировать к покупке тех, кто заходит в Uplay лишь время от времени (например, чтобы поиграть в Реймана или перепройти старых Принцев Персии), делать это чаще: возможно, в очередной раз запустив лаунчер, такой пользователь польстится на скидку и прикупит что-нибудь новенькое, а там, глядишь, распробует новых Ассасинов и станет приобретать по игре каждый год (а может быть, и во внутриигровой магазин занесет немного наличности).

Прозорливые читатели могут возразить: никакое соглашение, будь то публичная оферта или подписанный собственноручно бумажный договор, не могут противоречить действующему законодательству, а значит, EULA Ubisoft не имеет силы в подавляющем большинстве стран, так как идет вразрез с законом о защите прав потребителей. И это действительно так, но, чтобы вернуть заблокированный аккаунт или получить компенсацию, вам придется подать иск против весьма крупного и богатого издателя.

А теперь ответьте для себя на следующие вопросы. Попав в подобную ситуацию, вы пойдете в суд? Решив судиться, сможете ли вы найти единомышленников для подачи коллективного иска? Есть ли у вас на примете кто-либо из влиятельных персон (представитель законодательной власти или известная медийная личность), кто был бы заинтересован в подобном процессе (например, ради пиара или из идейных соображений) и взялся бы участвовать в таком разбирательстве, оказывая посильную помощь?

Современные реалии таковы, что, будь вы хоть сто раз правы, выиграть у корпорации с огромной армией профессиональных юристов процесс в одиночку, не обладая достаточными финансовыми возможностями, без поддержки сильных мира сего, вы никак не сможете. И далеко не факт, что, когда лично у вас отберут аккаунт с играми, фильмами, книгами или другим цифровым контентом, обстоятельства сложатся в вашу пользу. Не говоря уже о том, что такое противостояние может затянуться на много лет, в течение которых вы все еще не сможете пользоваться своей учетной записью и привязанным к ней контентом.

Если снять розовые очки, то в современных реалиях вы должны четко осознавать, что прибегая к услугам площадок вроде UPlay вы не покупаете цифровой контент, а берете его в аренду на условиях, навязанных издателем, и можете в любой момент лишиться всей вашей коллекции без возможности восстановления или возврата средств. Это объективное положение вещей. Все, что вам нужно, решить лично для себя, как вы относитесь к потребляемому продукту в целом. Если вы не имеете привычки возвращаться к ранее пройденным играм, просмотренным фильмам или прочитанным книгам и четко осознаете, что деньги, которые вы отдаете платформам цифровой дистрибуции, это плата за сервис, а не за игру, фильм или музыкальный альбом как сущность, то по гамбургскому счету вам не о чем волноваться.

В противном же случае вы должны понимать, что ваша коллекция игр, музыки, фильмов, книг это не более чем таблица в базе данных, которая вам не принадлежит и однажды может быть стерта или отредактирована по воле правообладателя. Единственный, кто способен гарантировать вам доступ к контенту, вы сами. Как же это сделать?

Спасение утопающих

Для начала стоит вспомнить о возможности приобретения контента на физических носителях. Хотя сегодня на золото уходит отнюдь не каждый фильм, музыкальный альбом или игра, это не значит, что их вообще перестали выпускать: оптические диски, винил и даже картриджи для консолей прошлых лет все еще можно отыскать на полках магазинов или на том же Ebay, если речь идет о каких-то раритетных изданиях.

Старый добрый винил в наше время становится как никогда актуаленСтарый добрый винил в наше время становится как никогда актуален

Помимо этого, вы можете использовать сервисы, которые позволяют приобрести цифровую копию того или иного произведения и пользоваться ею без онлайн-активации или привязки к аккаунту. Пусть подобных площадок не так много, но они существуют и зачастую способны по-настоящему удивить. Взять, к примеру, тот же Bandcamp: здесь представлены сотни уникальных в своей самобытности коллективов, которых не найти на Deezer и Spotify, к тому же, в отличие от популярных стриминговых сервисов, здесь вы можете скачать любые приобретенные композиции и альбомы в lossless-качестве.

Наконец, не стоит забывать о проектах вроде Public Domain Torrents, Legit Torrents и аналогичных. Названия этих площадок говорят сами за себя: здесь энтузиасты выкладывают фильмы, музыку, игры, имущественные авторские права на которые истекли или вообще никогда не существовали, то есть произведения, находящиеся в статусе общественного достояния. Копирование и распространение таких материалов является полностью легальным, так что, пользуясь услугами подобных площадок, вы не нарушаете действующее законодательство.

Сохранить же резервные копии полученного тем или иным способом цифрового контента вам поможет надежное сетевое хранилище и накопители Western Digital. На Хабре уже неоднократно выходили публикации, посвященные самостоятельной сборке NAS, так что вы сможете без труда отыскать не один десяток готовых рецептов. Что же касается накопителей для реализации подобного проекта, то лучшим выбором были и остаются жесткие диски WD Red Plus.

Данная линейка включает в себя девять моделей емкостью от 2 до 14 терабайт, предназначенных для эксплуатации в составе сетевых устройств хранения данных и вобравших в себя последние технологические достижения Western Digital. Ниже мы во всех подробностях рассмотрим каждую из используемых технологий, чтобы вы, уважаемые читатели, смогли по достоинству оценить предлагаемые нами решения.

  • Высокая надежность

Одна из особенностей жестких дисков WD Red Plus заключается в том, что парковка блока головок дисков осуществляется только при обесточивании NAS, поскольку параметр APM (Advanced Power Management) по умолчанию имеет значение 0. Параметр spindown (standby) timer также принимает нулевое значение: полная остановка мотора происходит лишь при отключении питания. Это позволяет, во-первых, сократить время отклика накопителя, а во-вторых, дополнительно продлить срок службы электродвигателя. И это при том, что привод блока головок может похвастаться ресурсом в 600 тысяч циклов парковки, что вдвое больше, чем у обычных винчестеров.

  • Платформа HelioSeal четвертого поколения

Жесткие диски WD Red Plus и WD Red Pro емкостью 8 терабайт и более созданы на базе платформы HelioSeal версии 4.0. Их корпуса абсолютно герметичны и заполнены инертным газом гелием, плотность которого практически в семь раз меньше плотности воздуха. Низкое сопротивление газовой среды дало возможность использовать более тонкие магнитные пластины, что позволило увеличить их количество, а снижение силы трения способствовало сокращению энергозатрат на раскрутку шпинделя. В свою очередь, уменьшение турбулентности помогло повысить точность позиционирования магнитных головок, благодаря чему удалось уменьшить зазор между ними и поверхностью блинов, а также сократить площадь треков, расположив их более компактно.

Как следствие, гелиевые накопители оказываются не только вместительнее, но и практически на 50% экономичнее и на 45C холоднее воздушных аналогов, что делает такие устройства идеальным решением для эксплуатации в составе сетевых хранилищ, работающих в режиме 24/7, а также ультракомпактных устройств серии My Cloud, потенциал системы охлаждения которых ограничен вследствие малых размеров корпуса.

  • Защита от вибрации

При вращении на каждую магнитную пластину действуют дисбалансирующие силы, причем одновременно в двух плоскостях: горизонтальной (блины смещаются в плоскости сечения оси шпинделя) и вертикальной (вектор приложен перпендикулярно, блок пластин как бы колеблется вверх-вниз). Чтобы нивелировать перечисленные эффекты, в заводских условиях проводится тщательная балансировка каждого устройства, в ходе которой подбирается оптимальная длина фиксирующих винтов. Помимо этого, мы используем систему демпферов и амортизаторов, которые эффективно гасят возникающую вибрацию. Данный комплекс мер получил название 3D Active Balance Plus.

Дополнительную надежность механизму придает технология StableTrac, предусматривающая двухстороннюю фиксацию вала электропривода.

Все это позволяет стабилизировать магнитные пластины, что также оказывает положительное влияние на точность позиционирования пишущих головок во время операций ввода/вывода.

  • Прошивка NASware 3.0

Фирменная микропрограмма Western Digital гарантирует совместимость накопителей с широким спектром материнских плат и дисковых контроллеров, что полностью исключает возникновение конфликтов между комплектующими на аппаратном уровне. Поддержка набора команд ATA Streaming Feature Set обеспечивает возможность параллельного выполнения операций чтения/записи за счет оптимизации использование кэш-памяти диска, благодаря чему вы сможете использовать NAS в качестве мультимедийного сервера, транслируя потоковое видео одновременно на несколько устройств и не опасаясь падения производительности системы хранения.

В свою очередь, поддержка технологии TLER (Time Limited Error Recovery) помогает дополнительно обезопасить вашу цифровую коллекцию за счет наличия обратной связи между накопителем и RAID-контроллером. Все дело в том, что даже при штатной работе жесткого диска неизбежно возникают ошибки считывания, обусловленные нестабильностью сектора или сбоем во время записи. В подобных случаях HDD действует согласно следующему алгоритму:

  • происходит повторная попытка записи в тот же сектор с последующим контрольным чтением;

  • если уровень сигнала по-прежнему остается низким, контроллер расценивает это как однозначный признак износа магнитного покрытия;

  • данные переносятся в другой сектор, а дефектный соответствующим образом помечается в дальнейшем при перезаписи он будет игнорироваться.

Схема отлично работает, когда речь идет об одиночных винчестерах, однако, если накопители объединены в массив, в дело вступает RAID-контроллер, который должен отслеживать состояние каждого устройства. Проблема в том, что во время коррекции ошибок диск не реагирует на отправляемые команды, и, если период латентности превышает 7 секунд (по умолчанию), диск исключается из массива, так как контроллер воспринимает такое молчание как признак отказа оборудования.

TLER решает данную проблему следующим образом. При выявлении ошибки инициируется стандартный алгоритм коррекции, однако, если уложиться в положенное время не удается, диск отправляет сигнал RAID-контроллеру. Последний фиксирует сообщение в журнале, откладывая процедуру исправления до более удачного момента (например, до простоя системы), что позволяет не только полностью исключить вероятность произвольного распада массива, но и дополнительно снизить нагрузку на систему хранения.

Все перечисленное делает жесткие диски семейства WD Red Plus практически идеальным решением для построения высокоемкого производительного NAS, который поможет сохранить ваши любимые фильмы, музыку, компьютерные игры, записи любимых шоу и другой цифровой контент и оградить вашу коллекцию от вероломных действий со стороны правообладателей.

Подробнее..

Восстановление погибших дискет с осциллографом

22.05.2021 10:07:56 | Автор: admin

Greaseweazle F7 Plus

Есть много хороших современных решений для чтения данных со старых дискет и жёстких дисков. Пожалуй, одно из лучших Greaseweazle: очень функциональная система с открытым железом, исходным кодом, недорогая. На форумах вам с радостью помогут дружелюбные фанаты. Плата подключается напрямую к дисководу, заменяя собой флоппи-контроллер и считывает данные в малейших деталях. Работает на дискетах с любой защитой от чтения.

Но что делать, если Greaseweazle не может прочитать биты на магнитной поверхности и сообщает о повреждённых данных? Что, если на дискете материал исторической важности, исходный код в единственном экземпляре или культовая игра? Неужели всё потеряно?

Совсем нет. Известный хакер Крис Эванс с инженером Филом Пембертоном протестировали новый способ восстановления данных с флоппи-дискет, используя осциллограф. В частности, они вернули к жизни игру Ферма старого Макдональда для BBC Micro.

В 1980-е годы руководства пользователя и руководства для обслуживания для компьютерных накопителей были гораздо информативнее, чем сейчас. Например, вот страничка из технического мануала для TEC FB-50x:



На страничке приводится пошаговая цепочка электронных преобразований от магнитной считывающей головки до считываемых данных. Как видим, биты 0 и 1 это попытка угадать верное решение по совершенно хаотическим аналоговым всплескам напряжения на головке.

Концептуально алгоритм считывания довольно простой. Однако инженеры прошлого всё же придумали несколько схем кодирования (и раскодирования) сигнала: MFM(использовались в PC, Amiga, BBC Micro ADFS) и GCR (использовались в Apple II и Commodore 64). Дискеты BBC Micro DFS работали по самой простой схеме FM. В ней дисковод вообще не отягощал себя какой-то схемой кодирования, а просто выдавал импульсы по счётчику (таймеру).

Данные:  0 0 1 0 1 1 0 1 0 0 0 1 1 0Код:    1010111011111011101010111110Таймер: 1 1 1 1 1 1 1 1 1 1 1 1 1 1

Восстановление исходного кода


Крис Эвансом с Филом Пембертоном смогли восстановить исходный код культовой игры Repton 3, игру Ферма старого Макдональда (Old Macdonald's Farm) а также ещё несколько ценных файлов для компьютера BBC Micro.

Они получили дискеты от нескольких хранителей исторических ценностей, но все они были повреждены временем. Greaseweazle выдавал ошибки CRC:


Скрин из эмулятора HxC Floppy Drive Emulator

Чёрные горизонтальные полосы это тайминги между импульсами с дискеты. Чем они тоньше, тем более чёткий сигнал. Здесь видим, что качество отличное, то есть дегенерация дискеты ещё не дошла до такой стадии, когда всё сливается в кашу. Тут просто проблема с единственным участком. Что там может быть?


А вот и проблема

Визуальная инспекция показала, что кто-то неудачно помял дискету.

Инженеры аккуратно выровняли магнитную поверхность. К сожалению, это не помогло улучшить сигнал. Специалисты высказывают предположения, что дискеты была записана уже после формирования вмятины



Ничего не оставалось, как применить научное оборудование, которое Крис Эванс использует в своих цифровых расследованиях. На фотографии любительский осциллограф Siglent SDS 1104X-E, подключённый к плате Greaseweazle. Она считывает данные с дисковода TEC FB-50x, в котором крутится дискета с исходным кодом Repton3.



Тут Greaseweazle только для управления, но не для анализа. Он просто включает движок дисковода, а считывание данных происходит напрямую на осциллограф по проводам, подключённым к дисководу на тестовые точки TP3 и TP4, как указано в техническом мануале (см. скан страницы в начале статьи).

Производительности этого осциллографа начального уровня достаточно, чтобы загрузить целую дорожку с дискеты (время считывания 200мс) во внутреннюю память на частоте 25Мсэмплов/с. Чувствительности 500uV/div хватает, чтобы различить пики в записи. Пара пиков по 4 микросекунды обычно соответствует "1", а пик на 8 микросекунд это "0".

Конечно, без проблем не обошлось. Оказалось, что разные дисководы выдают разный аналоговый сигнал: например, у Mitsubishi сигнал более чистый, у TEAC присутствует странный высокочастотный шум. А лучше всех проявил себя дисковод TEC FB-502, хотя он был старше Mitsubishi и остальных.


ASCII-символ "1" (00110001), первый символ в названии диска (1187V1.0)

Чтобы усилить магнитный сигнал с дискеты, Фил поставил резистор для управления скоростью вращения, и дискеты разгоняли со стандартной скорости 300 RPM до 400 FPM. Естественно, прочитать данные становилось легче законы физики!

Звук записи на дискету 5,25", замедленный примерно в 100 раз (20 секунд вместо реальных 0,2секунды)

Но вернёмся к осциллографу. Получив аналоговый сигнал с дисковода, хотелось бы применить какой-то алгоритм для автоматической расшифровки этого сигнала. Инженеры решили попробовать такой вариант: найти начало сектора, и непрерывно отсчитывать от него по 8 микросекунд аналогового потока. Если напряжение растёт или снижается на протяжении всего участка, это "0". Если напряжение изменяется сначала в одном направлении, а потом в другом, то это "1". Затем повторная синхронизация к ближайшему пику.



Несмотря на хаотичные волновые формы, алгоритм восстановил все биты в потерянном секторе с той дискеты:



В самых трудных случаях форму сигнала с осциллографа исправляли вручную в редакторе FloppyControlApp. Немного похоже на то, как ретушируют (восстанавливают) старые фотографии:



Этот инновационный метод позволил получить исходный код, который безуспешно пытались восстановить разными методами несколько лет! С помощью осциллографа прочитано 100% кода со всех дискет! В том числе игра Ферма старого Макдональда. Это безусловная удача для цифровых археологов.

Всех владельцев уникальных, ценных и редких дискет просят ни в коем случае не запускать их на случайных непроверенных дисководах, потому что это может повредить магнитную поверхность.

Крис Эванс и Фил Пембертон очень рады, что нашли способ восстанавливать данные с дискет, которые невозможно прочитать никаким другим способом. Они рады помочь коллекционерам в восстановлении информации с редких носителей.

В общем, Крис с Филом ждут ваших дискет! И старый Макдональд тоже :)





Облачные VDS от Маклауд быстрые и безопасные.

Зарегистрируйтесь по ссылке выше или кликнув на баннер и получите 10% скидку на первый месяц аренды сервера любой конфигурации!

Подробнее..

Chia Coin, или сказка о том, как Флешки выжили в войне криптовалют

07.06.2021 12:06:42 | Автор: admin
Привет, Хабр! USB-флешки единственные, кто не пострадал в спекуляциях на тему цен вокруг носителей информации. Благодаря монете Chia спрос на носители HDD, SSD взлетел за месяц до невиданных высот. С полок магазинов пропали HDD емкостью выше 1-2 ТБ, SSD емкостью более 0,5 ТБ, но потребности в переносе данных еще остались.



Будем откровенны, ажиотаж вокруг видеокарт и жестких дисков фактически парализовал IT сектор. Не хватает нам только монет, добываемых на CPU, и о компьютерах можно будет только мечтать, рассматривая буклеты интернет-магазинов.

Что же делать интеграторам, системным администраторам, пользователям и обслуживающему персоналу дата центров? Вместо внешних HDD им придется переключиться на другие носители, и здесь наступает очередь емких флешек, которые хоть как-то компенсируют нехватку и дороговизну носителей и позволят выполнять работу.



В этот ответственный момент компания Kingston выпустила на рынок две привлекательные модели USB Flash: DataTraveler Kyson и DataTraveler Exodia. Благодаря отсутствию ажиотажного спроса на данный тип носителей модели располагает большой емкостью для перемещения данных, распространенным разъемом USB и приличными скоростями. К тому же цена на них вполне демократичная, точнее 1/25 от мейнстрим видеокарт GTX 3060 Ti.

DataTraveler Exodia



Самобытное устройство, выпускаемое в четырех емкостях и четырех цветах. Оснащена пластиковым колпачком и не имеет ни единого светодиода.



Очень легкая (11 г) благодаря пластиковому корпусу. Разъем подключения USB Type A, поддерживаемый протокол USB 3.2 Gen 1. Доступна в размере 32, 64, 128 и 256 ГБ. Стиль и исполнение флешки напоминают старую школу просто и со вкусом, без лишней иллюминации и с возможностью привязать устройство к шнурку или связке ключей. Стоит помнить, что колпачок хоть и фиксируется плотно, да и к тому же легкий, но в кармане может слететь. Следите за ним внимательно.



Из коробки DataTraveler Exodia 256G отформатирована в системе FAT32 и доступный для пользователя размер составляет 230 ГБ в системе исчисления Windows 10.

DataTraveler Kyson



Полная противоположность выше рассмотренной флешке, т.к. выполнена в современном и стильном дизайне: лишена колпачка, металлический корпус, минималистичный вид. В отличие от Exodia производитель гарантирует высокую скорость чтения (до 200 МБ/сек) и приличную скорость записи (до 60 МБ/сек). Цветовых вариаций нет, зато можно выбрать из четырех размеров: 32, 64, 128 и 256 ГБ.



Компактные размеры и смешной вес (39x12,6x4,9 мм, 4 г) не будут оттягивать карман хозяина. Крупное кольцо позволяет привязать флешку буквально к любому предмету. По спецификации флешка совместима с разъемом USB Type A и протоколом USB 3.2 Gen 1.



В заводском исполнении предварительно отформатирована в FAT32, доступный для пользователя системы Windows 10 объем составляет ровно 230 ГБ.

Новые горизонты





Раз речь зашла о недоступности устройств хранения и переноса информации из-за тотального шествия новой криптовалюты, то не стоит думать, что флешки больше ни на что не сгодятся. Более тонкий тех. процесс производства памяти сделал из них почти полную замену внешним жестким дискам и SATA SSD с оговоркой на ресурс и скорость. Естественно, ни в какое сравнение не идет и разница в стоимости устройств. На столь емких флешках будет удобно брать с собой различную информацию больших (в рамках типичного пользователя ПК) размеров будь то фильмы, дистрибутивы, фотографии и многое другое. На 256 ГБ действительно влезет пару десяткой рипов фильмов или несколько сезонов популярного сериала, а посмотреть их можно будет, просто воткнув флешку в телевизор или приставку. Благо TV 2017 и более поздних годов выпуска оснащаются как раз USB Type A разъемами.

По ряду профессий емкие флешки с высокой скоростью чтения удобны для системных администраторов: храня и разворачивая образы различных систем, начиная от ESXi и заканчивая Windows Server 2019. В конце концов 256 ГБ позволяют переносить на сервера образы готовых систем заранее оптимизированные и сконфигурированные в VMware Workstation Pro путем конвертирования их в программе VMware Converter.



Особенно остро вопрос стоит о конфиденциальности информации. Бывают моменты, когда некий большой объем данных попросту не должен попадать в on-line, и тогда самым распространенным способом переноса остаются как раз флешки из-за их дешевизны и мобильности, т.к. внешние жесткие диски изредка нуждаются даже в электрической розетке.

Благодаря доступному объему можно легко отказаться от принятия решений, что хранить на флешке и ничем не жертвовать из-за нехватки места.

Методика тестирования


Так как флешки в первую очередь предназначены для ПК и ноутбуков, то процесс измерения производительности будет проведен на ПК с интерфейсом USB 3.2 Gen 2 и скоростью 10 Гбит/с.

Типичный сценарий использования USB Flash это более 80% времени работы тратится на чтение данных. Запись обычно происходит реже, либо записываются сжатые архивы/образы. В повседневном использовании флешки должны отрабатывать различные не серверные задачи и тем более нет смысла использовать потребительские USB Flash в качестве места долгого хранения, или считать их местом для создания бекапов. Поэтому в списке приложений мы отдаем предпочтение распространенным программам для тестирования. Это AS SSD Benchmark, CrystalDiskMark, HD Tune Pro 5.75, PCMark 10 Storage, H2Test и другие. В качестве бонуса проведем тесты записи и чтения папки с образами, фото и фильмами, имитируя типичную работу пользователя с устройствами.

Используемая конфигурация ПК:
Maximus XI Hero (Wi-Fi), процессор Intel Core i7 9900K, встроенная видеокарта Intel, 64-Гб памяти DDR4-3200 и операционная система Windows 10 x64. Для проверки совместимости флешки подключались к raspberry, ноутбукам с чипсетами Intel, AMD, а также NAS накопителю.

Результаты тестирования



AS SSD Benchmark


Copy Benchmark оценивает скорость работы и затраченного на это времени при копировании разных групп файлов (ISO образ, папка с программами, папка с играми).

DataTraveler Exodia



DataTraveler Kyson



CrystalDiskMark


Тестирование проводилось с 5 повторениями, каждый объемом 16 ГБ и 1 ГБ.
Последовательное чтение/запись с глубиной 8.
Последовательное чтение/запись с глубиной 1.
Случайное чтение/запись блоками по 4 кб с глубиной 32 и 16 потоков.
Случайное чтение/запись блоками по 4 кб с глубиной 1.

DataTraveler Exodia



DataTraveler Kyson



HD Tune Pro 5.75


Линейная скорость чтения и записи блоками 512 Кбайт.
Время доступа.
Расширенные тесты чтения и записи.

DataTraveler Exodia



DataTraveler Kyson



PCMark 10 Storage


Quick System Drive Benchmark: короткий тест, эмулирующий легкую нагрузку на систему хранения. Используются наборы тестов, повторяющие реальные действия системы и программ с накопителем;
Data Drive Benchmark: повторяет нагрузку на систему хранения в виде наборов тестов для NAS, (хранение и использование файлов различного типа).

DataTraveler Exodia



DataTraveler Kyson



H2Test


Позволяет оценить среднюю скорость чтения и записи на диск, выдавая информацию в Мбайт/сек.

DataTraveler Exodia



DataTraveler Kyson



USB Flash Benchmark


Простой тест, оценивающий производительность накопителя с различными блоками. Позволяет увидеть реальную скорость связки контроллера и памяти.

DataTraveler Exodia



DataTraveler Kyson



Натуральный тест


И последний, натуральный тест на копирование образа Windows 10 x64.iso плюс папка с распакованным образом Windows 10, а также Windows Server 2019 x64 iso и папка с распакованным образом Windows Server 2019. Добавляем сюда 5 крупных фрагментов сериала и 77 RAW фотографий. По папкам:
Фильмы 29,1 ГБ (5 крупных фрагментов);
ISO 17,6 ГБ (смешанные файлы большого, среднего и маленького размера);
Фото 5,4 ГБ (77 RAW фотографий);


Запись фильмов, ISO, фото размером 53453 МБ за 1339 сек или 40 МБ/сек


Чтение фильмов, ISO, фото размером 53453 МБ за 447 сек или 120 МБ/сек

DataTraveler Kyson


Запись фильмов, ISO, фото размером 53453 МБ за 1236 сек или 43,2 МБ/сек


Чтение фильмов, ISO, фото размером 53453 МБ за 214 сек или 250 МБ/сек

Выводы


Kingston DataTraveler Kyson



Серия Kyson это универсальные и доступные флеш-карты для любых видов файлов. Они прекрасно работают с мелкими, средними и крупными файлами. Сильной стороной Kyson стала именно универсальность использования в любых видах перемещения данных. Заявленная скорость чтения даже превысила паспортные характеристики и достигает половины производительности хорошего SATA SSD, ведь в тестах на чтение флешка показала от 250 до 270 МБ/сек. Если обратить взгляд на запись, то кажется будто 40 с хвостиком МБ/сек не такая и большая цифра. Но Kingston DataTraveler Kyson не пасует перед мелкоблочными данными, развивая гарантированную скорость более 44 МБ/сек. Еще одним достоинством стал температурный режим и стабильность работы. После часовых тестов флешка не нагревается выше 40С и не впадает в анабиоз. Ее совместимость с различными контроллерами (Intel, AMD, VLI, ASM) подтвердилась на практике. Одним словом, если вам нужна универсальная и скоростная флешка для чтения и постоянная скорость на запись с любыми видами данных, то Kyson отлично подходит на эту роль.

Kingston DataTraveler Exodia



Бюджетно не значит плохо! Kingston DataTraveler Exodia относится к Entry Level флеш-устройству. У нее нет индикации, а корпус пластиковый. Большая емкость, легкий вес, защитный колпачок и доступная цена вот ее основные достоинства. Наилучшей стороной Exodia стали тесты с копированием и записью файлов размером больше 512 Кб. Все, что больше это ее родная стихия. На мелкоблочных операциях чтения и записи скорость падает, но как только вы решите записать большие файлы, то результат под 60 МБ/сек на запись вас впечатлит в разрезе стоимости малышки. Фактический результат с учетом особенностей: до 125 МБ/сек чтения и до 60 МБ/сек на запись.

Дополнительную информацию о новинках DataTraveler Kyson и DataTraveler Exodia ищите на официальном сайте Kingston.



Для получения дополнительной информации о продуктах Kingston Technology обращайтесь на официальный сайт компании.
Подробнее..

Вспомнить всё. Разбираемся в полупроводниковой памяти

29.12.2020 18:11:47 | Автор: admin

Когда я писал в начале года статью Кто есть кто в мировой микроэлектронике, меня удивило, что в десятке самых больших полупроводниковых компаний пять занимаются производством памяти, в том числе две только производством памяти. Общий объем мирового рынка полупроводниковой памяти оценивается в 110 миллиардов долларов и является постоянной головной болью участников и инвесторов, потому что, несмотря на долгосрочный рост вместе со всей индустрией микроэлектроники, локально рынок памяти очень сильно лихорадит 130 миллиардов в 2017 году, 163 в 2018, 110 в 2019 и 110 же ожидается по итогам 2020 года.

Топ-10 мировых микроэлектронных компаний, производители памяти выделены красным.Топ-10 мировых микроэлектронных компаний, производители памяти выделены красным.

Объем рынка памяти близок к трети всей микроэлектроники, а в десятке самых больших компаний памятью занимается половина. Так чем же полупроводниковая память такая особенная? Давайте разбираться.

Особую важность памяти придает то, что ее всегда нужно много. Я бы даже сказал, что ее всегда нужно больше, чем есть. Билл Гейтс, которого вы наверняка сейчас вспомнили, на самом деле никогда ничего не говорил про 640 Кб, примерно как Мария-Антуанетта ничего не говорила про пирожные. Впрочем, в начале восьмидесятых 640 КБ были огромной цифрой. И что с того, что памяти нужно много? спросите вы. Очень просто большие тиражи позволяют разработчикам концентрироваться на одном продукте и оптимизировать не только дизайн, но и технологию производства. Сейчас в большинстве случаев чипы памяти производятся на фабриках, специально предназначенных для чипов памяти и принадлежащих производителям памяти. Это принципиальное отличие от всех остальных типов микросхем, где пути разработчиков и производителей давным-давно разошлись, и бал правят контрактные фабрики типа TSMC.

Начнем, собственно, с определения и классификации. Точнее, с классификаций, потому что типов памяти очень много, и различных применений тоже. Классическое разделение памяти по применению на кэш-память, оперативную память и память хранения данных. Оно же примерно соответствует делению на статическую (SRAM), динамическую память (DRAM) и диски (HDD и SSD).

Зачем нужны разные типы памяти? Почему нельзя выбрать самый лучший и производить только его? Разница растет из того, что для разных применений важны разные качества памяти. В кэше, рядом с вычислительными мощностями скорость. В хранении объем и энергонезависимость. В оперативной памяти плотность упаковки. Разумеется, никто бы не отказался от быстрой, плотной, энергонезависимой и малопотребляющей памяти, но соединить все эти качества в одной технологии еще никому не удалось, поэтому приходится совместно использовать разные варианты в тех частях систем, куда они подходят лучше всего.

Диаграмма иерархии памяти в вычислительных системах, с относительными объемами памяти и задержками обращения.Диаграмма иерархии памяти в вычислительных системах, с относительными объемами памяти и задержками обращения.

Кэш-память

Самый первый уровень памяти в вычислительной системе это регистровый файл и кэш-память. Для них определяющее значение имеет скорость доступа, а вот объем может быть небольшим, особенно если его вдумчиво наполнять. Кэш обычно делается на основе статической памяти. Ячейка статической памяти может быть выполнена по-разному, но обязательно содержит в себе положительную обратную связь, которая позволяет хранить информацию и не терять ее (в отличие от динамической памяти, которой требуется периодическая перезапись). В КМОП-технологии ячейка статической памяти состоит из четырех транзисторов собственно запоминающего элемента и одного и более транзисторов, обеспечивающих чтение и запись информации. Промышленный стандарт так называемая 6T-ячейка.

Электрическая схема 6T-ячейки SRAMЭлектрическая схема 6T-ячейки SRAM

Шесть транзисторов это очень много, особенно в сравнении с DRAM или флэш-памятью, где для хранения одного бита информации требуется два, а то и всего один элемент. Тем не менее, скорость работы сделала свое дело, и в большинстве современных цифровых микросхем статическая память занимает десятки процентов площади. Этот факт, кстати, сделал ячейку SRAM точкой опоры в определении проектных норм производства чипов: когда маркетинговые цифры те самые пресловутые 28, 7 или 5 нм отвязались от физических размеров элементов на кристалле, улучшение плотности упаковки стали считать как соотношение площади ячейки SRAM на старом и новом техпроцессах. Если в новой технологии ячейка стала в два раза меньше, значит проектные нормы уменьшились в корень из двух раз.

Разные варианты топологии шеститранзисторной ячейки статической памяти. Источник G. Apostolidis et. al., Design and Simulation of 6T SRAM Cell Architectures in 32nm Technology, Journal of Engineering Science and Technology Review, 2016Разные варианты топологии шеститранзисторной ячейки статической памяти. Источник G. Apostolidis et. al., Design and Simulation of 6T SRAM Cell Architectures in 32nm Technology, Journal of Engineering Science and Technology Review, 2016

Отдельные чипы SRAM были популярны в составе многокристалльных микропроцессоров, таких как девайсы, построенные на базе серии Am2900 или советской 581 серии. При этом, как только появилась возможность поместить достаточно транзисторов на один чип, кэш-память стали размещать на том же кристалле, что и вычислитель, чтобы сэкономить мощность и увеличив скорость работы, избавившись от медленных и громоздких соединений между чипами. В современных микропроцессорах на одном кристалле помещается многоуровневый набор блоков кэш-памяти объемом в несколько Мегабайт. Это, кстати, привело к тому, что рынок SRAM как отдельного продукта практически перестал существовать: его объем оценивается всего в 420 миллионов долларов, то есть в 0.3% от всего рынка полупроводниковой памяти, и продолжает сокращаться. Последние из остающихся могикан чипы для тяжелых условий эксплуатации, вроде космоса, высокотемпературных промышленных установок или медицинской техники, где нельзя свободно применять обычные коммерческие микросхемы и где из-за этого микроэлектронный прогресс несколько отстает. Есть некоторые перспективы роста в автомобильной электронике и в интернете вещей, где для постоянно включенных устройств не играет роли главный недостаток SRAM неспособность хранить информацию после отключения питания. Только хранить, а не обрабатывать SRAM может с минимальным энергопотреблением, так что это может быть интересным вариантов. Впрочем, в этой конкретной нише, кроме флэш-памяти, есть еще активно развивающиеся новые виды памяти, такие как MRAM, так что перспективы на самом деле весьма туманны, а производители один за одним уходят из стагнирующего сегмента, что позволило Cypress получить больше половины рынка повторюсь, крошечного по мировым меркам.

Оперативная память и динамическая память

Главный недостаток статической памяти большое количество элементов в каждой ячейке, прямо транслирующееся в высокую стоимость, а также в большие габариты. Для того, чтобы преодолеть этот недостаток (а на самом деле еще и огромные габариты повсеместно использовавшейся в шестидесятых и начале семидесятых памяти на магнитных сердечниках) была придумана динамическая память.

Схемы ячейки динамической и статической памятиСхемы ячейки динамической и статической памяти

Намного более простая ячейка позволяет существенно увеличить количество памяти на кристалле. Уже самый первый серийный кристалл DRAM (Intel 1103) в 1970 году содержал 1024 бита, а современные чипы умещают уже 16 Гигабит! Это стало возможным благодаря постоянному прогрессу технологии производства, а именно разнообразным улучшениям конструкции интегрального конденсатора. Если в самых первых чипах использовалась просто МОП-емкость, крайне похожая по конструкции на транзистор, в современных чипах DRAM конденсатор для экономии площади располагается не горизонтально, а вертикально, под или над транзистором.

Условная схема прогресса технологии производства DRAM.Условная схема прогресса технологии производства DRAM.

То, что технологический прогресс в области DRAM сосредоточен на конденсаторе, и обусловило обособление отрасли и появление компаний, специализирующихся на разработке памяти и больше ни на чем.

Небольшой исторический экскурс, про Intel

Компания Intel была основана в 1968 году с прицелом на рынок памяти. Основатели фирмы считали, что относительно новые тогда интегральные схемы имеют потенциал вытеснить с рынка вычислительных машин память на магнитных сердечниках. Первыми продуктами Intel были чипы биполярной статической памяти, почти сразу же за ними последовала серия крайне успешных чипов DRAM, а вот заказы на разработку микропроцессоров очень долго рассматривались как что-то временное и побочное до середины восьмидесятых, когда серьезная конкуренция со стороны японских производителей DRAM, таких как Toshiba, вынудила компанию уйти с рынка памяти.

Позднее, Intel развивал бизнес по производству флэш-памяти, совместно с другой американской компанией, Micron, но буквально на днях продал эти активы ей же, и в ближайшем будущем под маркой Intel будет выпускаться только память Optane, основанная на фазовых эффектах.

Общий объем мирового рынка DRAM оценивается в 60-80 миллиардов долларов и составляет чуть больше половины мирового рынка памяти. Оставшуюся часть почти целиком занимает NAND Flash, а на долю всего остального разнообразия приходится не более трех процентов рынка. Производство чипов DRAM держится на трех китах корейских Samsung и SK Hynix, а также американской компании Micron. Все три в пятерке крупнейших полупроводниковых компаний мира, причем если Samsung чем только не занимается, то Micron и SK Hynix производят только памяти, DRAM и Flash. Три гиганта занимают без малого 95% рынка, а остатки рынка почти полностью разделены между несколькими тайваньскими компаниями.

Основные рыночные ниши это потребительская электроника, включая смартфоны (40-50%), а также персональные компьютеры (15-20% ), серверное и телекоммуникационное оборудование (20-25%). Самые большие перспективы роста при этом ожидаются в автомобильном секторе, благодаря разного рода автопилотам и другим системам помощи водителю, а также в вычислениях, связанных с искусственным интеллектом.

Стоит отметить, что все чаще речь идет не о привычных нам планках памяти, а об аккуратной интеграции чипов на плату телефона или даже непосредственно в корпус процессора, в виде так называемой HBM high bandwidth memory. Такая конфигурация позволяет увеличить пропускную способность памяти за счет использования многоразрядных шин, которые нет возможности реализовать при соединении корпусов на печатной плате, уменьшить задержки и потребление, а также эффективно разместить кристаллы памяти в несколько слоев, разместить большую емкость на меньшей площади.

Внутренности корпуса графического ускорителя AMD Fiji. Центральный кристалл собственно вычислитель, по обеим сторонам упакованные в несколько слоев чипы HBM DRAM.Внутренности корпуса графического ускорителя AMD Fiji. Центральный кристалл собственно вычислитель, по обеим сторонам упакованные в несколько слоев чипы HBM DRAM.

Впрочем, и планки памяти тоже никуда не денутся в обозримом будущем, и спрос на них стабильно растет стараниями не только геймеров, но и производителей серверов. Объем рынка модулей памяти составляет приблизительно 16 миллиардов долларов, и он выглядит как Гулливер в окружении лилипутов рыночная доля Kingston Technology превышает 80%, против 2-3% у ближайших конкурентов. При этом сами чипы Kingston закупают у двух из трех больших производителей Micron и SK Hynix. Samsung не привлекается, видимо, в силу того, что большинство их чипов DRAM предназначено для мобильных телефонов.

Еще один небольшой исторический экскурс, про Kingston

Kingston американская компания, основанная в 1987 году, стала одним из пионеров внедрения SIMM-модулей как удобной альтернативы прямому поверхностному монтажу микросхем памяти. Быстро развиваясь на фоне роста рынка персональных компьютеров, Kingston стали единорогом с миллиардной капитализацией уже к 1995 году, и с тех пор выросли еще на порядок, увеличив долю на рынке модулей DRAM c 25% до 80% и расширившись на производство других продуктов, таких как SSD, где Kingston тоже является мировым лидером, правда с более скромными 26% мирового рынка против 8% и 6% у ближайших конкурентов.

Модуль оперативной памяти Kingston. Обратите внимание на плотность упаковки чипов на плате.Модуль оперативной памяти Kingston. Обратите внимание на плотность упаковки чипов на плате.

Kingston - интересный пример того, как можно быть успешной электронной компанией без собственной разработки микросхем и без полной вертикальной интеграции, популярной в последнее время. Добавленную стоимость и уникальные характеристики можно обеспечить на разных этапах создания продукта, и как раз Kingston как успешная электронная компания без собственного производства микросхем может быть хорошим примером для отечественных разработчиков.

А что же японцы, правившие бал в восьмидесятых и вытеснившие с рынка DRAM Intel? В 1999 году профильные подразделения Hitachi и NEC объединились в компанию Elpida, которая позже поглотила DRAM-бизнес Mitshibishi. В двухтысячных компания активно развивалась, много вкладывала в перспективные производства и была поставщиком, например, для Apple.Но финансовый кризис 2009 года очень сильно подкосил Elpida, и в 2012 году она была вынуждена подать на банкротство, после чего была куплена Micron.

На этой печальной ноте давайте заканчивать с DRAM и переходить к flash-памяти, где все еще есть по крайней мере одна успешная японская компания.

Флэш-память и системы хранения данных

Главный недостаток как SRAM, так и DRAM то, что информация в них пропадает в случае, если им отключить питание. Но, сами понимаете, никогда не отключать питание довольно затруднительно, поэтому всю историю вычислительной техники использовались какие-нибудь системы для постоянного хранения данных начиная от перфокарт. Большую часть времени в качестве систем постоянного хранения данных использовались магнитные носители лента или жесткий диск. Жесткие диски сложные электромеханические системы, которые прошли огромный путь от первого образца IBM размером с небольшой холодильник, до 2.5-дюймовых HDD для ноутбуков. Тем не менее, прогресс в микроэлектронной технологии был быстрее, и сейчас мы с вами наблюдаем процесс практически полного замещения жестких дисков полупроводниковыми SSD. Последним годом денежного роста для рынка HDD был 2012, и сейчас он составляет уже не более трети от рынка флэш-памяти.

Разные поколения жестких дисков.Разные поколения жестких дисков.

Ячейка флэш-памяти устроена как МОП-транзистор с двумя затворами, один из которых подключен к схемам управления, а второй плавающий. В обычной ситуации на плавающем затворе нет никакого заряда, и он не влияет на работу схемы, но если подать на управляющий затвор высокое напряжение, то напряженности поля будет достаточно для того, чтобы какое-то количество заряда попало в плавающий затвор, откуда ему потом некуда деться даже если питание чипа отключено! Собственно, именно так и достигается энергонезависимость флэш-памяти для изменения ее состояния нужно не низкое напряжение, а высокое.

Структура ячейки флэш-памятиСтруктура ячейки флэш-памяти

Чтение из флэш-памяти происходит следующим образом: на сток транзистора подается напряжение, после чего измеряется ток через транзистор. Если ток есть, значит на одном из двух затворов есть напряжение, если тока нет на обоих затворах ноль.

На практике структура чипов флэш-памяти несколько сложнее, потому что, кроме самого транзистора, есть еще металлизация управляющих линий, и инженерам пришлось пойти на некоторые ухищрения, чтобы уменьшить ее площадь. Изначально типов флэш-памяти было два NOR Flash и NAND Flash, различающихся как раз способом доступа к ячейкам. Названы они так по подобию соединения ячеек с соответствующими логическими элементами в NAND последовательно, в NOR параллельно.

Сравнение архитектур NOR Flash и NAND FlashСравнение архитектур NOR Flash и NAND Flash

Чтение из NOR Flash происходит ровно так, как описано выше, и позволяет удобно добраться до любого интересующего нас куска памяти. Чтение из NAND Flash несколько более занятно: для того, чтобы узнать значение интересующего нас бита в последовательно включенном стеке, нужно открыть управляющие затворы всех остальных транзисторов тогда на состояние выхода будет влиять только интересующий нас бит. Согласитесь, заряжать-разряжать множество управляющих затворов ради того, чтобы узнать значение только одного бита это как-то чересчур расточительно? Особенно с учетом того, что мы должны открыть управляющие затворы всех транзисторов не только в интересующем нас стеке, но и во всех соседних стеках, подключенных к тем же word line. Именно поэтому на практике NAND Flash читается не побитно, а целыми страницами. Это может показаться неудобным, ведь мы, по сути, делаем нашу память не совсем random-access.

Любые рассуждения на тему того, что лучше NAND Flash или NOR Flash, неизбежно натыкаются на мнение рынка, сделавшего однозначный выбор: объем рынка NAND 40-60 миллиардов долларов, а NOR около четырех. Почему же побеждает менее удобная память? Дело на самом деле не в удобстве или неудобстве, а в целевых приложениях и в стоимости. NOR Flash удобнее и быстрее читается, но очень медленно записывается, зато ячейка NAND Flash в два с лишним раза меньше, что, разумеется, критично в ситуации, когда вам нужно БОЛЬШЕ ПАМЯТИ.

Кроме того, если немного подумать над главным недостатком NAND Flash чтением только большими кусками, то в обычной вычислительной системе чтение из долгосрочной памяти в любом случае происходит большими кусками чтобы оптимизировать работу кэш-памяти и минимизировать число кэш-промахов. То есть этот недостаток на самом деле и не недостаток вовсе. Так что по факту единственное настоящее преимущество NOR Flash быстрота чтения, и ее основные применения так раз те, где требуется быстрое чтение, но не нужна частая и быстрая запись. Например, прошивки разнообразных embedded девайсов, где NOR Flash активно заменяет другие виды EEPROM.

Небольшое отступление: PROM

И, раз уж я упомянул EEPROM, нелишне обсудить и экстремальный случай когда память только читается, но не перезаписывается то есть Read-Only Memory или ROM. Такая память гораздо чаще используется в промышленных применениях и для разнообразных прошивок. Такая память может быть запрограммирована на этапе производства с помощью наличия или отсутствия металлических соединений (или транзисторов, как это было сделано в Intel 8086. Но что, если раз-другой записать память все-таки нужно, причем уже после того, как чип произведен? На этот случай существует довольно много разновидностей PROM (P programmable), довольно часто встраиваемых на кристалл вычислительной системы, например, микроконтроллера, но продолжающих активно использоваться и в качестве отдельных чипов.

Самый простой вариант это однократно программируемая память типа Antifuse, она же память на пережигаемых перемычках. Идея очень проста: у нас есть структура (транзистор или резистор), которая может быть необратимо разрушена, превратившись в короткое замыкание или разрыв цепи. Чтение такой памяти выглядит как проверка на наличие замыкания или разрыва, а запись возможна только один раз, потому что изменение структуры необратимо.

Внешний вид памяти на пережигаемых перемычкахВнешний вид памяти на пережигаемых перемычках

В случае, если может быть нужно записывать память несколько раз, например изредка обновлять прошивку, в дело вступают разные варианты EPROM (E erasable) и EEPROM (EE electrically erasable). Технологически они базируются на транзисторах с плавающим затвором и являются примитивной разновидностью флэш-памяти. Сейчас под термином EEPROM обычно подразумевают NOR Flash c возможностью побайтной записи и удаления данных.

NAND Flash

Что же касается NAND Flash, то ее стоимость за бит уже давно снизилась настолько, что этот вид памяти стремительно завоевывает рынок памяти для хранения информации, один за одним забивая гвозди в крышку гроба HDD и, например, дав на возможность иметь много памяти в крошечных мобильных телефонах. Ключевые производители чипов NAND Flash Samsung (33% и почти половина накопителей для телефонов), Kioxia (бывшая Toshiba, 20% рынка), Western Digital (14%), SK Hynix (11%), Micron (10%), Intel (8%).

Из этого списка, впрочем, надо исключить Intel, которые недавно объявили о переходе своей доли в совместном с Micron производстве к последним и об уходе с рынка флэш-памяти. Еще один интересный игрок Western Digital, один из гигантов HDD, ныне стремительно переориентирующийся на твердотельные диски и ставший для этго уникальным зверем fabless-производителем памяти. WD выкупили для этого больше трети производственных мощностей Kioxia, которые делают одни и те же чипы для себя и для клиента. Еще одно неожиданное последствие переориентации WD они стали одним из наиболее заметных участников коммьюнити RISC-V, активно внедряя эту систему команд в свои контроллеры накопителей.

И в завершение рассказа про NAND Flash, надо непременно рассказать о произошедшей в последние годы технологической революции. Флэш-память, как и обычная микроэлектроника, уже уперлась в технологический предел миниатюризации транзисторов, и если в вычислительных системах можно хотя попробовать отыграть что-то за счет архитектуры, то в памяти плотность упаковки это главное и единственное, что по-настоящему волнует. Поэтому, пока разговоры о переходе обычных КМОП-микросхем в третье измерение все еще остаются разговорами, 3D NAND уже четыре года как массово присутствует на рынке, позволяя разместить на кристалле в десятки, а то и в сотни раз больше ячеек памяти, чем обычное планарное решение.

Схематичный разрез двухмерной и трехмерной NAND Flash памятиСхематичный разрез двухмерной и трехмерной NAND Flash памяти

На электрической схеме выше транзисторы размещены последовательно, сверху вниз, тогда как в планарном варианте изготовления они расположены на плоскости, занимая ценную площадь на кристалле. Однако простая и монотонная структура позволила реализовать самое логичное, что можно сделать сквозной вертикальный канал транзистора, выглядящий примерно так же, как и электрическая схема (и показанный на схеме справ желтым, идущим сквозь зеленые затворы). Разумеется, оно только звучит логично и просто, а на практике создание глубокого отверстия с вертикальными стенками это одна из самых сложных операций, возможных в микроэлектронной технологии. Тем не менее, инженерные задачи были решены, и сейчас такие этажерки, как на рисунке выше, включают в себя уже до 128 транзисторов в серийно производимых чипах и до 192 слоев в девайсах, ожидаемых через год-два. Проектные нормы производства современной флэш-памяти примерно соответствуют уровню 15-20 нм, так что такая плотность упаковки это эквивалент норм 0.1-0.2 нм! В обычном КМОП повторить этот фокус в точности не удастся, но свежие исследования по GAAFET предполагают упаковку нескольких горизонтальных каналов друг поверх друга. Samsung рассчитывают таким образом выйти на уровень 1 нм, а то и чуть меньше.

На этом мы прошли полный путь от кэша микропроцессора до памяти долговременного хранения и посмотрели на технологии, занимающие больше 97% рынка полупроводниковой памяти. Однако в оставшихся небольших процентах, в числе прочего скрываются и новые перспективные типы памяти, на которые тоже было бы неплохо взглянуть.

Новые типы энергонезависимой памяти

Читая научные исследования новых видов полупроводниковой памяти, я в какой-то момент перестал воспринимать их всерьез, потому что обещания златых гор можно было лицезреть ежегодно, а вот с готовыми к серийному производству продуктами вечно была напряженка. В основном исследования концентрировались и концентрируются на том, чтобы преодолеть разрыв между DRAM и флэш-памятью, создав нечто одновременно быстрое, энергонезависимое и дешевое. Никаких серьезных достижений на этом поприще пока не достигнуто, и те разработки, которые все же дошли до стадии коммерциализации, в основном составляют небольшую долю от рынка EEPROM, как в виде отдельных чипов, так и дополнительных опций в КМОП-технологии.

Три наиболее зрелых технологии такого рода это MRAM (магнитная RAM), FRAM (ферроэлектрическая или сегнетоэлектрическая RAM) и PCM (phase-change memory).

FRAM основана на сегнетоэлектрическом эффекте свойстве некоторых материалов менять свои свойства под действием высокого напряжения. В частности, в FRAM используется изменение емкости конденсатора. Эта память появилась в серийных продуктах, например в микроконтроллерах MSP430, еще двадцать лет назад, то почти тогда же проявился ее главный недостаток пленки сегнетоэлектрических слоев оказались плохо масштабируемыми, и развитие технологии остановилось на уровне 130 нм, а существующие до сих пор продукты в основном довольно старые радиационностойкие микросхемы. Впрочем, в последние годы работы по сегнетоэлектрикам снова активизировались, и возможно нас ждет новое пришествие FRAM, на этот раз в виде FeFET, где из сегнетоэлектрика будет делать затвор транзистора.

Разные варианты MRAM используют несколько физических эффектов, позволяющих манипулировать спином магнитных материалов и посредством него, на их электрические свойства. По сути, мы говорим о физической реализации концепции мемристора резистора, сопротивление которого зависит от его предыдущего состояния. Первые серийные чипы MRAM появились еще в 2004, но проиграли технологическую войну флэш-памяти. Тем не менее, технология продолжает активно развиваться, подогреваемая тем, что у MRAM потенциально на несколько порядков большее количество циклов перезаписи, чем у флэш, а значит ее можно использовать как гибрид кэша и памяти долгосрочного хранения. Считается, что такое сочетание может быть востребовано в малопотребляющих микросхемах интернета вещей, и сейчас встраиваемые блоки MRAM предлагают такие именитые фабрики, как Samsung и GlobalFoundries.

PCM класс памяти, основанной на изменении фазового состояния некоторых веществ, например с кристаллического в аморфное, под действием внешних факторов типа высокого напряжения или кратковременного нагрева (обычно проводимого при помощи пропускания большого тока через запоминающий элемент). Потенциальные преимущества PCM примерно такие же, как у MRAM быстрое чтение и большое количество циклов перезаписи, что в теории может позволить заменить даже все три типа памяти одним унифицированным решением. На практике же изначальное внедрение PCM обернулось грандиозным провалом: в 2012 году Micron с помпой представили серийную линейку для применения в мобильных телефонах, однако уже к 2014 году все эти продукты были отозваны с рынка. Их вторая попытка стала более успешной совместно с Intel в 2017 году была представлена память 3D Xpoint и линейка SSD Optane (Intel) X100 (Micron). Продажи пока что невелики, но отзывы потребителей довольно хорошие. Посмотрим, выдержит ли новая технология проверку времени и сможет ли действительно потеснить традиционные SSD на основе NAND Flash.

Традиционная невеселая рубрика А что в России?

И, конечно же, мой рассказ был бы неполон без упоминания о том, что происходит в России. К сожалению, хорошего можно рассказать немного. Производство памяти это именно что производство, а с микроэлектронными заводами у россии довольно печальная ситуация. Соответственно, речи о собственных чипах DRAM и flash-памяти нет и в обозримом будущем не предвидится. А что есть?

Во-первых, есть какое-то количество микросхем SRAM. Самый технологически продвинутый продукт микросхема 1663РУ1, представляющая собой 16 Мбит статической памяти по нормам 90 нм, производства завода Микрон. Кроме этого чипа, есть и другие, в основном предназначенные для аэрокосмических применений.

Кроме статической памяти, есть еще одно производство Крокус-наноэлектроника, производящая MRAM. Расположенная в Москве фабрика КНЭ единственная в России, умеющая работать с пластинами диаметром 300 мм. Правда, Крокус-нано не обладает полным циклом производства, а может делать только металлизацию и совмещенные с ней магнитные слои, формирующие ячейку MRAM. Транзисторная часть при этом должна быть изготовлена на другой фабрике (иностранной, потому что в России с пластинами 300 мм работать некому). На сайте КНЭ заявлена доступность микросхем объемом от 1 до 4 Мбит, скоростью считывания 35 нс и записи 35/90/120/150 нс. Еще немного света на функционирование и происхождение этих чипов проливают также заявленные в качестве продуктов на официальном сайте сложнофункциональные блоки MRAM, совместимые с техпроцессами китайской фабрики SMIC и израильской TowerJazz. Вероятно, именно эти производители являются технологическими партнерами и при производстве собственных чипов КНЭ.

Последнее, о чем стоит упомянуть в контексте производства памяти в России это твердотельные системы хранения данных, являющиеся одним из важных драйверов импортозамещения в российской электронике. Российский рынок подобных систем оценивается в 122 миллиона долларов, доля отечественной продукции растет, идут жаркие споры насчет протекционистского законодательства и сравнения качества отечественных и импортных решений в общем, настоящая жизнь. К сожалению, как уже было сказано выше, о собственном производстве чипов NAND flash речи не идет, и под импортозамещением понимается сборка импортных чипов в корпус и на плату, а также разработка или адаптация встроенного ПО. Из хороших новостей в России ведутся разработки микросхем контроллеров флэш-памяти. Собственные контроллеры, хоть и не смогут решить проблему технологического отставания и зависимости от импорта, позволяют обеспечить контроль за функционированием импортных кристаллов памяти и безопасность решений на их основе. На этой позитивной ноте, я пожалуй, и закончу на сегодня.

Подробнее..

На каких серверах держится Архив Интернета?

31.03.2021 12:04:48 | Автор: admin

Фото 1. Один из дата-центров Internet Archive в Сан-Франциско

Internet Archive некоммерческая организация, которая с 1996 года сохраняет копии веб-страниц, графические материалы, видео- и аудиозаписи и программное обеспечение. Каждый может зайти в Wayback Machine и посмотреть, как выглядел Хабр в 2006 году или Яндекс в 1998 году, хотя загрузка архивных копий занимает около минуты (это не для реализма 90-х, а по техническим причинам, см. ниже).

Архив быстро растёт. Сейчас объём всех накопителей достиг 200 петабайт. Но Internet Archive принципиально не обращается к стороннему хостингу или облачному сервису вроде AWS. У некоммерческой организации собственные дата-центры, свои серверы и свои инженеры. Это гораздо дешевле, чем услуги AWS.

Архив Интернета против облаков


Технические подробности серверного устройства Internet Archive раскрыл Джона Эдвардс (Jonah Edwards), руководитель инженерной группы Core Infrastructure Team.

По его мнению, понятие облако многих людей вводит в заблуждение как нечто абстрактное. На самом деле это просто чужие компьютеры, то есть серверы посторонней компании. Для Internet Archive это неприемлемо. У организации собственные серверные в собственных зданиях, компьютеры принадлежат им, и персонал тоже свой.


Четыре дата-центра Internet Archive располагаются в Сан-Франциско, Ричмонде и Редвуд-Сити (это пригороды Сан-Франциско)

Кто-то может посчитать такой подход архаичным, но в некоторых случаях он действительно оправдан. В случае Internet Archive на то есть три причины: это дешевле, обеспечивает лучший контроль за серверами и даёт гарантию, что пользователей не отслеживают рекламные трекеры.

Деньги на обслуживание инфраструктуры и зарплаты сотрудникам собираются преимущественно за счёт пожертвований и грантов, годовой бюджет составляет около $10 млн.

Инфраструктура


Что представляет собой инфраструктура, которой управляет Core Infrastructure Team? На февраль 2021 года цифры такие:

  • 750 серверов, возраст до 9 лет;
  • 1300 виртуальных машин;
  • 30 000 устройств хранения данных;
  • более 20 000 жёстких дисков в парах друг с другом (paired storage), обычно пара разнесена по дата-центрам или странам для надёжности;
  • общий объём накопителей почти 200 петабайт.

Разумеется, техника постепенно обновляется. На смену старым накопителям приходят новые. Например, маленькие диски на 2 и 3 терабайта полностью вышли из обращения в 2017 и 2018 годах, соответственно, а с прошлого года постоянно растёт доля дисков на 16 ТБ.

Как показано на графике ниже, несмотря на увеличение ёмкости накопителей, общее число HDD тоже постепенно растёт: за три года оно выросло с 15 тыс. до 20 тыс.


Количество жёстких дисков разного объёма на серверах Internet Archive

Диски реплицируются по дата-центрам, для производительности контент по запросу выдаётся одновременно со всех копий. Все элементы Архива представляют собой директории на дисках. Веб-страницы Wayback Machine хранятся в файлах WARC (Web ARChive, сжатые файлы Web Archive). При запросе отдельной страницы её нужно извлечь из середины архива WARC, а если страница требует загрузки дополнительных ресурсов, то процесс повторяется. Это одна из причин, почему полная загрузка страниц из Wayback Machine достигает 90 секунд, хотя закэшированные копии и популярный контент загружаются быстрее.



Для надёжности копии Архива хранятся не только в Сан-Франциско, но и ещё в нескольких локациях по всему миру, в том числе в Амстердаме (Нидерланды) и Новой Александрийской библиотеке (Египет).

В 1996 году первые серверы Internet Archive подняли на недорогих компьютерах из стандартных комплектующих: по сути, на обычных десктопах под Linux. Хотя инфраструктура сильно выросла, в качестве операционной системы всегда использовали только Linux. С 2004 года все серверы перешли на Ubuntu, сейчас продолжается миграция на Ubuntu 20.4 LTS (Focal Fossa).

Объём Архива


В последнее время объём Архива возрастает примерно на 25% в год, сейчас это соответствует 56 петабайтам в квартал. С учётом резервных копий нужно добавлять накопителей на 1012 петабайт в квартал.

Одна копия Архива занимает более 45 петабайт, но на дисках и лентах хранится минимум две копии каждого объекта.

Как видно на графике вверху, обновление дискового массива происходит только за счёт моделей максимальной ёмкости. Например, в конце 2021 года планируется переход на диски по 20 ТБ, и тогда в серверы будут устанавливать только их. Остальные HDD постепенно доживают свой век, и их количество медленно снижается.

Internet Archive возлагает большие надежды на новые технологии записи данных, такие как HAMR (heat-assisted magnetic recording), чтобы ёмкость HDD увеличивалась ещё быстрее. Технология HAMR предусматривает предварительное нагревание магнитной поверхности лазером в процессе записи, что позволяет значительно уменьшить размеры магнитной области, хранящей один бит информации и увеличить плотность записи. Нагрев выполняется с помощью лазера, который за 1 пс разогревает область записи до 100 C.

Разработка этой технологии затянулась на 15 лет, но в январе 2021 года были официально представлены первые диски HAMR на 20 ТБ. Пока что они официально поставляются только избранным клиентам в рамках фирменного сервиса Seagate Lyve, но вскоре должны появиться в свободной продаже.

Seagate обещает, что HAMR позволит наращивать ёмкость HDD на 20% в год. Поэтому в ближайшее время можно ожидать модель на 24 ТБ, а в будущем диски на 30 и 50 ТБ. Internet Archive тоже надеется на это и внимательно следит за последними разработками.

На текущем размере дисков понадобится 15 вот таких серверных стоек, чтобы разместить одну копию Архива:


У Internet Archive 750 серверов и 20 000 жёстких дисков

Сейчас в дата-центрах установлено 75 серверных стоек, что обеспечивает некоторый запас и избыточное копирование.

По состоянию на февраль 2021 года на серверах хранились копии 534 млрд веб-страниц, 16 млн аудиозаписей, 8,7 млн видеозаписей фильмов, клипов и телепередач, 3,8 млн изображений, 629 тыс. компьютерных программ, более 29 млн книг и текстов, в том числе 72 771 текст на русском языке.



Любой пользователь может создать аккаунт и добавить в архив медиафайлы.

Internet Archive поддерживает API для внешних сервисов. Например, сторонний сервис может забирать контент из хранилища и показывать его на своём сайте или в приложении. Можно строить собственные каталоги на базе этого хранилища, эксплуатируя IA просто как удалённый бесплатный хостинг файлов с хотлинками. Подобную модель использует книжный каталог Open Library на базе Internet Archive. Хотлинки и модель подобной эксплуатации собственных ресурсов поощряется со стороны Архива. Кстати, аналогичные правила действуют в Wikimedia Commons: холинкинг разрешён и даже поощряется, что недавно вызвало казус с фотографией цветка: по непонятной причине ежедневно в сеть Wikimedia Commons поступало около 90 млн одинаковых запросов на получение одного файла AsterNovi-belgii-flower-1mb.jpg. Будем надеяться, что у Internet Archive таких инцидентов не случится.

Сеть


В 2020 году Internet Archive пережил серьёзный рост количества запросов и объёма внешнего трафика с 40 до 60 Гбит/с. Из-за пандемии коронавируса и самоизоляции ресурсы Архива стали более востребованы. Количество запросов росло так быстро, что в определённый момент маршрутизаторы Internet Archive перестали справляться с нагрузкой, пришлось делать апгрейд сетевой инфраструктуры быстрее, чем планировалось. Сейчас веб-сайт входит в топ-300 крупнейших сайтов интернета.

Работа на собственных серверах имеет и свои недостатки. Основные причины сбоев Internet Archive обрывы оптоволокна из-за строительных работ в городе, сбои энергоснабжения, случайные провалы напряжения в сети. Впрочем, прошлый год сайт завершил с аптаймом 99,9%.



Internet Archive планирует расширять внешний канал. Ожидается, что в ближайшее время внешний трафик вырастет до 80 Гбит/с.

Примерно так выглядит дизайн внутренней сети:



Дата-центры подключены к нескольким провайдерам первого уровня (Tier 1) и соединены между собой по оптоволокну с применением технологии плотного спектрального уплотнения (DWDM). Локальные университетские сети подключаются к этому кольцу напрямую через локальные точки обмена трафиком.

Вместо нынешнего оптоволокна планируется проложить пары 100-гигабитных кабелей по всему кольцу из четырёх дата-центров, так что внешний трафик тоже можно будет увеличить до 100 Гбит/с.

Прокладка новых кабелей по Сан-Франциско весьма хлопотное и дорогое дело. Приходится перекладывать асфальт на автомобильных дорогах и тротуарах. К счастью, Internet Archive удалось получить официальный статус библиотеки, что даёт доступ к государственным субсидиям, в том числе к бюджету Федеральной комиссии по связи США (FCC) на подключение всех библиотек к интернету. Таким образом, львиную долю расходов на прокладку, обслуживание оптоволокна и трафик оплачивает FCC по программе E-Rate Universal Service Program.

С 2005 года Internet Archive начал проект Open Library по сканированию книг. С одной стороны, это действительно важный общественный проект. С другой стороны, он позволил получить государственные льготы и финансирование в качестве публичной библиотеки.

Кроме государственных грантов и пожертвований, организация оказывает платные услуги по сканированию книг, в основном, для других библиотек и университетов. Это ещё один источник финансирования.

Планы на будущее


Инженеры Internet Archive сейчас обдумывают варианты использования SSD и GPU в основных серверах, чтобы увеличить их производительность. Главная проблема здесь в том, что все дата-центры находятся в стеснённых городских условиях Сан-Франциско и пригородов с очень ограниченными возможностями охлаждения (см. фото 1). Так что каждый апгрейд требуется хорошо обдумать: не приведёт ли он к повышению температуры.

Интересно наблюдать за ростом инфраструктуры Internet Archive с увеличением количества серверных стоек. Есть подозрение, что рано или поздно наступит момент, когда сложность поддержания своей инфраструктуры превысит некий порог и библиотека откажется от собственных дата-центров. Но пока что инженеры Core Infrastructure Team успешно справляются с работой.

В зависимости от методологии расчёта, хранение данных в собственных дата-центрах Internet Archive обходятся в 25 раз дешевле, чем в облаке. И это только хранение. Сложно даже посчитать, сколько будет стоить круглосуточный исходящий трафик 60 Гбит/с на AWS. Вероятно, он обойдётся даже дороже, чем хранение 200 петабайт.

Похоже, что некоторые сервисы просто слишком велики для облака. Компаниям приходится поднимать собственные дата-центры, потому что у них нет выхода. Другой вопрос: должна ли библиотека заниматься этим самостоятельно? Получается, что современная цифровая библиотека это по сути хостинг-провайдер и дата-центр?



На правах рекламы


Эпичные серверы это надёжные VDS на Linux или Windows с мощными процессорами семейства AMD EPYC и очень быстрой файловой системой, используем исключительно NVMe диски от Intel. Попробуйте как можно быстрее!

Подробнее..

Что мы привезли на CES 2021 от накопителей до кардридеров

22.01.2021 14:05:41 | Автор: admin
Привет, Хабр! В этом году выставка потребительской электроники CES 2021 прошла в уже привычном для многих онлайн-формате. И хотя многие бренды, которые выставлялись на выставке в прошлом году, не стали анонсировать свои новинки в начале текущего, Kingston продолжает блюсти традиции. Переход в онлайн позволил компании без посредников поведать о своих планах гораздо большему количеству людей, нежели в режиме традиционной выставки.



Итак, в рамках CES 2021 мы дискутировали не только о новых трендах, которых компания будет придерживаться на протяжении всего года, но и показали новые устройства для специалистов, а также решения корпоративного класса. Далее по тексту расскажем какие.

Kingston Ghost Tree PCIe NVMe Gen 4.0


Большинство потребительских NVMe-накопителей, вышедших в 2020 году и соответствующих спецификациям PCIe 4.0 выпущены на базе контроллеров Phison PS5016-E16. К сожалению, они не способны полностью реализовать потенциал нового интерфейса и полностью задействовать его пропускную способность.

Kingston же не спешил с анонсами своих решений, поэтому Ghost Tree PCIe NVMe Gen 4.0 получился оптимизированным и сбалансированным. В то время как конкуренты предлагают схожие накопители с пропускной способностью на уровне 4-5 Гбайт/с, мы говорим о скорости чтения/записи на уровне 7 Гбайт/с.

Накопители серии Ghost Tree также построены на 8-канальном контроллере. Пока не скажем, на каком именно, но можем с уверенностью утверждать, что SSD-решения с емкостью от 1 до 4 Тбайт смогут на полную задействовать производительность интерфейса PCIe 4.0. Убедитесь в этом сами, когда мы опубликуем первые тесты на страницах нашего блога.

Kingston NV Series Gen. 3.0x4


Наравне с накопителями топового класса, в рамках CES 2021 мы анонсировали линейку PCIe 3.0-устройств, которые ориентированы на начинающих пользователей. Максимальная емкость таких накопителей будет ограничена двумя терабайтами, что помогает снизить розничную стоимость и сделать данные SSD доступными для большинства потребителей.

Kingston SSD DC1500M U.2 NVMe


Накопитель Kingston SSD DC1500M U.2 NVMe относится к решениям корпоративного класса и приходит на смену SSD Kingston DC1000M U.2 NVMe. Эта новинка обеспечивает высокую пропускную способность и низкую латентность, и предназначена для размещения в серверах последнего поколения.

DC1500M нацелен на решение широкого спектра задач и нагрузок, которые подразумевают интенсивное использование данных большим количеством пользователей единовременно. Подходит накопитель и для ЦОД, занимающихся облачными вычислениями, а также хостинг-провайдеров и виртуальных инфраструктур, которые обслуживают и оптимизируют бизнес-процессы компаний.

Накопители NVMe SSD с поддержкой PCIe 4.0


В прошлом году локомотивом выставочных анонсов стал SSD-накопитель Kingston DC1000B M.2 NVMe, но он предлагал поддержку PCIe 3.0, что вполне логично. С появлением системных плат, предлагающих PCIe поколения 4.0 вырос и спрос на соответствующие накопители, поэтому форвардами 2021 года в линейке наших NVMe-устройств станут твердотельные решения с поддержкой нового интерфейса. В этом году мы планируем выпускать как клиентские U.2-решения, так и профессиональные устройства для серверных кластеров. Давайте коротко пройдемся по каждой из моделей накопителей, которые уже скоро появятся на рынке.

Внешний SSD Kingston XS2000 с поддержкой USB 3.2



Помимо NVMe-решений корпоративного и потребительского уровня, мы анонсировали внешний SSD-накопитель USB 3.2 Gen 2x2, который будет предлагаться с емкостями от 500 Гбайт до 2000 Гбайт. Kingston XS2000 позиционируется как производительное хранилище для фотографий, видеороликов и других файлов, а его главными особенностями являются высокая скорость записи (до 2500 Мбайт/с) и быстрый доступ к требуемым данным. Для подключения к ПК и ноутбукам используется порт USB-C, являющийся основным при использовании USB 3.2 Gen 2.

Kingston Workflow: кардридеры и док-станции для них


И последняя интересная штука с CES 2021 внешние кардридеры (Workflow SD Reader и Workflow microSD Reader), которые можно использовать и как самостоятельные устройства, и вкупе с док-станцией Workflow Station. Кому и для чего такие гаджеты могут понадобиться? Если с карт-ридерами все понятно (как правило, они нужны фотографам и видеографам для доступа к данным, находящимся на картах памяти и переброски их на ПК), то о док-станции стоит поговорить отдельно.



По сути Kingston Workflow Station позволяет работать сразу с несколькими типами кардридеров, что актуально, если у пользователя есть необходимость работать с данными, записанными на картах памяти разного типоразмера. Приведем пример: допустим, что вы снимаете 4K-видео для YouTube на профессиональную камеру (с установленной внутри SD-картой) и параллельно ведете видеозапись на смартфон (с установленной внутри microSD-картой) для размещения получившегося видео в сервисах типа Instagram и TikTok. В этом случае наличие мини-хаба позволит вам одновременно подключить к компьютеру и ноутбуку две карты памяти разных типоразмеров, не используя переходники (microSD на SD).

Казалось бы, аргументов недостаточно, поэтому давайте представим, что видео, с которым вам предстоит поработать, обладает разрешением 4K/8K. Как следствие, конечные файлы обладают большим весом, поэтому для копирования их на ПК и для манипуляций непосредственно в рамках карты памяти, необходима высокая пропускная способность, которая реализована через подключение Type-C (USB 3.2 Gen 2). Как итог: в сочетании с высокопроизводительными картами памяти и USB-накопителями Kingston это позволит значительно ускорить рабочие процессы на стадии постпродакшна.

Итоги


На этом мы заканчиваем экскурс в анонсы новинок, представленных на CES 2021, и переходим к обсуждениям. Расскажите в комментариях, какие устройства вы считаете наиболее интересными и тесты каких накопителей вы хотели бы увидеть на страницах нашего блога?

____________________________________________________________________________________________________________

Для получения дополнительной информации о продуктах Kingston Technology обращайтесь на официальный сайт компании.
Подробнее..

Почему накопители SSD ускоряются после очистки и насколько важен размер кэша бенчмарки популярных моделей PCIe 4.0

01.03.2021 12:17:20 | Автор: admin
Почему накопители SSD ускоряются после очистки и насколько важен размер кэша бенчмарки популярных моделей PCIe 4.0



В прошлом году SSD впервые в истории обогнали HDD по объёму продаж. В отличие от винчестеров, здесь сумасшедший технический прогресс. За несколько лет рынок меняется кардинально: интерфейс NVMe вместо SATA, память SLCMLCTLCQLC

Замена системного диска с HDD на SSD иногда самый мощный апгрейд, который можно сделать с компьютером. Главный прирост в отклике системы и софта даёт скорость случайного доступа, которая даже у самых дешёвых SSD на пару порядков быстрее, чем у HDD. А современные SSD практически не уступают по скорости оперативной памяти. Основная проблема живучесть. При интенсивной эксплуатации они слишком быстро выходят из строя.

Давайте посмотрим, что произошло на рынке потребительских SSD за последние десять лет. И как выбор конкретных технологий влияет на производительность.

SSD в целом становятся всё более сложными, поэтому объективная оценка их производительности не простое занятие. Из-за этого у производителей появляется всё больше способов, как ввести в заблуждение потребителей и спрятать реальную производительность за некой единой священной метрикой.

В январе 2021 года издание AnandTech провело тестирование девяти современных моделей SSD на 1 ТБ. Описание этого эксперимента показывает никакой единой метрики не существует.

Новая флэш-память


SSD на массовом рынке появились более десяти лет назад. Например, компания Intel выпустила свои первые SSD в 2008 году: это были модели X25-M и X18-M объёмом 80 ГБ с форм-фактором 2.5" и 1.8", соответственно. Первая вышла по рекомендованной цене $595


Intel X25-M

Много воды утекло с тех пор. Сейчас мы видим десятки терабайтных моделей по гораздо меньшей цене. Но основные принципы работы твёрдотельных накопителей не изменились. И главные проблемы флэш-памяти NAND по-прежнему актуальны:

  • невозможность напрямую вносить изменения в записанные блоки данных во флэш-памяти, запись новой информации производится в пустые ячейки;
  • несоответствие между размерами страниц NAND и размерами блоков стирания;
  • снижение производительности при заполнении накопителя.


Бенчмарки старых SSD образца 2009 года


Вернуть изначальную производительность старых SSD можно было только с помощью утилиты HDD ERASE, источник

Всё это по-прежнему актуально. Современные твёрдотельные накопители намного больше, быстрее и дешевле, но их контроллеры и прошивки не решили названные проблемы до конца. У современных SSD появились и некоторые дополнительные проблемы, которые ещё больше усложняют механизмы их работы и затрудняют объективное тестирование.

Примерно в 2014 году появились накопители с памятью TLC NAND и поддержкой прямого интерфейса NVMe. К настоящему времени обе эти технологии практически захватили рынок: память MLC практически исчезла, а NVMe дефолтный интерфейс для новых моделей. Более высокая производительность PCIe/NVMe по сравнению с SATA даёт ошеломляющую разнице в бенчмарках, но с точки зрения дизайна бенчмарков на самом деле важнее был переход на TLC. Это связано с тем, что потребительские твёрдотельные накопители TLC в значительной степени зависят от кэширования SLC.



В накопителе чем больше битов мы записываем в ячейку, тем она сложнее (и медленнее). Современные диски записывают 3 бита на ячейку (TLC) или 4 бита (QLC). Оба варианта медленнее для записи, чем запись 1 бита на ячейку (SLC). Поэтому в SSD часть ячеек обрабатывается в режиме SLC, это позволяет увеличить поток входных данных.

Недостатком является то, что данные из SLC NAND потом надо переписать в блоки, которые работают как MLC/TLC/QLC. Этот процесс часто называют фолдингом, он обычно автоматически выполняется во время простоя накопителя, где задержка не важна. Таким образом освобождается место в кэше SLC для дальнейшего использования.

Обязательное SLC-кэширование в современных SSD


Кэширование SLC создаёт два уровня производительности один внутри кэша, и один снаружи. Большинство пользователей никогда не видят производительности снаружи кэша. Реальные потребительские рабочие нагрузки почти никогда не пишут десятки или сотни ГБ непрерывно, особенно на высоких скоростях (быстрее, чем гигабитный Ethernet) даже запись несжатого видео 4k60 немного меньше 1,5 Гбит/с, в то время как высококачественные NVMe теперь предлагают пиковую скорость записи выше 4 Гбита/с. Но на самом деле включение более реального варианта использования с адекватными перерывами для диска, чтобы освободить кэш SLC во время простоя, делает результаты тестирования более релевантными для многих пользователей.

Размеры кэша SLC также зачастую зависят от объёма свободного места на диске. Например, при заполнении SSD на 75% может остаться только 10% от обычного размера кэша SLC. Тесты, которые работают с почти пустым диском, могут преувеличить преимущества кэширования SLC по сравнению с тем, что испытывают пользователи, когда они фактически используют большую часть рекламируемой ёмкости своего накопителя.


Изменение размера кэша SLC в зависимости от объёма свободного места в Intel SSD 665p

Накопители QLC ещё больше усложнили ситуацию, поскольку они пытаются держать кэш максимально заполненным для ускорения доступа к данным.

Накопители NVMe (и некоторые SATA) также чувствительным к температуре. Накопители M.2, потребляющие более 5 Вт на пике, могут сильно нагреваться, поэтому сейчас многие из них поставляются в комплекте с радиаторами.

Данные SSD: локальность и DRAM


Кроме интерфейса (SATA, PCIe 3.0, PCIe 4.0) и выбора флэш-памяти TLC или QLC NAND, есть ещё несколько важных технологических различий между SSD высокого класса и начального уровня. Например, метод хранения метаданных Flash Translation Layer (FTL) информации, какое физическое местоположение соответствует каждому логическому адресу (Logical Block Address, LBA).

В течение нескольких лет большинство SSD использовали большую простую таблицу поиска. Несложно посчитать, что для диска 1 ТБ с секторами по 4 КБ требуется таблица отображения FTL почти на 1 ГБ. Это увеличивает стоимость привода, а производители SSD пытаются снизить свои расходы. Поэтому интерфейс DRAM исчез практически со всех контроллеров начального уровня и им приходится как-то управлять гигабитной таблицей FTL, не имея возможности загрузить её в память целиком.

У контроллеров обычно есть встроенный кэш небольшого размера, который исчисляется в мегабайтах. Другой вариант заимствовать часть оперативной памяти процессора через функцию буфера памяти хоста (HMB). Такая возможность есть в интерфейсе NVMe.



Но в любом случае, отсутствие полноценного буфера DRAM сказывается на производители всех SSD: во-первых, случайные чтения требуют дополнительной операции чтения для извлечения данных из таблицы до того, как запрошенные данные могут быть прочитаны. Во-вторых, накопителям труднее выравнивать нагрузку и управлять сбором мусора, поэтому у них обычно падает производительность при больших нагрузках на запись и почти полном заполнении.

Приводы


Аппаратная начинка и архитектура диска непосредственно влияет на его производительности. Для иллюстрации AnandTech приводит бенчмарки девяти современных SSD ёмкостью 1 ТБ из различных сегментов рынка, то есть разных классов.

  • Samsung Samsung 980 PRO. последний флагман NVMe от Samsung это их первая модель PCIe 4.0 для потребительского рынка, а также первая модель PRO, использующая TLC NAND вместо MLC.
  • Silicon Power US70. Один из многих приводов с контроллером Phison E16 и TLC NAND. Именно эта комбинация впервые вывела PCIe 4.0 на потребительский рынок SSD-накопителей в 2019 году, а сейчас контроллеры постепенно меняют на Phison E18.
  • Kingston KC2500. Привод PCIe 3.0 с контроллером Silicon Motion SM2262EN, который настроен на агрессивное кэширование SLC и обычно обеспечивает лучшую в своём классе производительность при низкой глубине очереди.
  • SK hynix Gold P31. Преимущества вертикальной интеграции проявляются в том, что согласованная комбинация ультрасовременного (хотя и все еще PCIe 3.0) контроллера и NAND позволяет этому 4-канальному приводу работать наравне с 8-канальными приводами, устанавливая рекорды энергоэффективности.
  • Mushkin Helix-L. Бюджетный NVMe-накопитель использует TLC NAND и сокращает затраты с помощью контроллера DRAMless Silicon Motion SM2263XT, который использует функцию буфера памяти Host Memory Buffer, заимствуя до 64 МБ оперативной памяти из системы.
  • Corsair MP400. Представляет ещё одну популярную категорию бюджетных накопителей. Здесь работает связка из дешёвой и более медленной QLC и 8-канального контроллера Phison E12S, значительное улучшение по сравнению с 4-канальным Silicon Motion SM2263 в первых накопителях QLC NVMe, таких как Crucial P1 и Intel 660p/665p. Имеется кэш DRAM, но только 512 МБ, вдвое меньше, чем в обычных или высококлассных моделях.
  • Samsung Samsung 870 EVO. совершенно новый накопитель TLC SATA от Samsung сочетает 3D NAND и контроллер последнего поколения.
  • SK hynix Gold S31. Выпущенный в конце 2019 года с 72-слойной TLC, это довольно распространённый на массовом рынке SATA-накопитель с немного более низкой производительностью, чем ведущие SATA-накопители, но хорошей ценой.
  • Samsung 870 QVO. Накопитель QLC SATA второго поколения использует тот же первоклассный контроллер, что и 870 EVO, поэтому его недостатки полностью связаны с более медленной и дешевой флэш-памятью QLC NAND.

При работе с SSD нужно понимать, что накопитель показывает максимальную производительность только под Linux, и тестировать его тоже удобнее здесь. Во-первых, Microsoft до сих пор не выпустила DirectStorage API для Windows. Во-вторых, Linux предлагает гораздо большую прозрачность и контроль над оборудованием.

Серия тестов AnandTech Storage Bench (ATSB) состоит из трёх циклов: Light, Heavy и Destroyer. В первом режиме замеряется скорость выполнения набора лёгких задач, соответствующих относительно лёгкому использованию настольного компьютеров: браузер, текстовый редактор и прочее. В режиме Heavy очередь задач возрастает на порядок, в режиме Destroyer ещё на порядок. Циклы Light и Heavy прогоняются сначала на полностью пустом диске, а потом на частично заполненном.

На странице с результатами показаны средняя скорость передачи данных, средняя задержка, задержки записи и чтения, а также эти показатели для 99-го перцентиля, и энергопотребление каждого накопителя.

Нужно заметить, что обычный юзер 99% времени использует SSD в лёгком режиме. Интенсивный режим включается только изредка, например, во время инсталляции игр или резервного копирования.

Серый график показатель нового пустого SSD, чёрный частично заполненного.

Как обсуждалось ранее, размер кэша MLC начинает серьёзно уменьшаться после заполнения диска на 50%. Это и отражается на результатах.

Средняя скорость передачи данных в режиме лёгкого использования (МБ/с)




Средняя задержка в режиме лёгкого использования (МБ/с)




Следующие тесты на среднюю скорость случайного чтения и среднюю скорость последовательной записи также запускались дважды: 1) на абсолютно пустом диске с операциями только в диапазоне первых 32 ГБ пространства; 2) при 80% заполнении без ограничения на операции. Разница между серым и чёрными столбцами отражает влияние кэширования SLC, контроллеров без буфера DRAM или с уменьшенным объёмом буфера.

Средняя скорость случайного чтения (МБ/с)




Средняя скорость последовательной записи (МБ/с)




Скорость передачи данных и средняя задержка основные показатели для типичного варианта использования SSD. Но есть и другой класс тестов синтетические. Они не столько отражают производительность привода в реальных задачах, сколько показывают разницу во внутренней архитектуре устройства, выпукло демонстрируя отличия в этой архитектуре. Поэтому разница между показателями может быть кардинальной.

Например, последовательное заполнение привода ставит целью оценить размер кэша SLC. Этот тест выходит далеко за пределы любой реальной рабочей нагрузки, а результаты сильно отличаются для разных приводов.

Последовательное заполнение привода: средняя скорость (МБ/с)




Управление питанием SSD жизненно важно для любой системы на аккумуляторах. Система управления питания поддерживает несколько режимов, в том числе простой режим неактивности (SATA ALPM, NVMe APST и PCIe ASPM), который больше подходит для настольных компьютеров и в таблицах обозначен как 'Desktop Idle', и режим глубокого сна, в котором задействуются все энергосберегающие функции, включая DevSleep ('Laptop Idle').

Потребление энергии в неактивном режиме (милливатт)




Даже без активации этих функций накопители потребляют в неактивном режиме очень мало: от 194 до 1152 мВт.

Скорость пробуждения (микросекунд)




Заключение


Накопители SSD очень сильно продвинулись за последние 10 лет. В частности, у них кардинально снизилось энергопотребление. В режиме ожидания оно гораздо меньше 1 ватта, а судя по логам, SSD обычно проводит в режиме ожидания 99% времени.

Технический прогресс в этой области действительно потрясающий, а некоторые производители считают, что накопители NVMe можно использовать вместо DRAM в неких специфических задачах. Так делает Intel с модулями Optane. В то же время средняя задержка чтения в PCI 4.0 сильно упала, поэтому обычный пользователь может и не заметить разницы PCI 4.0 по сравнению с Optane.



На правах рекламы


Наши эпичные серверы используют only NVMe сетевое хранилище с тройной репликацией данных. Вы можете использовать сервер для любых задач разработки, размещения сайтов, использования под VPN и даже получить удалённую машину на Windows! Идей может быть много и любую из них поможем воплотить в реальность!

Подробнее..

Причины массового обжорства SSD на Macbook с процессорами M1

21.05.2021 16:09:34 | Автор: admin

Мир сошел с ума. Где только не писали о проблеме повышенного аппетита на ресурс SSD-накопителей у новых моделей Macbook Air и Macbook Pro с процессорами M1. Тема обсуждалась на всех популярных технических форумах. И несмотря на массовость проблемы, все обсуждения сводились к тому, что Apple не считает это проблемой. А значит и проблемы нет. И в какую дичь люди готовы поверить для самоуспокоения вместо того, чтобы взглянуть в лицо фактам и выяснить причины стремительного выработки ресурса несъёмного SSD-накопителя.

Одни уважаемые люди говорили (писали), что протокол SMART слишком сложный, чтобы система просто взяла и спросила у контроллера SSD: "а сколько жить тебе осталось, диск?". Дескать, накопители производства Apple - штука не популярная. Где-то накосячили в драйвере. Вот он и выдаёт записанные на диск гигабайты за терабайты. А создатели софта для проверки статуса SMART люди недостаточно грамотные. Да и разные производители железа тоже за 20 лет не могут договориться о единых единицах измерения в параметрах состояния диска.

Любители заговоров выдвинули свою версию - "это всё козни проклятого Intel, уж мы то знаем откуда эти ноги растут". "Им не статус дисков проверять, а их самих проверять надо, этих продажных авторов мошеннических программ."

При всей массовости проявления обжорства SSD, простое как 2 копейки решение (полное отключение Spotlight) как будто скрывается от простых пользователей. Каждый пытается меня убедить, что расход ресурса SSD со скоростью записи 180Гб/час - это нормальное явление.

Кто-то думает, что если правда жизни на столько суровая, то Apple должна отозвать все компьютеры с данным диагнозом. Давайте смотреть фактам в глаза. Я не могу судить о том, как такие события могут происходить за бугром. Но, например, в Москве затраты на массовую смену единственной платы ноутбука будут просто колоссальными. У нас тут не завод Foxconn со 100000 китайцев. Здесь специалисты сервисных центров получают нормальную зарплату, далеко не 30000 руб. Плюс еще заплатить аренду помещения, налоги и прочие сборы. А сколько компьютеров сможет обслужить один специалист в день? в месяц? - Делайте выводы сами.

Мне кажется, Apple всё же тихо мирно пофиксит софтверный баг. А те пользователи, что уже израсходовали ресурс SSD так и останутся с тем же накопителем, который у них стоит. Может быть, в отдельных случаях плату поменяют по гарантии. Но, факт есть факт. Apple поставила новые рекорды продаж ноутбуков. И отзывать все ноутбуки просто не рационально.

Почему я решил, что проблема носит массовый характер? Во-первых, в нашей организации уже три ноутбука с процессором M1. Ноутбуки куплены (заказаны) в разное время с периодичностью в месяц. На всех трех ноутбуках диагноз положительный. Во-вторых, я переустановил разные версии MacOS минимум раз 10. Диагноз был положительным с настройками "по-умолчанию" вплоть до последней на момент публикации версии MacOS 11.2.3.

Рецепт лечения обжорства ресурса SSD

Как я и говорил, проблему можно купировать временным отключением индексирования Spotlight. Я использовал команду в терминале:

sudo mdutil -i off -a

Но эта команда решает проблему не полностью. В моём случае мне помогла команда:

sudo launchctl unload -w /System/Library/LaunchDaemons/com.apple.metadata.mds.plist

Но выполнять вторую команду стоит только с отключенной защитой CSR. Решение подойдёт далеко не всем. Обязательно найдутся и активные пользователи Spotlight и Siri. Отключать или не отключать - индивидуальный выбор каждого пользователя. Лично для меня целостность SSD важнее рабочего поиска по мета-данным.

Вместо заключения. Прошу прощения, что статья написана на скорую руку. Если нужны ссылки на разные обсуждения проблемы, по запросу я вставлю их публикацию. Заранее вангую тонны негодования маководов и технических асов в мою сторону. Все коллеги отговаривали меня писать о проблеме здесь. И я не знаю зачем я пишу эту публикацию сюда. Да и зачем вообще помогать людям? Ведь всем так нравится смотреть на мир через розовые очки.

Подробнее..

Перевод NVMe стирает разницу между памятью и накопителями

04.02.2021 20:12:33 | Автор: admin


История накопителей представляет собой гонку между носителями и вычислительными мощностями. На пути к компьютерной нирване встаёт узкое место хранение миллиардов нулей и единиц. Самый новый из игроков на этом поприще энергонезависимая память Non-Volatile Memory Express (NVMe), представляющая собой что-то вроде гибрида нескольких предыдущих технических решений.

В первом поколении домашних компьютеров в качестве накопителей использовались флоппи-диски и компакт-кассеты, но с ростом возможностей компьютеров постепенно росла и важность накопителей. К 1990-м большое распространение получили жёсткие диски, позволявшие хранить сначала мегабайты, а потом и гигабайты информации. В результате выросла необходимость в быстрой системе связи между накопителем и остальной системой. В то время чаще всего использовался интерфейс ATA (IDE) в режиме программного ввода-вывода Programmed Input-Output (PIO).

В результате технологии перешли на прямой доступ к памяти (DMA), интерфейс UDMA, также известный, как Ultra ATA и Parallel ATA, и основанные на этой системе интерфейсы SCSI в компьютерах Apple и большинстве серверов. В итоге Parallel ATA превратился в Serial ATA (SATA), а Parallel SCSI в Serial Attached SCSI (SAS). SATA в основном использовался в ноутбуках и настольных компьютерах до прихода NVMe и твердотельных накопителей.

Все эти интерфейсы разрабатывались с тем, чтобы не отставать от накопителей. В этом смысле, NVMe выбивается из общей картины своей интеграцией в систему. Также NVMe отличается тем, что не привязан к какому-то определённому интерфейсу или коннектору, что может сбить с толку. Кто может разделить M.2 и U.2, не говоря уже о том, какой протокол использует интерфейс, будь то SATA или NVMe?

Давайте-ка разбираться в чудесном и странном мире NVMe.

Обманчивый внешний вид



Элементы SATA Express, функционально схожие с M.2.

Попросите любого человека показать вам слот для NVMe на материнской плате, и скорее всего вам покажут изображение слота M.2, поскольку он стал наиболее популярным для твердотельных накопителей (ТТН) в потребительской электронике. При этом даже слот M.2 со вставленным в него твердотельным накопителем может не относиться к NVMe, поскольку этот интерфейс использует и SATA.

На плате рядом со слотом M.2 часто указывают, какую технологию он поддерживает. Также хорошей идеей будет почитать инструкцию к материнке. Причина путаницы в том, что изначально для ТТН существовал стандарт Mini-SATA (mSATA), использовавший форм-фактор PCIe Mini Card, который потом развился до форм-фактора М.2 и интерфейса U.2. Последний больше похож на интерфейсы SATA и SAS, и комбинирует два канала, SATA и PCIe, в один интерфейс для подключения ТТН.

Тем временем стандарт М.2 (после краткого экскурса в недолго существовавший стандарт SATA Express) расширили с тем, чтобы поддерживать не только SATA, но и AHCI с NVMe. Поэтому слоты М.2 часто неправильно называют слотами NVMe, кода на самом деле NVMe это протокол, основанный на PCIe, не определяющий никаких форм-факторов или типов коннекторов.


Интерфейс М.2 с ключами B и M

Тем временем сам по себе форм-фактор М.2 довольно разносторонний или запутанный, это кому как. Физически он может быть шириной в 12, 16, 22 и 30 мм, и поддерживать длины от 16 до 110 мм. На краю разъёма наносится последовательность меток, обозначающих функциональность, и совпадающих с метками на самом слоте. Чаще всего это метки В и М из списка ключевых меток, в котором, например, есть следующее:

A: 2x PCIe x1, USB 2.0, I2C и DP x4.
B: PCIe x2, SATA, USB 2.0/3.0, аудио, и т.д.
E: 2x PCIe x1, USB 2.0, I2C, etc.
M: PCIe x4, SATA и SMBus.

Получается, что физических размеров карты расширения М.2 бывает аж 32 штуки, и это ещё до того, как мы учтём 12 возможных вариантов модификаций из списка. К счастью, в основной массе промышленность, судя по всему, пришла к общему стандарту в 22 мм ширины для карт накопителей, варианты длин которых ограничены. В итоге ТТН стандарта NVMe имеют маркировку типа 2242, что означает 22 мм ширины и 42 мм длины. Карточки ТТН могут быть отмечены буквами В, М или обеими.

Важно отметить, что сегодня слоты М.2 актитвно используются в качестве расширения PCIe в стеснённых условиях. Поэтому карточки WiFi часто имеют форм-фактор М.2.

Определяя NVMe


Всё это приводит нас к основному определению NVMe: это стандартный интерфейс для накопителей, напрямую подсоединяемых к PCIe. От SATA он отличается тем, что первый преобразует протокол PCIe в протокол SATA, который затем приходится интерпретировать специальному чипу на накопителе перед тем, как можно будет выполнять какие-либо команды, связанные с хранением данных.

Вместо этого NVMe определяет интерфейс, который напрямую можно использовать в любой ОС, имеющей NVMe-драйвер. Команды отправляются на NVMe-накопитель, выполняющий их для чтения или записи или проводящий какие-то операции обслуживания типа TRIM. Поскольку можно положиться на то, что любое устройство, представившееся как NVMe-устройство, представляет собой ТТН (NAND Flash, 3D XPoint, и т.д.), протокол NVMe разработан в расчёте на низкие задержки и большую скорость передачи пакетов.


Optane SSD от Intel типа 3D XPoint работает ровно вне зависимости от нагрузок

Недавно популярность обрела такая особенность NVMe, как местный буфер памяти, Host Memory Buffer (HMB). Это попытка избавиться от необходимости буферизовать данные в DRAM используя ТТН типа NAND Flash. Особенность использует часть памяти системы в качестве буфера, относительно мало теряя при этом в быстродействии, при этом буфер в основном используется для кэширования таблицы адресов.

В долгосрочной перспективе, с учётом темпов развития накопителей, такие технологии, как 3D XPoint делают ненужными даже подобные хитрости. Скорость доступа к той же 3D XPoint ближе к показателям DRAM, чем к NAND Flash. Поскольку ТТН типа 3D XPoint не нуждаются в DRAM-буфере, увеличение их популярности может привести к тому, что NVMe будут оптимизировать уже под них.

Взламывая NVMe



Память на магнитных сердечниках 6464 (4 кБ)

Стоит задуматься, а что ещё можно сделать с NVMe, кроме как купить ТТН и засунуть его в слот M.2 B или М. Тут нужно решить, что вам больше интересно взлом накопителя (пусть это будет лишь некая разновидность DRAM or SRAM), или же самого слота М.2.

Полноразмерные слоты PCIe имеют большой размер, а карты расширения предоставляют много места для таких громоздких компонентов, как BGA-чипы и гигантские системы охлаждения. Карты расширения М.2 наоборот, предназначены для мелких и компактных решений, способных уместиться в ноутбуке. Можно, к примеру, скомбинировать FPGA с нужными блоками железа SerDes и PCIe в форм-факторе M.2, и создать компактную карту расширения для ноутбуков и встраиваемых устройств.

Недавние хаки предлагают добавить поддержку NVMe к Raspberry Pi, заменить ТТН в Pinebook Pro WiFi-картой, и считывать NVMe Flash накопитель от айфона при помощи ZIF-адаптера для PCIe.

При этом никто не запрещает попытаться скомбинировать что-нибудь очень странное к примеру, NVMe-накопитель на магнитных сердечниках.

Заключение


Оглядываясь назад на десятилетия развития вычислительной техники, видно, что различие между памятью и накопителями существовало всегда. Причём памятью всегда служили энергозависимые устройства типа SRAM или DRAM. В последнее время это различие становится всё менее значимым. NAND Flash с NVMe-интерфейсом уже обещают нам потенциально очень низкие задержки и скорость в несколько гигабайт в секунду (особенно с использованием PCIe 4.0) но и это не конец истории.

Самая горячая новинка это DIMM постоянной памяти, размещаемые в обычных слотах памяти. Они используют твердотельную технологию Intel Optane, позволяющую увеличивать объём памяти в системе до 512 Гб на модуль. Эти модули, естественно, пока что работают только в серверах Intel. Используются они для буферизации баз данных, большие объёмы которых не дают использовать в качестве буфера обычную память (например, терабайты DDR4 DIMM).

Если у нас будет очень быстрый и энергонезависимый накопитель, соединённый с контроллером памяти процессора напрямую, мы сможем уменьшить задержки до абсолютных минимумов. И хотя 3D XPoint (как разновидность памяти с изменением фазового состояния) пока ещё не такая быстрая, как DDR SDRAM, она демонстрирует нам, что может появиться после NVMe, когда разница между памятью системы и хранилищем данных совсем исчезнет или изменится до неузнаваемости.
Подробнее..

Технологии противоударной защиты жестких дисков

15.02.2021 22:09:28 | Автор: admin


Поскольку жесткий диск является не просто электронным, а электромеханическим устройством, его главными врагами были и остаются сильная вибрация и удары. Но если вибрационное воздействие приводит к снижению производительности винчестера, что объясняется отклонением блока головок от заданной траектории и повторной инициализацией процедуры позиционирования, то даже достаточно сильный толчок (не говоря уже о падении) может спровоцировать полный выход накопителя из строя. Почему HDD такие нежные и на какие меры идут производители винчестеров для повышения их надежности? Попробуем разобраться.

Удары судьбы: почему жесткие диски такие хрупкие?


Прежде всего давайте вспомним, как устроен жесткий диск. Внутри HDD находится набор тонких металлических пластин (в просторечии блинов), покрытых слоем ферромагнетика вещества, способного сохранять намагниченность в течение длительного времени даже при отсутствии воздействия внешнего магнитного поля. Эти пластины вращаются с огромной скоростью от 5400 оборотов в минуту и более, перемещаясь относительно блока головок, состоящего из нескольких штанг, приводимых в движение так называемыми звуковыми катушками.

На острие каждой штанги расположены пишущие головки и считывающие сенсоры. Пишущие головки призваны менять направление векторов намагниченности дискретных участков ферромагнитного покрытия (магнитных доменов) в соответствии с командами, поступающими от контроллера HDD. При этом каждый домен кодирует один бит информации, принимая логическое значение 0 или 1 в зависимости от направления вектора намагниченности.



В основе работы считывающих модулей современных жестких дисков лежит гигантский магниторезистивный эффект: электрическое сопротивление сенсора меняется под действием магнитного поля доменов ферромагнитного слоя, что и фиксируется контроллером HDD, который, в свою очередь, интерпретирует увеличение или уменьшение сопротивления относительно заданного уровня как логический ноль или единицу.

Чтобы добиться высокой плотности записи, магнитные головки пришлось сделать чрезвычайно маленькими, ведь именно от их габаритов зависит ширина треков на магнитной пластине. Размер пишущего модуля в современных винчестерах не превышает 120 нанометров, а считывающего 70 нанометров.

Сопоставление размеров пищущей и считывающей головок жесткого диска и ребра 10-центовой монеты

Именно благодаря такой миниатюризации плотность записи данных удалось довести до впечатляющего показателя 1 Тбит/дюйм2, и это с помощью традиционного метода CMR. Однако у такого подхода существует и побочный эффект. Поскольку размеры магнитных головок существенно сократились, снизилась и сила создаваемого ими магнитного поля, что вынудило инженеров значительно уменьшить расстояние между головками и поверхностью магнитных пластин.

Когда HDD функционирует, магнитные головки парят над поверхностью блинов на высоте всего около 1215 нанометров, причем достигается это за счет экранного эффекта: под каждой штангой, словно под крылом взлетающего самолета, образуется воздушная подушка, обеспечивающая необходимую подъемную силу. Нетрудно догадаться, что сами по себе магнитные пластины должны быть идеально гладкими и не иметь каких-либо неровностей. Это и правда так: перепад высот на поверхности каждой пластины не превышает 0,6 нанометра. Немыслимая точность!



Однако подобная конструкция имеет один весьма существенный недостаток: жесткий диск оказывается чрезвычайно уязвимым к ударным воздействиям во время работы. Ударостойкость современных накопителей потребительского и корпоративного класса достигает 300350G за 2 мс в покое и лишь 3050G за 2 мс в режиме чтения/записи.

Столь высокий разброс значений объясняется тем, что пока диск отключен от питания, блок головок остается припаркованным. Рассмотрим фотографию ниже: каждый кронштейн получает дополнительную точку фиксации, опираясь на пластиковые пилоны в парковочной зоне, причем сами головки не касаются пластика, а нависают над ним. В таком состоянии им не страшны ни сильная вибрации, ни даже удары.



В рабочем же состоянии актуатор HDD лишен дополнительной опоры, поэтому удар достаточной силы, вектор которого будет направлен перпендикулярно к плоскости диска (или под незначительным углом к перпендикулярной оси), неизбежно приведет к соприкосновению головок и магнитных пластин. Схематично этот процесс можно изобразить так.



Выше приведен самый удачный сценарий развития событий: из-за миниатюрных размеров головок и огромной скорости вращения магнитных пластин пишущий и считывающий модули с большой долей вероятности попросту оторвутся от кронштейна и жесткий диск моментально придет в негодность. Если же вам все-таки повезло и дело ограничилось лишь появлением царапин на ферромагнитном слое, не стоит думать, что в этом случае удастся отделаться некоторым количеством битых кластеров. Увы, жесткий диск начнет медленно, но верно умирать, а количество ошибок чтения/записи множиться с каждым днем. И вот почему.

Проблема 1: частицы ферромагнетика остаются на поверхности магнитных пластин


Хотя блины винчестера и вращаются с огромной скоростью, осколки ферромагнитного слоя никуда не денутся: они слишком маленькие и легкие, так что величины магнитного поля доменов будет вполне достаточно, для того чтобы противостоять центробежной силе и удерживать мельчайшие частицы. Само по себе их присутствие на поверхности магнитных пластин чревато ошибками чтения/записи даже в том случае, если они не будут непосредственно соприкасаться с самими головками.

Проблема 2: частицы ферромагнетика играют роль абразива


Поскольку расстояние между поверхностью магнитных пластин и головок чрезвычайно мало, микроскопические частицы ферромагнетика будут неизбежно их задевать, постепенно стачивая подобно наждачной бумаге. Да и сама поверхность блинов станет все больше и больше царапаться, что будет выражаться в постепенном увеличении количества битых кластеров.

Проблема 3: считывающий сенсор будет нагреваться под действием силы трения


Когда частицы ферромагнетика, движущиеся на огромной скорости, задевают сенсор, последний, в силу микроскопических размеров, мгновенно разогревается, из-за чего сопротивление в датчике резко повышается и данные со считывающей головки интерпретируются неверно. Это приводит к многочисленным ошибкам чтения даже на том этапе, когда считывающая головка еще исправна.

Повреждение блока головок отнюдь не единственное (хотя и наиболее тяжелое) последствие ударного воздействия на жесткий диск. В зоне риска также находятся подшипники магнитных пластин. Сильный удар шарика по обойме подшипника может привести к ее деформации, повреждению самого шарика или дорожки качения (иногда ко всему перечисленному сразу). Хотя HDD продолжит работать, поврежденный подшипник будет сильно вибрировать, что негативно скажется на производительности винчестера и повлечет за собой преждевременный износ мотора шпинделя.



И наконец, самое меньшее из зол проскальзывание магнитных пластин в пакете, когда один или несколько блинов, получив дополнительное ускорение, проворачивается относительно своих собратьев. При этом именно данная проблема встречается значительно реже всех, перечисленных выше, и оказывает минимальное влияние на работоспособность HDD.

Ключевые подходы к защите HDD от ударных воздействий


Хотя история жестких дисков насчитывает более 64 лет, производители винчестеров всерьез озаботились их противоударной защитой лишь в 1997 году. Такое отношение выглядит легкомысленным, но на самом деле объяснить промедление достаточно просто.

В конце 90-х мода на компактные внешние HDD лишь начинала набирать обороты. Отправной точкой можно назвать появление IBM Microdrive, выпущенных в 1999 году, о которых мы уже писали ранее в материале, посвященном внешним накопителям данных. А между тем именно портативные накопители наиболее уязвимы.

Вскрытый IBM Microdrive в сравнении с монетой достоинством 50 евроцентов

Представить ситуацию, когда внутренний жесткий диск, будучи уже установленным в ПК, может выйти из строя от удара, довольно сложно (разве что вы специально станете бить кувалдой по его корпусу). Массивный каркас Full Tower вполне способен обеспечить адекватную защиту установленных внутри винчестеров, эффективно поглощая кинетическую энергию. Если вы, к примеру, случайно заденете компьютер ногой, воздействие на жесткий диск будет гораздо слабее 30G за 2 мс (и даже меньше 10G за 2 мс именно столько могли выдерживать HDD, выпущенные на рубеже XXXXI веков), так что здесь предпринимать какие-то особые меры не имеет практического смысла.

Корпуса лэптопов тех времен тоже были не чета современным сверхтонким моделям: ноутбуки 90-х годов обеспечивали вполне достойную защиту установленных в них винчестеров, пусть и не такую надежную, как стационарные компьютеры.

Старые ноутбуки были куда прочнее. На фото Siemens Nixdorf PCD-5ND

Напротив, в портативных накопителях данных HDD отделяет от внешнего мира лишь тонкий пластиковый корпус, неспособный поглотить всю энергию удара. Каким же образом в этом случае винчестер можно защитить от повреждения?

Первопроходцем в сфере разработки систем противоударной защиты стала сама IBM. Именно инженеры американской корпорации создали технологию с незамысловатым названием Ramp Load/Unload, которая сегодня используется повсеместно в каждом жестком диске независимо от ценовой категории. Речь идет об упомянутой выше парковочной зоне и системе пластиковых пилонов, фиксирующих штанги блока головок, пока HDD отключен от питания. Для своего времени такое решение стало по-настоящему инновационным, позволив увеличить ударостойкость винчестеров в покое в несколько раз.

В старых моделях жестких дисков система парковки блока головок в принципе отсутствовала

Среди таких же простых, но достаточно эффективных мер необходимо упомянуть и технологию Samsung ShockSkinBumper (SSB). Как нетрудно догадаться по названию, суть инновации заключается в наличии встроенного в корпус накопителя бампера, представленного тонким силиконовым ободком, облегающим металлическую крышку гермозоны винчестера.

Если присмотреться, то можно заметить кромку Samsung ShockSkinBumper

Согласно данным Samsung, бампер оказался чрезвычайно эффективен и помог снизить втрое перегрузки, воздействующие на внутренние узлы винчестера при ударе или падении, значительно повысив его ударостойкость в состоянии покоя.

Что касается проблемы повреждения подшипников, то изначально производители винчестеров экспериментировали с формой обоймы и размерами тел качения, стремясь найти оптимальный баланс между величиной площади соприкосновения шариков с дорожками (чем она больше, тем лучше подшипник переносит ударные воздействия) и сопротивлением, возникающим при трении их поверхностей друг о друга. В дальнейшем на смену обычным подшипникам качения пришли более совершенные гидродинамические подшипники скольжения, в которых вращение вала шпинделя происходит в слое жидкости, удерживающейся внутри втулки за счет создающейся при работе двигателя разницы давлений. Такой подход помог не только повысить ударостойкость жестких дисков, но и снизить уровень вибрации и шума, создаваемых ими во время работы, а заодно повысить их отказоустойчивость.

Нет шариков нет проблем

Однако главное, чего стремились добиться все без исключения производители винчестеров, максимально защитить от ударных воздействий блок головок. Пионером на этом поприще стала компания Quantum, представившая еще в 1998 году собственную систему защиты жестких дисков Quantum Shock Protection System (SPS), первая практическая реализация которой увидела свет в составе винчестеров Fireball EL.

Жесткий диск с улучшенной ударостойкостью Fireball EL от компании Quantum на 2,5 гигабайта

В общей сложности пакет улучшений SPS включал в себя 14 технологических нововведений, направленных на поглощение и компенсацию ударного воздействия на актуатор. Уже в 1999 году свет увидела доработанная система SPS II, а первым диском с поддержкой обновленной противоударной технологии закономерно стал Fireball Ict.

Параллельно с Quantum изыскания в области защиты винчестеров от ударов и падений вел и их прямой конкурент Maxtor Corporation. Результатом усилий инженеров компании стала технология ShockBlock, нашедшая применение в накопителях алмазной линейки DiamondMax.

Жесткий диск Maxtor DiamondMax Plus 21

Усовершенствованием блока головок активно занимался и Samsung: запатентованная технология корейской корпорации, получившая название Impact Guard, включала в себя ряд усовершенствований конструкции несущих кронштейнов, подвески и системы стабилизации. Не отставала и Western Digital: набор улучшений Shock Guard, специально разработанный для жестких дисков марки Caviar, помог довести ударостойкость жестких дисков, выпускаемых компанией, до значений, сопоставимых с показателями современных HDD.

Досконально описывать каждую из перечисленных технологий не имеет смысла: конструктивные решения, призванные повысить ударостойкость жестких дисков, так или иначе повторяли друг друга, хотя и имели различия в способах реализации. Перечислим основные приемы, которые брали на вооружение производители HDD, чтобы повысить их ударостойкость:

  • поглощение кинетической энергии конструкционными элементами корпуса;
  • уменьшение хлесткости кронштейнов за счет повышения их жесткости;
  • установка амортизирующей подвески головок, позволяющей минимизировать повреждения модулей чтения/записи и ферромагнитного слоя при контакте между ними.

Последний пункт требует дополнительных пояснений. В ходе испытаний было установлено, что степень разрушения ферромагнитного покрытия, равно как и вероятность отрыва магнитных головок, зависит не столько от силы удара, сколько от того, как именно модули чтения и записи соприкасаются с поверхностью блинов. Самые обширные повреждения закономерно наблюдаются в том случае, если головка задевает пластину краем или углом.

Усовершенствованный механизм подвески позволил добиться того, чтобы магнитные головки соприкасались с пластинами плашмя, всей своей поверхностью, как это показано на приведенной ниже схеме.



Поскольку их поверхности практически идеально гладкие, вероятность образования сколов (и тем более полного отрыва магнитных головок) заметно снижается, а при самом благоприятном стечении обстоятельств и ферромагнитное покрытие, и сами модули остаются невредимыми.

Неубиваемые накопители для спорта и активного отдыха


Хотя перечисленные меры помогли значительно повысить надежность жестких дисков, чуда так и не произошло. Как ни крути, но с физикой не поспоришь, и если тот же Maxtor в свое время смог довести ударостойкость винчестеров в состоянии покоя до впечатляющих 1000G за 2 мс, пусть и на тестовых образцах, то обеспечить сопоставимый уровень защиты блока головок во время работы HDD оказалось практически невозможно.

Однако с удешевлением флеш-памяти ситуация на рынке в корне изменилась, а потребность в противоударных внешних жестких дисках практически исчезла, ведь им на смену пришли твердотельные накопители. В силу технологических особенностей, SSD оказываются в значительно более выгодном положении: они не содержат подвижных компонентов, а значит, все, чего необходимо добиться, чтобы получить на выходе устройство, устойчивое к ударам, создать достаточно прочный корпус, способный обеспечить должный уровень защиты печатной платы, что гораздо проще по сравнению с разработкой динамических систем компенсации. Впрочем, лучше один раз увидеть, чем сто раз услышать. Просто посмотрите на эту фотографию.



На туристическом карабине, пристегнутом к рюкзаку, висит SanDisk Extreme Portable SSD компактный твердотельный накопитель, ориентированный на поклонников активного отдыха. Если подобным образом обращаться с обычным HDD, то он почти наверняка придет в полную негодность уже через пару марш-бросков. Однако SSD поломка не грозит: благодаря резиновопластиковому корпусу он способен выдерживать перегрузки вплоть до 1500G за 2 мс, что в 5 раз больше, чем ударостойкость жесткого диска в покое, и практически в 30 раз больше по сравнению с ударостойкостью HDD при чтении/записи данных. При этом показатель 1500G является константой и никак не изменяется, даже когда вы работаете с твердотельным накопителем.

Помимо того, что SanDisk Extreme Portable SSD способен выдерживать значительные перегрузки, устройство превосходно защищено от воздействия пыли и влаги по стандарту IP55.



Первая цифра индекса указывает на то, что SSD имеет пылезащищенное исполнение: хотя некоторое количество мелкодисперсных частиц и может проникнуть внутрь его корпуса, это никак не скажется на работоспособности устройства. Вторая цифра говорит о том, что корпус твердотельного накопителя способен противостоять даже сильным водяным струям, падающим с любого направления.

С водонепроницаемостью связана и еще одна интересная особенность данной серии накопителей. Обратите внимание: разъем USB Type-C, расположенный на нижнем торце, не имеет резиновой заглушки, которую обычно ожидаешь увидеть на подобном устройстве.



Недоработка? Отнюдь нет. Все дело в том, что порт никак не сообщается с внутренними полостями корпуса: он полностью обособлен и герметичен, так что попавшая в него вода никак не навредит электронным компонентам SSD, хотя перед использованием разъем и придется как следует просушить. Такой подход позволил сделать твердотельный накопитель еще надежнее и долговечнее, ведь любые заглушки имеют свойство разбалтываться со временем.

Что же касается производительности, то и здесь SanDisk Extreme Portable не подкачал, демонстрируя устойчивую скорость передачи данных 550 МБ/с. Если же вам этого недостаточно, то рекомендуем обратить внимание на Pro-версию устройства.



У накопителей старшей линейки немного изменился дизайн: боковая оранжевая вставка и измененная форма проушины сделали облик SSD более спортивным и выразительным. Но главное отличие Pro-версии от обычной кроется в поддержке высокоскоростного интерфейса USB 3.2 Gen 2, благодаря чему быстродействие накопителя возросло до впечатляющих 1050 МБ/с. С такой скоростью даже на передачу 100 ГБ данных уйдет не более 2 минут.



Хотите большего? В этом году свет увидели обновленные версии отказоустойчивых накопителей SanDisk Extreme Portable V2. Как и ранее, семейство компактных SSD разделено на две линейки: стандартную и Pro. С точки зрения защиты от ударов, пыли и воды ровным счетом ничего не изменилось, однако их производительность возросла ровно в два раза.

SanDisk Extreme Portable V2 обзавелись USB 3.2 Gen 2 и теперь могут похвастаться скоростью 1050 МБ/с в операциях чтения и до 1000 МБ/с при записи файлов. В свою очередь, SanDisk Extreme Portable Pro V2 придутся по вкусу обладателям устройств с поддержкой USB 3.2 Gen 2 x 2: впечатляющие 2000 МБ/с делают этот SSD самым быстрым среди защищенных моделей, доступных на рынке, и позволяют в считанные секунды передавать даже весьма объемные файлы, что наверняка понравится любителям фото- и видеосъемки, тревел-блогерам, журналистам и другим создателям контента.



В качестве же дополнительного бонуса необходимо упомянуть встроенную поддержку аппаратного шифрования AES с 256-битным ключом, которое на сегодняшний день является одним из наиболее надежных методов криптографической защиты данных. Таким образом, с новыми SanDisk Extreme Portable вы можете быть на 100% спокойны за сохранность ценной для вас информации.
Подробнее..

Жесткие диски иSSDSynology паззл сложился

17.03.2021 12:07:26 | Автор: admin

КомпанияSynologyуже давно выпускает различные системы хранения данных, но жестких дисков иSSDв ассортименте до сих пор не было. Что побудилоSynologyпредставить на рынок собственные накопители? И чем они лучше конкурентов? Давайте разберемся. И начнем мы с жестких дисков.

В поисках надежности

При выборе системы хранения данных многие даже не задумываются, насколько важную роль играют жесткие диски. Между тем требования в бизнес-окружениях становятся все более строгими, здесь требуется не только высокая производительность, но инадежность и предсказуемость.

Synologyконтролирует все компоненты, из которых собираютсяNAS. Компания разрабатывает операционную системуDiskStationManager(DSM) и приложения, которые формируют программную экосистему. Что позволяет оптимизировать аппаратную и программную составляющую под слаженную работу. Но как быть с сотнями разных моделейHDDна рынке?

Synologyуже давно проводит расширенные тесты совместимости, по итогам которых рекомендует те или иные модели жестких дисков в списке совместимости с аппаратными компонентамиHCL(hardwarecompatibilitylist), который еще называют списком совместимости свендорамиQVL(qualifiedvendorlist). Надо сказать,подобные тесты требуют немалых сил и затрат.

У производителей жестких дисков обычно насчитывается не менее четырех линеекHDD(настольные, видеонаблюдение,NAS, корпоративные) и различные варианты емкости (2, 4, 6, 8, 10, 12, 14, 16, 18 Тбайт и выше), причем их приходится тестировать под различными системами хранения, которых за последние пять лет насчитывается уже более 60.

Поэтому не секрет, что многие результаты тестированияHDD"наследуются" по другим линейкам, вариантам емкости и системам хранения. У производителейNASпросто нет времени и ресурсов, чтобы протестировать все возможные комбинации, исходя из упомянутого разнообразия.

Однако рынок накопителей постоянно меняется. ПроизводителиHDDпредставляют новые варианты, иногда под старыми модельными номерами, даже если технология записи, прошивка или техпроцесс принципиально различаются. Даже вроде бы незначительные изменения на аппаратном или программном уровнеHDDмогут привести к проблемам, особенно при интенсивных нагрузках на систему хранения данных.

Что еще хуже, не все производители жестких дисков облегчают задачу для потребителей, которымприходится покупать "кота в мешке"без подробных спецификаций и технических характеристик. Со стороныSynologyподобная секретность производителей жестких дисков тоже затрудняет сертификациюHCL.

Для надежной работы системы хранения требуется предсказуемость. И только переход на жесткие диски собственного производства позволитSynologyобеспечить предсказуемость для своих клиентов они могут быть уверены, что специалистыSynologyвыбрали самое лучше.

Дополнительные преимущества

ЦельSynologyзаключалась в поиске наиболее надежных жестких дисков, для этого использовалась методика стрессового тестирования, которую компания применяет уже два десятилетия. Жесткие дискиHAT5300тестировались более 300.000 часов на каждой платформе, выпущенной после 2017 года.

Стрессовые тесты, состоящие из тысяч тестовых прогонов, симулируют окружение дата-центров и сценарии нагрузки 24/7. Проводились и простые тесты, такие как перезагрузка системы при разных температурных условиях, и сложные, связанные с доступом на уровне файлов. Задача ставилась в проверке работы накопителей в неидеальных и "тяжелых" условиях.

Впрочем, инженерыSynologyуделяли внимание не только надежности, но и производительности. Вертикальная интеграция между системами хранения и жесткими дисками позволяет оптимизировать их друг под друга. В итоге удалось добиться увеличения производительности до 23% по сравнению со сравнимыми жесткими дисками на рынке.

КлиентыSynologyполучат не только тщательно протестированное решение, но и самые быстрые жесткие диски на рынке для систем хранения данныхSynology.

Тесты оценивали пропускную способность последовательного чтения при обращении нескольких клиентов.Synologyиспользовала 12 жестких дисков в системеSA3600, которые были объединены в массивRAID5. Для сравнения были взяты жесткие диски идентичной емкости 12 Тбайт и класса (Enterprise). Нагрузка выполнялась с помощью тестаIOMeter(блоки по 64 кбайт). Как можно видеть по графику, на системахSynologyжесткие дискиHAT5300 обеспечили более высокую последовательную скорость передачи данных.

Тесная интеграция сDSMдает и другие преимущества, такие как обновление прошивкиHDD, которое выполняется вместе с обновлением ОС. Знание всех спецификаций накопителей и их характеристик упрощает поиск проблем и их исправление в будущем, если таковые возникнут.

Наконец, поскольку теперь переменных в уравнении меньше,Synologyможет обеспечивать более быструю и эффективную поддержку клиентов.

Фокус на корпоративных клиентов, но в выигрыше оказываются все

Представив собственные накопители,Synologyсделала важный шаг вперед. Системы храненияSynologyтеперь стали еще более надежными, упростились поддержка и обслуживание, увеличилась производительность.

Проработанная годами методикавалидациипродуктов позволяет наиболее эффективно провести стрессовое тестирование. Что, как надеются инженерыSynology, увеличит доверие к продуктам компании со стороны корпоративных клиентов.

Первый пул на трех дисках HAT5300 8TBвRAID5, сетевое хранилищеSynologyDS1621xs+. Он используется для хранения обычных данных, когда высокая производительность ввода/вывода не требуется.

К этому можно добавить многолетнюю компетенцию и ноу-хау инженеровSynologyпо интеграции накопителей вDSM.

ЛинейкаHAT5300 не просто еще одни жесткие диски на рынке, это огромный шагSynologyв сторону повышения надежности, предсказуемости и производительности систем хранения данных. В конечном итоге в выигрыше окажутся все клиентыSynology.

СпецификацииHAT5300

Перейдем к спецификациям жестких дисков HAT5300. Жесткие диски пока представлены в трех вариантах емкости на 8, 12 и 16 Тбайт. Все они относятся к корпоративному классу (7.200 об/мин, кэш 256/512 Мбайт, нагрузка записи 550 Тбайт, гарантия 5 лет и т.д.). Ниже приведены ключевые спецификации новыхHDD, полную таблицу спецификаций можно посмотретьна сайтеSynology.

  • Обновление прошивкиHDDчерезSynologyDSM

  • Максимальная скорость до 274 Мбайт/с, для меньших емкостей указывается 230-262 Мбайт/с

  • Заявлен прирост последовательной скорости чтения в окруженииSynologyNASдо 23%

  • Скорость вращения шпинделя 7.200 об/мин у всех емкостей

  • Кэш 256 или 512 Мбайт, в зависимости от емкости

  • Рассчитаны на работу в режиме 24/7

  • Протестированы 300К часов, чтобы гарантировать стабильную производительность в стрессовых условиях

  • Время наработки на отказ 2,5 млн. часов у всех моделейHDD

  • Нагрузка записи 550 Тбайт в год

  • Гарантия 5 лет (только при использовании в совместимыхSynologyNAS)

В Диспетчере хранения сетевого хранилищаSynologyDS1621xs+ отображаются жесткие дискиHAT5300-8T.

Если обратиться ктаблице спецификаций, жесткие дискиSynologyHAT5300потребляют меньше или равное количество энергиив режиме бездействия и под нагрузкой по сравнению с корпоративными конкурентами такой же емкости, при этом они обеспечиваютболее высокую скорость передачи данных. Также иуровень шума ниже.

Кроме спецификаций не следует забывать овозможности обновления прошивкичерезDiskstationManager(DSM). Прошивку жестких дисков можно обновлять без их извлечения изNASи использования сторонних решений (подключение к ПК, запуск специальных утилит для прошивки). Что снижает время простоя хранилища и риск человеческой ошибки. Кроме того, теперь проще гарантировать, что все накопителиNASбудут использовать одинаковую версию прошивки. Независимо от того, когдаHDDбыли добавлены в массив и при каких условиях.

По сравнению с жесткими дисками других производителей линейкаSynologyHAT5300 выглядит очень привлекательной, поскольку спецификации весьма впечатляют. Мы получаем жесткие диски корпоративного класса, которые можно использовать максимально широко, в том числе и вNASклассаSOHOи домашних системах.

Дополнительные подробности жестких дисков HAT5300 можноузнать на сайтеSynology.

2,5" накопителиSAT5200

В 2020 годуSynologyвыпустила собственную линейку твердотельных накопителей SAT5200, которые ориентированы, главным образом, на использование всистемахFlashStation. В данном случае акцент ставится на максимальной производительности ввода/вывода и сокращении задержек в работе критически важных служб и приложений.SSDпредназначены для обработки интенсивных круглосуточных рабочих нагрузок без влияния на долговечность.

Synologyзаявила отличную нагрузку записи1,3DWPD, то есть накопитель может ежедневно перезаписываться 1,3 раза от своей емкости в течение гарантийного срока. Производительность произвольной записи блоками по 4 кбайт составляетдо 67.000IOPS.

Использование SAT5200 в составе систем FlashStation позволяет добиться уровня производительности 138 тысячIOPSiSCSIблоками по 4 кбайт (FS3400), 195 тысяч (FS3600) или 226 тысяч (FS6400).

Накопители SAT5200 ориентированы на интенсивные нагрузки, такие как обработка онлайн-транзакций (OLTP), базы данных и развертывание виртуализации. Поэтому они вряд ли будут интересны пользователям классаSOHOи домашним энтузиастам. Конечно, купить такойSSDможно, он будет работать вNASс высокой производительностью, но цена решения будет непропорциональной.

На сетевом хранилищеSynologyDS1621xs+ был создан второй пул на трех SAT5200 для высокой производительности ввода/вывода.

С другой стороны, если вNASс большим числом отсеков нужен отдельный массив с высокой производительностью ввода/вывода и минимальными задержками, то установить один или несколько SAT5200 можно. Здесь все зависит от сценариев использования.

Наконец, если вNASSynologyнет отдельного разъемаM.2, то дляSSD-кэширования можно выбрать и SAT5200. Но придется пожертвовать слотом дляHDD,что нежелательно.

Дополнительные подробностиSSDSAT5200 можно узнатьна сайтеSynology.

Кэширование: за и против

Твердотельные накопители NVMe серииSynologySNV3000 занимают отдельную нишу, поскольку они предназначены не для создания массивов хранения данных, а длякэширования сложных рабочих нагрузок в многопользовательской среде. Высокая производительность ввода/вывода повышает быстродействие системы и ускоряет обработку часто используемых данных.

ЛинейкаSNV3400в формате M.2 2280 NVMeориентирована наSynologyNASсо встроенными слотамиM.2. А линейкаSNV3500в формате M.2 22110 NVMe на стоечные серверыSynology. У моделей SNV3500 удлинение формата позволило добавить конденсаторы для защиты от сбоя электропитания.

Кэш наSSDили флэш-памяти являетсявесьма выгодным средством увеличения производительности массивовHDD, поскольку наиболее часто используемые данные хранятся наSSD. Конечно, отSSD-кэша выигрывают не все сценарии. Ниже мы как раз об этом и поговорим.

Сначала следует узнать, даст лиSSD-кэш значимый прирост в выбранном сценарии. Затем следует определиться с кэшем "только на чтение" или "на чтение/запись". И на последнем этапе подбираются оптимальныеSSD.

Для каких сценариев рекомендуетсяSSD-кэш?

SSD-кэш увеличивает производительность в сценариях, когдатребуется частый доступ к случайно расположенным блокам данных. Как правило,SSD-кэш увеличит производительностьSynologyNASв следующих сценариях:

  • Файловый сервер (чем больше пользователей обращаются одновременно, и чем больше мелких файлов им требуется, тем больше будет выигрыш производительности). Под мелкими файлами подразумевается объем меньше 1 Мбайт.

  • ХранилищаiSCSIиFibreChannel

  • ВиртуальныемашиныиSynology Virtual Machine Manager

  • Сервер баз данных

  • Web-сервер

  • Повторяющиеся задачи резервирования данных черезSynologyActiveBackupforBusiness

  • Почтовый сервер

ИспользоватьSSD-кэш не рекомендуется, если объем часто используемых данных наSynologyNASпревышает максимальную емкость кэшаSSDили массив постоянно находится под высокой нагрузкой. Сброс кэша на дисковый массив требует определенных ресурсов, он может повлиять на производительность, если выполняется не в часы с минимальной нагрузкой. Мырекомендуем хранить большие объемы часто используемых данных на массивах, полностью состоящих изSSD, например, SAT5200, о чем рассказано выше. То же самое касается и запуска сценариев с интенсивной нагрузкой.

Не рекомендованные сценарии

SSD-кэш не будет улучшать производительность в сценариях, где преобладает последовательный доступ к данным. Поэтому прирост производительности отSSD-кэша будет минимальным, еслиSynologyNASиспользуется для следующих сценариев:

  • Файловый сервер, который используется для скачивания/закачки крупных файлов

  • Файловый сервер, у которого преобладает последовательный доступ

  • Стриминг/воспроизведение видео

Кэш только на чтение или на чтение/запись?

SynologyNASпозволяет выбиратьдва типа кэшаSSD: только на чтение или на чтение/запись. Оба типа полезны для разных сценариев.

Выбор режима кэша.

Режим кэшаSSD

Поддерживаемые типыRAID

КоличествоSSD

Сценарии

DSM 6.2

DSM 7.0

Мин.

Макс.

Только на чтение

RAID 0

RAID 0/1/10

1

12

Мелкие файлы (или доступ в виде случайных мелких блоков), которые часто считываются, при этом почти не изменяются, новых файлов на том добавляется немного. Примеры: материалы для обучающего курса, доступные студентам; цифровая библиотека;web-страницы для отображения черезweb-сервер.

На чтение/запись

RAID 1/5/6

RAID 1/5/6/10

2

12

Мелкие файлы (или доступ в виде случайных мелких блоков), которые часто и считываются, и записываются. Примеры: базы данных, хранилища виртуальных машин.

SSD-кэш с чтением/записью всегда имеет избыточность. Если для кэша только для чтения требуется одинSSD, то для кэша чтения/записи нужны уже не меньше двухSSD.

Выбор устройствM.2 для кэширования.

SSD-кэш с чтением/записью возможен только на массиве с избыточностью. В данном случае дваSSD M.2вRAID 1.

Требования по оперативной памяти

У кэшаSSDимеются дополнительные требования по системной памяти.

  • Для каждого гигабайтаSSD-кэша выделяется 416 кбайт системной памяти

  • Максимум, одну четверть системной памяти можно выделить под поддержкуSSD-кэша

  • Для поддержкиSSD-кэша можно использовать всю системную память, установленную дополнительно

  • SSD-кэш нельзя сделать крупнее, чем позволяет системная память

Пример: для создания 800-ГбайтSSD-кэша требуется 800x416 = 332.800 кбайт = 333 Мбайт системной памяти.

Для 372 Гбайт кэша требуется 151,1 Мбайт системной памяти.

Подбираем правильныеSSD

При выборе кэширующихSSDдляSynologyNASследует оцениватьнадежность, стабильность производительности и защиту от сбоя электропитания.

Надежность: производители публикую значение нагрузки записиDriveWritesperDay(DWPD), которое указывает, сколько раз можно полностью перезаписать емкость накопителя в день на протяжении гарантийного периода.

Стабильность производительности:SSDдолжен показывать хорошие результаты по случайным операциям чтения/записи блоками по 4Kза определенное время. Данная производительность обычно представлена показателемIOPS(число операций ввода/вывода в секунду).ТакжеSSDдолжен гарантировать определенные минимальные задержки. Высокие значенияIOPSи стабильные низкие задержки очень важны для корпоративных окружений.

Защита от сбоя электропитания: если вSSDвстроена подобная защита, то после отключения электропитания данные не будут потеряны,SSDвернется к нормальной работе после восстановления питания.

Специально для функцийSSD-кэшированияSynologyпредлагает накопители форматаM.2 2280 и 22110NVMeв линейкахSNV3400иSNV3500, а также карты расширенияM2D20иE10M20-T1с двумяSSDM.2. Причем в последнем случае карта расширения предлагает еще и порт 10 Гбит/с.

НакопителиM.2 имеют расчетную ежедневную нагрузку записиDWPD0,68на протяжении пяти лет гарантии. Последовательная скорость чтения составляет3.100 Мбайт/с, записи 550 Мбайт/с (400 Гбайт) или1.000 Мбайт/с(800 Гбайт). У 400-ГбайтSSDзаявлена скорость случайного чтения блоками по 4 кбайт до 205KIOPS, у 800-Гбайт до375KIOPS. Производительность случайной записи блоками по 4 кбайт составляет 40К или70KIOPS, в зависимости от емкости. У накопителейM.2 "длинного" форм-фактора 22110 имеется дополнительная защита от сбоев электропитания.

Дополнительные подробности M.2 NVMe можно узнатьна сайтеSynology.

Производительность кэширования

Здесь мы хотели бы порекомендовать видеоролик, на котором показана производительностьвиртуальной машиныWindows10 под управлениемSynologyVirtualMachineManagerна массиве изHDDс кэшированием и без. Выше мы как раз отмечали, что сценарий виртуальных машин является рекомендованным дляSSD-кэша.

Без кэширования виртуальная машина в тестеCrystalDiskMark7 показала353 Мбайт/спо последовательному чтению и 189 Мбайт/с по последовательной записи. По случайному чтению и записи ситуация хуже. С очередьюQ32T16 результаты составили5,56и27,57 Мбайт/спо чтению и записи, с очередьюQ1T1 0,84и13,49 Мбайт/с, соответственно.

После активации кэша чтения/записи результаты оказались существенно выше:664 Мбайт/спо последовательному чтению, скорость записи немного "просела". ПроизводительностьIOPSувеличилась до85,89и100,84 Мбайт/ссочередью Q32T16 по чтению и записи, с очередьюQ1T1рост тоже заметный до12,44и27,66 Мбайт/с, соответственно.

К первому разделу на жестких дисках подключен кэшSSDдля ускорения работы.

Заключение

В статье мы рассмотрели историю создания жестких дисковSynologyHAT5300, а также преимущества по сравнению с обычнымиHDD. ДляNASSynologyжесткие диски HAT5300 станут лучшим выборомпо многим причинам, в том числе по производительности, надежности, удобству обслуживания и прошивки. Мы получаем жесткие диски корпоративного класса, которые можно использовать максимально широко, в том числе и в NAS для дома и малого/среднего офиса.

2,5"SSDSAT5200 ориентированы на интенсивные нагрузки, такие как обработка онлайн-транзакций (OLTP), базы данных и развертывание виртуализации. Поэтому они вряд ли будут интересны домашним энтузиастам. Разве что в некоторых специальных сценариях.

А вотSSDM.2 в линейкеSNV3400емкостью на 400 или 800 Гбайт можно рекомендовать для усиления современных сетевых хранилищSynology, оснащенных слотамиM.2. С помощью SNV3400 можно легкодобавить уровень кэширования данных, который даст преимущества во многих сценариях. В статье мы как раз из привели. В принципе, для кэширования можно использовать и упомянутый 2,5"SSD, но при этом теряется драгоценный слотHDD.

СегодняSynologyпредлагает и различные системы хранения данных, и накопители в ассортименте. Поэтому компания может предоставить готовые вертикальные решения со всеми оптимизациями производительности и гарантиями надежности. Паззл сложился.

Подробнее..

Подключаем SSD форм-фактора М2 к материнке, у которой нет разъема М2 и делаем этот SSD системным. Танцы с бубном

02.04.2021 16:10:53 | Автор: admin

Предыстория

Давным-давно, когда в мире жестких дисков только стали появляться твердотельные, я, как все прогрессивное человечество, озаботился приростом производительности посредством этой самой твердотельности носителей. Был куплен недорогой SSD марки Vertex, объемом 120 Гб и с успехом водружен в потроха компьютера. Не помню уже как туда заливалась система (и какая), с трудностями или без, но прирост скорости ощутился конкретно. К диску прилагалась наклейка со словами My SSD is faster then your HDD, что грело обладателя сего девайса.

Как видим из картинки c тех прошло более 4 лет, и за это время номер Винды вырос до десятки, а место на диске сократилось до критического. Как я не старался чистить загрузочный диск, десятая винда пухла неподецки, пока уже негде стало разворачивать пополнение, и на экран стали выплевываться разные меседжи от макрософта по этому поводу И тут кто-то мне сказал, что винда пухнет просто от времени и чистить диск бесполезно Поможет только либо переустановка, либо покупка нового диска. Наверно это правда.

А тут еще мне попалась статейка о том, что оказывается пропускная способность у шины PCI Express огого, а используется она как-то неправильно.

А тут еще появилась память форм-фактора М2 с какими-то бешенными цифрами по доступу

Судите сами:

SSD Kingston A2000 250GB SA2000M8/250G M.2, PCI Express 3.0 x4, контроллер Silicon Motion SM2263EN, микросхемы 3D TLC NAND, последовательный доступ: 2000/1100 MBps, случайный доступ: 150000/180000 IOps

Kingston потому что в два раза дешевле самсунга, а ежели не видно разницы, то зачем платить больше

Вот я и подумал, раз апгрейдиться, то в новый форм-фактор. Беда заключалась в том, что у моей материнской платы не было разъема М2, а поставить систему на такой скоростной диск очень хотелось

А еще я нашел, как кто-то уже проделал такой финт ушами и мне осталось только повторить. Причем агрейдили на моей материнке Ежели кому интересно, смотрим здесь.

а здесь еще и видос можно посмотреть на эту же тему

Казалось бы, все просто! Но не тут-то было

История

Был скачан новый биос, модифицирован для М2 по инструкции, все подготовлено, осталось дождаться переходника от китайцев М2 -> PCIExpress.

Пришел переходник. Все собрал, воткнул Биос видит диск, система не видит Оказалось, забыл проинициализировать. Ну ладно, заходим в управление компьютером в раздел управление дисками и там инициализируем. Это для таких, как я, забывчивых

Ура, система видит диск! Ну все, готовим загрузочную флеху, заливаем десятую винду

И в этом месте обнаруживается, что установка винды на данный диск невозможна Потому как выбранный диск имеет стиль разделов MBR

Ну ладно. Во время инициализации можно сделать стиль GPT. Опять лезем в инициализацию устанавливаем стиль разделов GPT, заливаем десятую винду

И в том же месте обнаруживается, что установка винды на данный диск невозможна Потому как выбранный диск имеет стиль разделов GPT (оказывается, это тоже противопоказание!) А еще в биосе типо нету какого-то драйвера для этого диска Впадаем в ступор

Да, еще забыл сказать, что после прошивки биоса, как в видосе, у меня комп выдал синий экран с грустным смайликом и сообщением, что типо ваш загрузочный диск недоступен, код ошибки и отсылку в техподдержку к майкрософту

Проблему решил с помощью многократных перезагрузок с попытками починки системой, в конечном итоге смог загрузиться через безопасную загрузку с сетевыми драйверами. Следующая загрузка была уже нормальной. Но тоже пришлось попотеть Было неприятно, подумал, что старой системе трында

В ступоре долго сидеть не рекомендуется, посему надо искать какой-то выход.

Случайно на разорванной упаковке от кингстоновского диска нахожу Softwate Activation Key для Acronis True Image HD О, эта же приблуда умеет клонить диски. В том числе и с системой.

Ну думаю, сейчас клонирую старый диск на новый и вуаля

Чтобы воспользоваться этим методом пришлось зарегистрироваться на сайте, создать эккаунт, установить прогу, активироваться Все, клонируем. Пробуем загрузиться

Обломатушки Выдало целый экран сообщений, что не фига, не буду загружаться нету бута или он какой-то не тот уже не важно

Более того, Acronis разфигачил диск 250 Гиг на тома на 120 Гиг (старая система) и остаток, еще 130 Гиг И соединить их обратно никак

После гугления находим несколько неработающих способов, но в конечном итоге помог этот:

Запускаем командную строку от имени администратора.

В командной строке вводим diskpart

Выводим список дисков при помощи команды list disk

Запоминаем номер нужного диска, и вводим select disk *, где вместо звёздочки вводим нужный номер.

Выводим список разделов - list partition

Тут находим раздел восстановления, запоминаем его номер и вводим select partition * вместо звезды номер раздела.

Наконец, вводим команду delete partition override после неё раздел будет затёрт.

Все эти манипуляции на Ваш страх и риск! Удалите не тот раздел - система не запустится!

Фух Сработало! Объединяем диск в первоначальный объем. Думаем, что дальше делать Продолжаем гуглить И тут я натыкаюсь на вот этот вот видос:

Там пол видео идет расжевывание не очень мне интересной информации, а вот во второй половине, как раз то, что мне было нужно. Вкратце я изложу, что было сделано, а кому нужно будет поподробнее смотрите видос. Там все понятно. Даже я понял.

Во-первых, использование программы Bootice, о которой я даже никогда не слыхал. Она понадобилась для переформатирования диска М2 для дальнейшего его использования в UEFI BIOS платформах. В этой проге создается так называемые ESP раздел (EFI System Partition) или загрузочный том. В видосе показано, как это делается. Появилась надежда, что раз диск форматируется таким специальным образом, то может он все-таки запустится

Во-вторых, далее показывается использование программы WinNTSetup. С помощью этой программы можно заливать Винду из образа, расположенного на локальном компе на другой диск этого же компа, что очень удобно. Как раз наш случай. Обращаю внимание, что в качестве загрузчика используется тот самый ESP раздел, о котором шла речь в предыдущем абзаце. Ну и в завершение нужно указать куда (на какой диск) мы будем заливать Винду.

Там, при указании пути к образу есть нюанс. Я не сразу понял, что произошло: указываешь один путь (причем каким-то странным способом), а в строке отображается совсем другое. Оказалось, что это нормально.

После установки некоторых дополнительных параметров программы запускается заливка Винды на новый SSD формата М2. По окончании процесса WinNTSetup попросит перезагрузку.

В этом случае я рекомендую загрузить сначала биос, там указать первым появившийся загрузчик ESP, после него наш диск M2 (они там отображаются раздельно) и после этого уже дать системе загрузиться. И еще я для чистоты эксперимента отключил старый SSD.

После загрузки должна начаться стандартная установка Windows 10. Во всяком случае у меня так было. Система встала без сучка и задоринки! Теперь у меня на диске С 250Gb на достаточно шустром SSD. Надеюсь хватит на ближайшие 4 года. А также надеюсь, что изложенное кому-то поможет не наступать на мои грабли. Всем удачи!

Подробнее..

Тест Seagate Exos X18 жесткий диск корпоративного класса на 18 Тбайт

26.02.2021 18:20:16 | Автор: admin

Новый виток эволюции

Недавно в нашем блоге были опубликованы статьи, посвященные технологиям двойного привода MACH.2 и термомагнитной записи HAMR. Сейчас диски HAMR доступны только ограниченному числу покупателей, и получить их можно в рамках программ Seagate Enterprise Data Systems и Lyve. Мы решили спуститься с небес на землю и поговорить о том, что можно пощупать руками уже сегодня. Героем нашего обзора будет флагманский HDD корпоративного класса Exos X18 на 18 Тбайт, который есть в розничной продаже по вполне разумной цене от 35 тыс. рублей.

В сентябре 2020 года Seagate представила 18-Тбайт HDD IronWolf Pro для SMB/SME NAS, за ним последовала флагманская корпоративная версия Exos X18. Вместе с накопителями была обновлена и конвергентная серверная платформа представлена модель 2U на 12 3,5" отсеков Exos AP 2U12. Сервер поддерживает два порта 10GBASE-T и два 1 Гбит/с LAN. В качестве процессора используются модели из линейки Xeon v5 v4 с TDP до 85 Вт.

Встречаем корпоративный флагман!

SeagateExosX18, как иIronWolfPro18TB, является жестким диском с традиционной магнитной записьюCMR/PMRна 7.200 об/мин с кэшем 256 Мбайт. Он содержит дополнительные функции надежности и оптимизации в прошивке, ориентированные на дата-центры и крупные дисковые массивы. Адаптированный кэш позволяет передавать крупные объемы данных с минимальными задержками, а функцияPowerBalanceобеспечивает оптимальное соотношение потребляемой мощности в расчете на терабайт данных при разных нагрузках. Время наработки на отказMTBFу накопителей Exos X18 было увеличено до2,5 млн. часовпо сравнению сс1,2 млн. часов у IronWolf Pro. Максимальная скорость передачи данных увеличилась до270 Мбайт/с. Но у 16-ТбайтExosX18 выставлена меньшая скорость 261 Мбайт/с. По сравнению с предшествующим поколением обе модели X18 получили интересный прирост производительности IOPS в операциях записи 4K QD 16 на 25%.Seagateуказывает максимальную потребляемую мощность под нагрузкой 9,4Вт, в режиме бездействия 5,3 Вт.

Seagateудалось увеличить плотность записи до1.146 Гбайт/дюйм, причем без использования термомагнитной записиHAMR. В корпусеHDDустановлены девять пластин. Мы получаем уже пятое поколение жестких дисковSeagateс гелиевым наполнением. НакопителиExosX18 доступны в вариантах с интерфейсомSATAиSAS. Гарантия составляет пять лет, расчетная ежегодная нагрузка записи 550 Тбайт, поэтому диски можно использовать в системах 24/7. Что вполне ожидаемо от накопителя корпоративного класса.

Новая модель на 18 ТбайтST18000NM000Jпредсказуемо принадлежит к линейкеExosX18, поскольку раньше такой емкости не было. Однако 16-ТбайтHDDExosесть как в старой линейкеX16, так и в новойX18. Отличить их просто: старый 16-ТбайтExosX16 имеет букву "G" в модельном номере ST16000NM001G, новый: букву "J" в номереST16000NM001J.

Производитель

Seagate

Линейка

EXOS X

Модель

EXOS X18

Емкость

18 TB

Число отсеков NAS

16+

Неисправимые ошибки чтения на бит, макс.

1 сектор на 1015

Прогнозируемый ежегодный выход из строя (AFR)

0,35 %

Поддержка горячего подключения

Да

KTPI / Гбайт/дюйм

482 / 1.146

Максимальная нагрузка записи в год

550 TB

Кэш

256 MB

Скорость вращения шпинделя

7.200 об/мин

Скорость передачи данных

270 Мбайт/с

Операции случайного чтения/записи 4K, QD16, кэш записи выключен

170 IOPS /550 IOPS

Интерфейс

SATA III 6G

Энергопотребление нагрузка/ бездействие

9,4 Вт / 5,3 Вт

Уровень шума (сон) бездействие/ нагрузка

2,8 / 3,2

Время наработки на отказ (MTBF)

2.500.000 ч

Гарантия

5 лет

Модель

ST18000NM000J

Подробные спецификации приведены на сайтеSeagate(PDF).

Жесткие дискиSeagateExos X по-прежнему ориентированы на использование в серверном окружении. Они не имеют оптимизаций по уровню шума во время стартаHDDили в рабочем режиме. Что следует учитывать, если накопитель планируется использовать в домашних условиях.

Внешний вид

КорпусSeagateExos X18 вполне традиционный для последних поколений гелиевыхHDD. С каждой стороны имеются три боковых монтажных отверстия, поэтому жесткие диски подойдут для любых отсеков. Разве что снизу отверстий четыре, а не шесть. Но вряд ли это доставит неприятности на практике.

Тесты

Мы проводили тесты совместно с тестовой лабораториейHardwareluxx, подробности методики можно посмотреть вобзореSeagateExos X18 ST18000NM000J. Здесь же мы остановимся на результатах.

Энергопотребление

Сначала мы измерялиэнергопотребление при старте диска. Здесь шпиндель раскручивается до рабочей скорости, поэтому данный уровень максимальный.SeagateExos X18 18 TB показал38,8 Вт, что вполне ожидаемо для накопителя корпоративного класса. По этой причине в стойках, например, жесткие диски стартуют не все разом, а по очереди. У 16-ТбайтExosX16 энергопотребление было выше 39,6 Вт, у 14-ТбайтExosX14 39,0 Вт, так что пятое поколение гелиевыхHDDв данном отношении действительно оказалось лучше.

Второй тест проводился врежиме бездействия. После раскрутки шпинделя мы ждали 10 минут без нагрузки или обращения кHDD. Жесткие дискиSeagateс поддержкойPowerChoiceчерез 15 минут бездействия переходят в режим ожидания, поэтому 10-минутная пауза была выбрана специально. Диск Exos X18 18 TB с вращающимися пластинами потреблял всего3,37 Вт. Что значительно меньше 16-ТбайтExosX16 (5,06 Вт) и 14-ТбайтExosX14 (4,77 Вт). Несмотря на девять пластин,Seagateудалось весьма неплохо продвинуться вперед по энергопотреблению.

Третий тест проводился подпоследовательной нагрузкой записи. На жесткий диск записывалось 50 Гбайт образовWindows. Здесь энергопотребление составило6,92 Вт. Что выше 16-ТбайтExosX16 (6,41 Вт) и 14-Тбайт Exos X14 (6,7 Вт). Результаты в данном сценарии ближе к весьма "прожорливому"SkyHawkAiна 14 Тбайт. Впрочем, емкие диски с воздушным наполнением все равно потребляют больше.

Четвертый тест нагрузка случайного чтенияHDTuneProRandomAccessRead. РезультатExosX18 на 18 Тбайт12,58 Втоказался чуть вышеExosX14 14 Тбайт с восемью пластинами (12,1 Вт). ОднакоExosX16 на 16 Тбайт потреблял больше 12,86 Вт.

Производительность

По производительностиCrystalDiskMark6мы получили результат выше спецификацийSeagate, а именно275,2 Мбайт/спо последовательному чтению и275,8 Мбайт/спо последовательной записи. Если сравнивать с предшественниками, то прирост есть, но составляет считанные мегабайты в секунду.

В тестеHDTuneExosX18 на 18 Тбайт тоже остался ниже планки 280 Мбайт/с, не приблизившись к магическому уровню 300 Мбайт/с. Мы ожидали большего прироста по сравнению с четвертым поколением гелиевыхHDD, но, видимо, здесь стоит дождаться накопителей с новыми технологиями.

Мы ограничились самыми популярными тестами, дополнительные результаты можно посмотреть вобзореHardwareluxx.

Системы храненияSeagateStorage вEMEA

Жесткие дискиExosи твердотельные накопителиNytroразработаны специально для задач и нагрузок корпоративного класса, они отличаются высокой производительностью, емкостью и надежностью, а также обеспечивают максимальную безопасность данных и мгновенный к ним доступ. В ассортиментеSeagate, как мы упомянули, имеются не только накопители, но и дисковые, гибридные ифлеш-системы хранения данных для SAN-сетей, системы JBOD для подключения к серверам и легкого масштабирования емкости, а также конвергентные вычислительные платформы для обеспечения высокой плотности хранения данных

Seagateподписала сASBISдистрибьюторский договор, который позволит поставлять корпоративные решенияSeagateStorageSystemsandSolutionsна рынках России, Казахстана, Беларуси, Украины и ряда других стран.

Мы рады, что наше стратегическое партнерство с компанией ASBIS, начавшееся в 1992 году, будет расширено за счет корпоративной линейкиSeagateSystemsandSolutions. Уже более 40 лет мы выпускаем инновационные системы хранения. Расширение сотрудничества с ASBIS важный шаг, позволяющий позиционироватьSeagateкак комплексного поставщика систем хранения данных на рынках EMEA прокомментировал Александр Малинин, глава представительстваSeagateTechnologyв России.

СистемыSeagateStorageнайдут свое применение для решения самых разных задач, включая основное хранение данных под критически важные приложения, задачи виртуализации серверов, различные уровни хранения данных в частных и гибридных облаках, видеонаблюдение, высокопроизводительные вычисления, системы резервного копирования и восстановления данных, аналитику данных, приложения СМИ и индустрии развлечений и многое другое.

Заключение

Новая линейка Exos X18 отSeagateполучилась на славу. Она хорошо продолжает традиции предшественников, обеспечиваявысокий уровень производительности. Не прошло и несколько лет, как гелиевые жесткие диски добрались до пятого поколения. Конечно, энергопотребление на этапе старта превышает потребительскиеHDD, но для дисков корпоративного класса это вполне ожидаемо. Тем более во многих сценарияхSeagateудалось снизить энергопотребление по сравнению с предыдущими поколениямиExos.

Революционных изменений от новой линейки ожидать не стоит, здесь все же стоит дождаться накопителей стехнологиями двойного приводаMACH.2итермомагнитной записиHAMR.

ExosX18 новыйэволюционный виток популярной линейки для дата-центров и серверов. Производительностьдо 276 Мбайт/спозволяет накопителям находиться среди лидеров современныхHDD. К преимуществам отнесем гарантию 5 лет и ежегодную расчетную нагрузку записи 550 Тбайт. Цена около 35 тыс. рублей тоже радует. Разве что при домашнем использовании следует помнить об уровне шума и высоком пусковом токе.

Подробнее..

Seagate MACH.2 и Exos 2X14 разбираемся в преимуществах двойного привода

29.01.2021 18:07:40 | Автор: admin

Как увеличить производительность HDD?

Seagate несколько дней назад начала поставки жестких дисков на технологии HAMR (heat-assisted magnetic recording, термомагнитная запись), которые были представлены еще в ноябре 2020, а также расширила программу тестирования HDD с двойным приводом MACH.2, которые обеспечивают в два раза более высокую производительность по сравнению с обычными жесткими дисками. Компания уверена, что подобный набор технологий позволит увеличить как емкость, так и производительность жестких дисков в ближайшие годы.

Емкость жестких дисков параметр очень важный, но если емкость, плотность записи и линейная скорость чтения/записи увеличиваются, случайные операции чтения/записи IOPS в расчете на терабайт снижаются, что негативно сказывается в сегменте дата-центров. Для повышения последовательной скорости чтения/записи и IOPS на терабайт производители HDD разрабатывают новые модели с двумя независимыми приводами, их рассматривать как два отдельных жестких диска в одном 3,5" корпусе. И Seagate стала первым производителем HDD, представившим технологию Multi-Actuator Technology (MAT) в конце 2017 года, а в 2019 году избранные партнеры компании получили тестовые образцы соответствующих накопителей Exos 2X14 MACH.2. К сожалению, до сих пор неизвестно, когда HDD Seagate с технологией MACH.2 станут коммерчески доступны. Будем надеяться, что это случится в 2021 году.

Первая на рынке технология двойного привода Seagate привлекла внимание широкой базы пользователей, которым требуются емкие накопители с высокой производительностью для таких сценариев, как доставка содержимого, сказал Дейв Мосли, главный исполнительный директор Seagate. Сегодня мы увеличиваем поставки накопителей с двойным приводом, и их доля будет расти по мере повышения емкости.

Первая демонстрация в 2018 году: технология MACH.2 готовится покорить рынок

Инженеры Seagate еще в 2018 году продемонстрировали полностью рабочий жесткий диск на основе технологии Seagate MACH.2 с двойным приводом, который позволяет одновременно считывать или записывать два потока данных с помощью стандартного адаптера SAS Host Bus Adapter (HBA) без какой-либо дополнительной настройки.

Первые демонстрации технологии MACH.2 с двойным приводом были проведены на конференции OCP (Open Compute Project) Summit, которую посетили больше 3.400 разработчиков, инженеров и специалистов. Участники конференции смогли оценить преимущества решений Seagate в окружении дата-центров. Для демонстрации использовались накопители Seagate Exos 2X14 MACH.2 корпоративного класса с подключением SAS. Ниже, в соответствующем разделе статьи, мы приведем технические подробности теста.

Демонстрация показала преимущества производительности технологии MACH.2 на жестком диске Seagate Exos по сравнению с обычным Exos с одним приводом, сказал главный инженер Seagate Тим Уокер. В нашем примере нагрузка состояла из нескольких последовательных потоков например, потоков видео. Мы не использовали какое-либо специальное аппаратное обеспечение накопитель подключался к стандартному SAS HBA, который устанавливался в обычный слот расширения.

В демонстрации участвовали два дисковых массива: Первый массив с четырьмя накопителями MACH.2, второй с четырьмя стандартными Exos с одним приводом, пояснил Уокер. Мы нагрузили массивы максимально возможным числом последовательных потоков параллельно, чтобы сохранить при этом минимально необходимую пропускную способность для QoS. В данном случае она составляла четыре мегабайта в секунду, качество видео при этом было достаточно высоким, сравнимым с домашними условиями

Жесткие дискиMACH.2 поддерживают порядка 230 параллельных потоков, а обычныеExos около 130 что довольно хорошо соответствует теоретическому удвоению производительности на микроуровне тестов, заключил Уокер.

ТехнологияSeagateMACH.2удваивает производительность традиционных жестких дисков, используя два раздельных привода, которые независимо друг от друга и параллельно выполняют операции доступа и чтения/записи дляhost-системы. На демонстрации в 2018 году технологияSeagateMACH.2 позволила установить рекорд производительности жесткого диска, суммарная пропускная способность достигла 480 Мбайт/с намного быстрее обычных жестких дисков и на 60% быстрееHDDна 15К об/мин. Теоретический уровень пропускной способности составляет до 520 Мбайт/с, о чем мы расскажем ниже.

Технология разработана для наших клиентов, которым требуется высокий уровеньQoSпоIOPSна терабайт.Его уже не обеспечивают жесткие диски с одним приводом, особенно при дальнейшем увеличении емкости и переходе наHAMR, сказал Уокер.

На мероприятии OCPSummitТим Уокер и менеджерSeagateпо продуктам для облаков ДжеймсБорденпоказали раннюю версию технологииMACH.2 на жестких дискахExosв работе. Они раскрыли архитектуру, производительность и характеристики энергопотребленияMACH.2, как и возможность использования в окруженияхгиперскейла. На приведенном видеоУокер рассказывает о работеMACH.2.

MACH.2 отлично подходит для интенсивных нагрузок в дата-центрах

Облачные дата-центры переводятся на жесткие диски все более высокой емкости, но при этом "узким местом" становитсяпроизводительностьIOPSв расчете на терабайт. Емкости продолжат свое увеличение в будущем, в том числе благодаря технологииHAMRи повышению плотности хранения данных на каждой пластине. Но законы физики неумолимы, и увеличение плотности записи снижает производительностьIOPS.

ТехнологияSeagateMACH.2 как раз призвана уменьшить эффект подобных ограничений. То есть клиенты с интенсивными сценариями обработки данных, подобных онлайновомустримингуи виртуализации, смогут по-прежнему получать высокий уровень производительности жестких дисков, но при этом справляться с постоянно увеличивающимися объемами данных. Ниже мы рассмотрим технические основы технологии.

За прошедшие после 2018 года месяцы инженерыSeagateпродолжили совершенствовать технологиюMACH.2, которая совсем скоро появится в корпоративных жестких дискахSeagateExos. ПартнерыSeagateуже давно тестируют накопители сHAMRи двойным приводомSeagateMACH.2 в своих лабораториях, причем некоторые уже публично поделились результатами. В конце статьи мы расскажем о практическом опытеMicrosoft.

Мы попросили нескольких наших партнеров оценить накопители в своих системах как под последовательной нагрузкой, так и под интенсивной случайной нагрузкой, например, почтового сервера, сказалУолкер. И отзывы оказались действительно хорошими. Прирост производительности в реальных нагрузках составил 1,8-1,9 раз без каких-либо хитростей или сложных конфигураций. Простой переход на новыеHDDобеспечивает почти двукратное увеличение производительности.

Технические подробностиMACH.2

Настало время разобраться с техническими основами MACH.2. Ниже мы рассмотрим, что влияет на производительностьHDD. Мы расскажем, как снижение IOPS/TB по мере увеличения емкости приводит к ухудшению TCO, и как технология MACH.2 позволяет этого избежать. Мы рассмотрим, почему был выбран именно такой дизайн MACH.2, как технология сказывается на производительности и энергопотреблении. Какие тонкости по командамсуществуют? Наконец, мы приведем несколько сценариев использования MACH.2.

Что влияет на производительностьHDD?

Технология жестких дисков подразумевает использование движущихся компонентов, производительность при этом зависит от оборотов шпинделя и числа каналов, которые используются для передачи команд ввода/вывода. ИсторическиHDDнаращивали производительность путемувеличения скорости вращения шпинделя, что привело к появлению 2,5" накопителей на 15К и 10К. Но из-за ограничений пространства 2,5" корпуса, подобные накопители не могли обеспечить высокий уровень емкости. В свою очередь, 3,5"HDDобеспечивают самый высокий уровень емкости, но не могут дать такую же скорость вращения шпинделя из-за высокого энергопотребления и слишком мизерного выигрыша, чтобы оправдать увеличение энергопотребления. Другие проблемы на высоких оборотах касаются вибрации корпуса и деградации производительности из-за ударов/вибрации во время работы.

В качестве альтернативной меры повышения производительности 3,5"HDDбыло выбранокэширование, однако оно помогает лишь в некоторых рабочих сценариях, да и преимущества невелики.Очередь команд тоже мера повышения производительности, однако она может привести к увеличению задержек, приложения при этом нужно разрабатывать так, чтобы они умели работать с большой глубиной очереди (QD). Можноуменьшить ход головок на пластине(короткий ход,shortstroking), что действительно повышает производительность случайного чтения/записи, снижая при этом и емкость. Головки при этом движутся в меньшем диапазоне, прирост производительности имеется, но такой шаг не эффективен по соображениям себестоимости, поскольку значительная часть емкости теряется.

Проблема:IOPS/TBиTCO

Операторы облачных сред используют в центрах обработки большое количество 3,5-дюймовых жестких дисков, из которых создаются узлы хранилищ для приложений, размещенные в многочисленных стойках. Чтобы выполнять соглашения об уровне обслуживания, нужно поддерживать определенный уровень производительности таких хранилищ с оценкой показателей IOPS и задержки выполнения команд. Требуемый уровень производительности определяется показателемIOPS в расчете на терабайт (IOPS/TB) при определенной задержке.

Для многих облачных нагрузокIOPS/TBможно получить, разделив производительность случайного доступаIOPSнакопителя на доступную емкость. И покаHDDсоответствует заданному провайдером уровнюIOPS/TB, можно использовать всю доступную емкостьHDD. Если же уровеньIOPS/TBнаходится ниже порогового значения для клиентской нагрузки, товсю емкость накопителя использовать уже не получается. И проблема сокращения полезной емкости из-за ограничения IOPS/TB приводит к критическому ухудшению совокупной стоимости владенияTCOиз-за роста затрат в расчете на терабайт полезной емкости.

Иллюстрация выше как раз показывает проблему. По осиXотложена емкость 3,5"HDDклассаnearline. По осиY производительностьIOPS/TB, которая снижается по мере увеличения емкости из-за ограничений механики жесткого диска (увеличиватьIOPSпропорционально емкости не получается). Зеленая область как раз показывает необходимый уровень производительностиIOPS/TBдля приложений клиента по массиву накопителей. Например, если порог производительности составляет 7IOPS/TB, то без потери емкости можно использовать накопители на 12 Тбайт. Выше частью емкости уже приходится жертвовать, ограничиваясь примерно теми же 12 Тбайт. В итогенакопители большей емкости используются неэффективно, что ухудшает совокупную стоимость владенияTCO.

СовременныеHDDиспользуют один привод для выполнения операций ввода/вывода, что дает один канал чтения/записи. В итоге накопитель дает фиксированную производительность, независимо от емкости и числа пластин/головок.

ТехнологияMACH.2

ТехнологияMACH.2 решает описанную выше проблемуIOPS/TB, используя два привода, которые могут выполнять операции ввода/вывода независимо друг от друга в пределах одногоHDD. Подобная параллельная работа обеспечиваетпрактически удвоение производительности. Верхняя половина головок подключена к первому приводу, нижняя ко второму. Таким образом, каждый привод получает половину емкости накопителя. На иллюстрации ниже показано, как два привода работают независимо друг от друга. А в таблице приведен прирост производительностиMACH.2 по сравнению с одним приводом (обычныеHDD).

MACH.2

Число приводов

Емкость (TB)

СлучайныеIOPS

IOPS/TB

SDR (MB/s)

Измерения на уровне привода

Н/Д

7

80

5,7

260

Измерения на уровне диска

2

14

160

11,4

520

MACH.2HDDобеспечивают теоретический двукратный прирост производительности по случайному вводу/выводу и/или по последовательной передаче данных, в зависимости от потребностей приложений и нагрузок.

IOPS/TBиTCO

MACH.2 удваивает производительность, что позволяет клиентамиспользовать всю доступную емкостьHDD, поскольку уровеньIOPS/TBпревышает минимальную планку.

На графике выше показаны требования того же клиента, которому ранее приходилось ограничиваться доступной емкостью 12 Тбайт из-за пороговой производительностиIOPS/TB, теперь же он может использовать всю емкостьHDDвплоть до 24 Тбайт.

Переход с одного привода наMACH.2

Как мы указывали ранее, требования каждого клиента различаются в зависимости от архитектуры хранения данных и используемых сценариев/приложений, поэтому и порогIOPS/TBразный. Именно данный порог определяетемкость, при которой следует переходить с одного привода наHDDMACH.2.Seagateсчитает, что большинству клиентских приложений требуется производительностьHDDмежду 5 и 10IOPS/TB. Ниже приведен сравнительный график с результатамиMACH.2, которые позволят клиентамиспользовать максимум емкости, сохраняя минимально необходимый уровеньIOPS/TB. Что обеспечит минимальную совокупную стоимость владенияTCPв расчете на терабайты хранилища.

ДизайнMACH.2

ДизайнMACH.2 опирается надва привода, которые передают данные через отдельные каналы. ВHDDиспользуется множествопроприетарныхинноваций, которые гарантируют отсутствие взаимных конфликтов при одновременной работе двух приводов над операциями ввода/вывода. ДизайнMACH.2 ориентирован намаксимальную производительностьIOPS(то есть удвоение производительности по сравнению с одним приводом).

При разработкеMACH.2 особое внимание было уделено выбору интерфейса (SASпротивSATA). ТехнологияMACH.2 может работать с обоими типами интерфейса, но по причинам производительности и более простой архитектуры был выбран вариантSAS

  • Производительность:SAS12 Гбит/с противSATA6 Гбит/с. Первое поколениеMACH.2 довольно близок подходит к насыщению интерфейсаSATA6 Гбит/с (пропускная способность 600 Мбайт/с). Как было отмечено выше, накопитель обеспечивает производительность до 520 Мбайт/сSDR, а следующее поколение будет работать еще быстрее. Поэтому было принято решение, чтобы экосистемы и архитектуры хранения данных были готовы к следующему поколению накопителейMACH.2 без необходимости менять протокол интерфейса.

  • Простая архитектура: два привода адресуютсяhost-системой через логические номера устройствSASLUN. ПротоколLUNуже встроен в архитектуру интерфейсаSAS, он позволяет обращаться к обоим приводам одновременно.LUN0 иLUN1 маркированы одинаковым глобальным именемWWNсо стороны хоста с уникальными идентификаторами (LUN0 илиLUN1). При подключении к хост-системе жесткий дискMACH.2 виден как два независимых накопителя равной емкости. Например, в случае 14-ТбайтHDDбудут видны два накопителя на 7 Тбайт. На следующей иллюстрации приведена архитектураSASна основеLUN.

Производительность MACH.2 по тестамSeagateи партнеров

MACH.2 обеспечиваетприрост производительности до двух разкак по случайным операциямIOPS, так и по последовательной скорости передачи. ИнженерыSeagateориентировались на наиболее популярные сценарии и приложения, чтобы оптимизировать накопители под определенные значения глубины очереди (QD) и объемов передаваемых блоков (xfer).

На иллюстрации ниже приведенырезультаты тестовIOMeter, где сравнивается производительностьMACH.2 с накопителемSeagateExos(сравнимыйHDDс одним приводом). ПреимуществоMACH.2 над обычнымExosпоказано по осиY, а значенияQDи объемов передаваемых блоков по осиX. Точные значения пропускной способности будут зависеть от моделиHDD, которая сравнивается.

По случайным операциям чтенияMACH.2 показываетприрост производительности между 1,85xи 2xпо сравнению с обычнымHDDExosс одним приводом. Конечно, при выполнении одинаковой нагрузки на обоихLUN.

По последовательному чтению при высоких объемах передаваемых блоков (когдаMACH.2 иExosс одним актуатором входят в режим последовательной потоковой передачи),преимуществоMACH.2 составляет 2xпо сравнению сHDDс одним приводом. Конечно, при выполнении одинаковой нагрузки на обоих LUN

Энергопотребление

Как и предполагалось, использование большего количества электроники и движущихся частей приводит к тому, чтоHDDMACH.2 потребляет заметно больше, чем накопитель с одним приводом. Цель дизайна заключалась всохранении теплового пакета 12 Втпри случайных нагрузках, наиболее важных для большинства облачных сценариев. В таблице ниже приведено сравнение энергопотребления нынешнего поколения накопителейSeagateExos.

Как видим, HDD MACH.2 показывает наиболее высокий уровень энергопотребления при последовательном чтении. Причина кроется в большем токе по линии 5В из-заработы дополнительной электроники, связанной с чтением двух последовательных потоков.

Как обнаружили специалистыSeagate, многие существующие на рынке системы с несколькими дисками ограничены пропускной способностью топологииSASсо стороны хоста, они не способны дать полную последовательную пропускную способность, которую могут обеспечить несколькоHDDMACH.2 (520 Мбайт/с числоHDD). Поэтому для большинства клиентоврежимом с самым высоким энергопотреблением будет случайное чтение, где мы получаем не такое большое увеличение по сравнению с одним актуатором, несмотря на двукратный рост производительности.

Можно взглянуть и под другим углом: хотя на один диск MACH.2, такой как Exos 2X14, потребляемая мощность выше, на уровнеTCOвсе же происходит снижение энергопотребления из-за уменьшения отсековHDD. Один установленный накопитель MACH.2 потребляет меньшую мощность, чем дваHDDс такой же пропускной способностью. Что показано на следующей диаграмме.

Разница в командахMACH.2

ПоддержкаSASLUNприводит к тому, что некоторые команды работают с отдельнымиLUN, другие с обоимиLUN(то есть устройством в целом). Пользователям следует знать отличия по работе команд с накопителями MACH.2. Команды с высоким приоритетомHPC, такие как чтение или запись, адресуютLUN. Команды с низким приоритетомLPCмогут адресовать какLUN, так и устройство в целом. В таблице приведены некоторые команды, на которые стоит обратить внимание при переходе на MACH.2.

Можно проверить адресацию устройства илиLUNдля каждой команды, выполнив командуREPORTSUPPORTEDOPERATIONCODESи проверив полеMLU(multiplelogicalunits) для каждой команды.

Seagateактивно работает над добавлением всех нюансов в стандартT10, чтобы полеMLUкак раз использовалось в случае накопителей с несколькими приводами. ДокументT10 можно посмотреть по следующей ссылке:

http://www.t10.org/cgi-bin/ac.pl?t=d&f=18-102r1.pdf

MACH.2 в других сценариях

Хотя технологияMACH.2 призвана решить определенные проблемы дата-центров и облачных провайдеров, она хорошо покажет себя и в других сценариях. Среди них: сети доставки содержимого (CDN, особенно онлайновые потоковые сервисы), массивыRAID, распределенные файловые системы, включаяHadoopиCeph, системы централизованного видеонаблюдения, масштабируемые файловые системы.

Ниже приведены примеры сценариев, в которыхSeagateготова привести результаты тестов.

Онлайновые потоковые сервисы. Прирост производительностиMACH.2 помогает провайдерам, использующимHDDдля потокового вещания цифрового содержимого, улучшить качество предоставления услугQoSсвоим клиентам и/или расширить число пользователей, которых можно обслуживать с прежней развернутой емкостью. В данных сценариях пользователи могут запрашивать потоки разных видеофайлов в любые моменты времени. Здесь на уровне приложения/ОС преобладают операции последовательного чтения в разных местах массива дисков. Поскольку расположения файлов могут быть произвольными,HDDнеобходимо найти нужный файл и прочитать его часть, прежде чем перейти к обслуживанию других потоков. В результате нагрузка на уровне диска больше соответствует случайному чтению блоков разной длины. Как можно видеть по результатам производительностиMACH.2 выше,прирост по операциям случайного чтения составляет 1,8xпо сравнению с одним приводом.

В начале статьи мы уже упоминали демонстрацию на конференцииOCPGlobalSummitSeagate, которая показала преимущества в конфигурацииCDN, используя простой сервер хранения наFreeBSDOS. В демонстрации использовались несколько последовательных, взаимно не пересекающихся потоков с фиксированнымбитрейтом(вызовы чтенияBSDlibc) с массива 4 14TBMACH.2 и 4 14TBExosNLSAS. Число потоков постепенно увеличивалось, пока система хранения не упиралась в ограничения пропускной способности, то есть уже не могла выдавать потоки с необходимой пропускной способностью. Максимальное число потоков здесь как раз соответствует возможностям подсистемы хранения.

Как можно видеть,MACH.2 поддерживает 233 одновременных потока против 131 потока в случае накопителей с одним приводом. То есть мы получаемприрост порядка 1,8xпо сравнению сHDDс одним приводом. Кроме того, массивMACH.2показал меньшие задержки.

RAID. МассивRAID еще один пример, где видны преимущества технологииMACH.2. ПодRAIDпонимается массив из нескольких накопителей в целях резервирования данных/избыточности и/или повышения производительности.ТехнологияMACH.2 виднаhost-системе как два логических диска, поэтому массивыRAIDмогут строиться, начиная с одногоHDDс двумя приводами. Конечно, такой вариант вряд ли разумен, поскольку избыточностьRAID1 на одном диске теряет преимущества, если накопитель выходит из строя.

Ниже приведен примерMACH.2, который был продемонстрирован на 2019 OCPGlobalSummitсовместноSeagate,MicrosoftиBroadcom. Для данногодемоиспользовались 11 накопителейMACH.2 и 11ExosNLSASс одним приводом в составеMicrosoftJ2010StorageSystemс подключением к серверуMicrosoftC2010 сHBABroadcom9400. У каждой группы накопителей использовался выделенный расширительSASи портыHBA, что позволило создать виртуальный дискWindowsStorageSpacesна простом чередовании, то есть без избыточности и без уровня кэширования.

Оба виртуальных диска нагружались операциями случайного чтения 16Kили 32K, при этом глубина очереди регулировалась так, чтобы соответствовать заданным задержкам (30мсвдемо). На системе запускался тестMicrosoftDiskspd. Глубина очередиQDвиртуальных дисков увеличивалась, пока задержки не оказывались ниже порогового уровня. Значение задержек отображалось в реальном времени.

Как можно видеть по результатам выше, накопителиMACH.2 смогли выдать 1517IOPSприQD35 со средней задержкой 23мс, а обычныеHDDс одним приводом 1011IOPSприQD27 со средней задержкой 27мс. Данноедемопоказываетпреимущество примерно в полтора раза по производительностиIOPS, причем при меньшей средней задержке.

Обратите внимание, что если и дальше увеличивать глубину очереди наMACH.2RAID(что приведет к росту задержек), то пропускная способность будет повышаться и дальше. Впрочем, главной целью в данном случае было показать прирост производительностиMACH.2 при одновременном снижении задержек.

Hadoop.Hadoopпредоставляет эффективный метод работы с данными с помощью распределенной файловой системыHDFSвместе сMapReduce(средство распределенной обработки дляHadoop). Чтобы продемонстрировать преимуществоMACH.2 при использованииHDFS,Seagateна трех серверах создала небольшой кластерHadoop. Вдемоmaster-узел (сервер) подключается к одному или двумslave-узлам, каждый содержалMACH.2 или обычныеExosNLс одним приводом.

Здесь использовался тестHadoopTestDFSIO, который запускает процессMapReduceдля параллельного чтения и записи файлов, чтобы оценить преимущество использования двух приводов. В данном тестеразмерсчитываемых/записываемых файлов составлял 1GB, число файлов масштабировалось от 1 до 1000+ при измерении пропускной способности чтения и записи.

Как можно видеть по приведенным графикам,HDDс двумя приводам обходят жесткие диски с одним приводом в задачахHadoopMapReduceкак по записи (слева), так и по чтению (справа).Seagateпланирует провести дополнительные тесты в будущем, чтобы оценить влияние дисковMACH.2 при увеличении числаslave-узлов.

Microsoftудалось почти вдвое увеличить скорость ввода/вывода в ЦОД

Наконец, позвольте отдельно рассказать о мнении корпорацииMicrosoft, которая протестировала жесткие дискиSeagateExos 2X14 с технологией MACH.2 в своих ЦОД. СпециалистыMicrosoftуверены, чтожесткие дискиSeagateExos2X14 с технологиейMACH.2 обеспечат корпорации существенные преимущества, и планируют увеличить емкость хранилищ центра обработки данных в расчете на каждый слот при одновременной поддержке такого уровня операций ввода/вывода в секунду (IOPS), который необходим дляAzure,ExchangeOnlineи других облачных сервисов. Уже в ходе первых тестов подтвердилось, что технологияMACH.2 позволяет достичь поставленных целей при выполнении рабочих нагрузок с высокими показателямиIOPS.

MicrosoftтестируетSeagateExos2X14 сдвухприводнойтехнологиейMACH.2

Microsoftзавершила первый раунд функциональных испытанийExos2X14, включая полный цикл тестирования на совместимость и взаимодействие с имеющейся инфраструктурой ЦОД, а также испытания на эксплуатационную надежность и легкость интеграции с системной архитектуройProjectOlympus. Кроме того, была проведена оценка повышения производительности, обеспечиваемойMACH.2, наиболее важного для архитекторов ИТ-систем преимущества.

ИТ-архитекторMicrosoftАаронОгассотрудничает сSeagateс самого начала разработкиMACH.2, участвуя в решении вопросов, связанных с предстоящим использованием технологии в облачной среде компании.

Мы активно тестировали инженерные образцыExos2X14, а недавно провели испытания опытных серийных экземпляров накопителя, сообщилОгас. Как показали результаты, наши расчеты оправдались:благодаряMACH.2 пропускная способность иIOPSвозрастут почти вдвое.

Для проверки возможностей накопителейMACH.2 в корпорации используют хорошо зарекомендовавшие себя инструменты, в частностиMicrosoftExchangeServerJetstress. Эта система имитирует нагрузку сервера по операциям ввода/вывода при работеExchange2013 и 2016, позволяя оценить производительность и стабильность дисковой подсистемы. Помимо прочего, выполнены испытания с контролемIOPSв режиме последовательного считывания с имитацией операций резервного копирования и поточной передачи, а также в режиме случайного считывания при моделировании рабочих нагрузокгипермасштабнойсреды и сети доставки содержимого.

Тестирование с имитацией различных рабочих нагрузок выполняется уже довольно долго, отмечаетОгас. Мы взаимодействовали сSeagateеще на этапе разработкиMACH.2, следя за тем, чтобы характеристики технологии соответствовали нашим требованиям. Главной целью былодостижение почти вдвое большей пропускной способности по сравнению содноприводныминакопителями, которые мы сейчас применяем. Как показали испытания,MACH.2 справляется с этой задачей.

MACH.2 позволяет получить необходимые показатели поIOPSв расчете на терабайт и по стоимости в расчете на терабайт

Как мы отмечали ранее, операторам облачных сред нужно поддерживать определенный уровень производительности хранилищ с оценкой показателейIOPSи задержки выполнения команд. Требуемый уровень производительности определяетсяпоказателемIOPSв расчете на терабайт (IOPS/TB) при определенной задержке.

Архитекторы центров обработки данных предлагают рассмотреть и другой способ достижения высоких уровнейIOPSиспользование твердотельных накопителей. Это может иметь смысл при определенном соотношении их совокупной стоимости владения и потребностей имеющихся приложений в емкости,IOPSи пропускной способности. Благодаря меньшей стоимости в расчете на терабайт и преимуществу по емкости, жесткие диски позволяют сформировать хранилище большой вместимости, характеризующееся лучшей экономической эффективностью, но только если накопители могут обеспечить необходимый уровеньIOPS.

ТехнологияSeagateMACH.2 обеспечивает высокие показателиIOPS/TB за счет использования двух независимых приводов в одном жестком диске, создающих два параллельных потока данных и, соответственно, удваивающих производительность. Первый привод управляет верхней частью блокасчитывающе-записывающих головок, второй нижней частью. Каждый из приводов отвечает за половину общей емкости накопителя.

Преимущества для серверной архитектурыMicrosoftExchange, обеспечиваемые технологиейMACH.2

В облачных центрах обработки данных, как правило, нет лишнего места для установки оборудования, поэтому операторы стараются увеличивать скорость ввода/вывода в расчете на каждый слот.

НакопителиMACH.2 будут использоваться для всех облачных сервисовMicrosoft, включаяAzureиExchange. Учитывая, что в дата-центрах облачных операторов работает очень много приложений, для них актуальна задача экономия площади.Microsoftпланируетуменьшить расходы в расчете на слот, которые формируются из затрат на размещение оборудования, энергопотребление, охлаждение и т. д. Если установленные жесткие диски начинают демонстрировать снижение показателейIOPS, заказчик ищет способы решения этой проблемы, к примеру, путем установки накопителей с двумя приводами.

АрхитектураMicrosoftExchangeпостоянно оптимизируется, чтобы обеспечивать максимальную пропускную способность серверов. ТехнологияSeagateMACH.2 позволит устанавливать дляExchangeвсе более вместительные жесткие диски с сохранением возможности выполнения заданных вSLAтребований к величине задержки. Благодаря новой платформеSeagateв дата-центрахMicrosoftможно будет устанавливать более вместительные жесткие диски 14-терабайтныеSeagate2X14, посколькуMACH.2 предоставляет возможность достижения пропускной способности, необходимой хранилищамExchange, емкость которых постоянно увеличивается.

MACH.2 предотвращает появление неиспользуемой емкости

Пока жесткий диск обеспечивает нужный клиенту уровеньIOPS/ТБ, вся его емкость остается доступной для использования,ноесли показательIOPS/ТБ падает ниже порогового значения, установленного с учетом рабочей нагрузки приложения, часть емкости остается незадействованной. Причины мы рассматривали выше.

До недавних пор рост скорости передачи данных у жестких дисков не успевал за ростом их емкости, объясняет ДжеймсБорден, менеджерSeagateпо продуктам для облаков. Безмультиприводнойтехнологии, когда определенный порог емкости превышен, требования по качеству обслуживания выполняться уже не будут ввиду ограничений, определяемых характеристиками пропускной способности накопителя. Пример: чтобы обеспечивать определенное качество обслуживания, жесткий диск емкостью 16 ТБ должен иметь вдвое большую пропускную способность, чем накопитель 8 ТБ. Если приложение начинает создавать более высокую нагрузку поIOPS, чем может обслужить жесткий диск, единственный выход размещать на нем меньше данных, то есть появляется неиспользуемая емкость. Частичное решение проблемы незадействованной емкости принцип короткого хода. Он состоит в том, чтобы размещать часть данных на внешнем диаметре диска, а внутренний использовать для менее критичных данных, которые не нужно предоставлять с самыми высокими показателями качества обслуживания. Таким образом можно избежать наихудшей ситуации, когда жесткий диск заполняется лишь на две трети. Но методика короткого хода усложняет управление данными и все-таки не дает гарантии загруженности всей установленной емкости.

При использованииExos2X14 сMACH.2прибегать к тактике короткого хода уже не нужно во все слоты в центре обработки данных можно установитьдвухприводныежесткие диски емкостью 14 ТБ. Для приложения пропускная способность будет почти такой же, как при использовании двух 7-терабайтных накопителей, но задействован будет только один слот.

ТехнологияMACH.2 разработана совместно специалистамиSeagateиMicrosoftс учетом требований провайдеров облачных сервисов

Конструкция и функции первыхдвухприводныхнакопителейSeagateреализованы в точном соответствии с требованиями заказчиков.Microsoftтесно сотрудничала сSeagateна этапах разработкиMACH.2 и выпускадвухприводныхнакопителей.

РазрабатываяMACH.2, мы взаимодействовали со специалистами дата-центровMicrosoft, сообщил КрисХенсли, руководительSeagateпо глобальным продажам продукции для облачных приложений. Они оказывали нам большую поддержку еще на стадии первоначального замысла. Мы вместе адаптировалимногоприводнуюархитектуруMACH.2, добиваясь достижения нужного уровняIOPSна терабайт, о чем просили специалистыMicrosoft.

ЭкспертыMicrosoftпомогали нам ценными советами на всех этапах, начиная с создания первых опытных образцов, добавилБорден. ИнженерыMicrosoftпринимали участие в проектировании архитектуры накопителя, заботясь о том, чтобы конечный продукт отвечал требованиям корпорации. Это сыграло ключевую роль при разработке первого поколения накопителейMACH.2, в которых предусматривается использование двух логических номеров устройства сSAS, что соответствует требованиями архитектуры центров обработки данныхMicrosoftи других крупных операторов облаков.

По мере дальнейшего осуществления программы развитиядвухприводныхжестких дисковExos2X14 семейство этих накопителей будет пополняться устройствами различных типов, соответствующих требованиям самых разных приложений корпоративного класса.

Заключение: рынок готов к двойному приводу,Seagateтоже

Seagate, лидер рынка накопителей, готовится к скорому выходу жестких дисков с двойным приводом MACH.2. Жесткие диски позволяют продолжить наращивание емкости с одновременным снижением себестоимости, поэтому они остаются доминирующим способом хранения данных на всех рынках. Корпоративные 3,5" HDD на 7200 об/мин практически удвоили емкость за последние пять лет, сохранив низкую цену и стабильный уровень производительности. Данные HDD удовлетворяют требованиямэкзабайтныхоблачных инфраструктур. HDD и в будущем продолжат предлагать больше емкости по меньшей цене, но, чтобы выжать из жестких дисков максимум, они должны обеспечивать стабильно высокий уровень производительности. И технология двойного привода MACH.2 как разобеспечит сохранение производительности при дальнейшем увеличении емкости 3,5" HDD, соответствуя при этом поставленным целям по совокупной стоимости владения (TCO) или даже превосходя их.

ТехнологияMACH.2 является проверенным решением дляускорения производительности при снижении задержек выполнения команд. Все больше сценариев в дата-центрах упираются в ограниченияIOPS/TB, и технологияMACH.2 как раз способна их разрешить, снизить совокупную стоимость владенияTCO, а также обеспечить дальнейший рост производительности и емкости.

Спецификации накопителей Exos 2X14 можно посмотретьздесь.

Подробнее..

От витражей к терабайтам разгадываем тайныHAMR

11.02.2021 18:04:31 | Автор: admin

Жесткие дискиHAMRуже с нами!

Компания Seagate сообщила о старте коммерческих поставок жестких дисков с технологией термомагнитной записи (HAMR) с ноября 2020, а также расширила программу тестирования Mach.2 HDD с двойным приводом, о которых мы как раз писали ранее. Компания уверена, что имеющиеся технологии позволят наращивать емкость и повышать производительность жестких дисков в ближайшие годы.

Спрос на жесткие диски растет среди операторов дата-центров и экзаскейлеров, причем им требуются накопители с высокой емкостью и эффективностью энергопотребления. Летом 2020 года Seagate начала продажи 18-Тбайт жестких дисков с девятью пластинами. По мере апробирования новых емких HDD клиентами, они начнут все более широко использоваться в дата-центрах. Интересно, что данная платформа легла в основу первых 20-Тбайт жестких дисков HAMR, поэтому спецификации накопителей очень похожи.

На данный момент HAMR HDD могут купить лишь ограниченное число клиентов в рамках корпоративных систем хранения и решений Seagate Lyve. Позднее жесткие диски HAMR будут доступны и более широкой аудитории. Но первые 20-Тбайт жесткие диски HAMR могут и не выйти на массовый рынок, поскольку Seagate планирует повысить емкость на 20% в ближайшем будущем. Следовательно, можно ожидать скорое появление 24-Тбайт HDD. И они могут стать первыми розничными HDD на HAMR.

Мы достигли нового технологического уровня, начав поставки 20-Тбайт жестких дисков HAMR в 2020 году. Данный шаг проецирует успешную стратегию Seagate на ближайшие годы, сказал Дейв Мосли, главный исполнительный директор Seagate. Благодаря HAMR мы можем увеличивать плотность записи на 20% и выше каждый год, чтобы поддерживать масштаб вложений наших клиентов в инфраструктуру. Seagate продолжит обеспечивать существенные экономические преимущества по стоимости систем по сравнению с корпоративными SSD, и ситуация вряд ли изменится в обозримом будущем.

Сейчас мы рассмотрим принцип записи с использованием энергии, составной частью которой является термомагнитная запись HAMR. После чего перейдем к разгадкам тайн инженеров Seagate.

Магнитная запись с использованием энергии ключ к повышению емкости

Технологии магнитной записи с использованием энергии (EAMR, energy-assisted magnetic recording) уже давно на слуху у пользователей и энтузиастов. По сравнению со стандартной сегодня перпендикулярной магнитной записью PMR они обеспечивают дальнейшее увеличение плотности записи данных.

Из наиболее перспективных технологий EAMR выделяют термомагнитную запись (HAMR,heat-assisted magnetic recording) и запись с использованием микроволн (MAMR, microwave-assisted magnetic recording). По мнению Ассоциации передовых технологий хранения данных (Advanced Storage Technology Consortium, ASTC), HAMR станет новым знаковым этапом на пути к повышению плотности записи, то есть увеличению емкости жестких дисков при прежнем физическом размере. Эта инновация окажет большое влияние на развитие жестких дисков в течение следующего десятилетия.

Какой вариантEAMRлучше?

Переход на любую технологиюEAMRпозволит достичь намного большей плотности записи.Но какая технология лучше?

На пластине жесткого диска каждый бит данных хранится в виде группы крошечных частиц, также называемых зернами. Значение бита определяется магнитной ориентацией зерна, в зависимости от его направления кодируется двоичная 1 или 0. Чтобы записать больше данных на единицу площади, зерна следует сделать меньше и расположить ближе друг к другу. Но если расположить зерна слишком близко, биты начинают перемагничиваться под воздействием соседних зерен, уничтожая записанную на диске информацию.

Чтобы избежать этой проблемы, понадобилось изобрести новые термостабильные материалы, в которых биты сохраняют ориентацию при нормальных температурах и не воздействуют друг на друга. Эти материалы очень хорошо показали себя с точки зрения стабильности, но возникает новая проблема: как перемагнитить бит, устойчивый к перемагничиванию? Для записи на подобные материалы требуется существенно более сильное магнитное поле, чем обеспечивают обычные головки записи.

Устройства EAMR оснащены дополнительным излучателем, который направляет энергию на нагрев поверхности пластины. И уменьшает требуемое для записи магнитное поле.

Современные накопители MAMR используют пластины со сплавом CoPt (кобальт-платина). К головке записи MAMR добавлен генератор электромагнитного поля, которое не нагревает пластину напрямую, но заставляет магнитные зерна "дрожать", облегчая их перемагничивание.

Что касается дисков HAMR, то там применяется более стабильный сплав FePt (железо-пластина). На поверхность FePt нельзя записать данные с помощью способов PMR или MAMR. Для метода HAMR используется маленький лазерный диод, установленный на каждой головке записи. Он используется для кратковременного нагрева небольшого участка пластины. Пока участок горячий, головка записи перемагничивает биты на нем, меняя их ориентацию. Процесс нагрева-охлаждения занимает считаные наносекунды, поэтому лазер совершенно не влияет на температуру отдельной пластины и накопителя в целом, равно как и на стабильность и надежность хранения данных. Как считают специалисты ASTC, на данный момент только поверхность FePt позволяет добиться емкости накопителей 30 Тбайт и выше.

Инженеры Seagate свой выбор сделали, посчитав технологию HAMR более перспективной на ближайшие годы. Сегодня технология уже готова к массовому производству, в чем их большая заслуга. На нелегком пути инженерам пришлось решить огромное множество задач и разгадать технические тайны.

Технические тайныHAMR

Объемы данных продолжают расти, поэтому без дальнейшего повышения емкости жестких дисков не обойтись. Как мы уже неоднократно отмечали, при повышении плотности записи данных возникают проблемы температурной стабильности. Ниже приведена иллюстрация, где зеленым цветом показаны зерна битовой области с двоичным состоянием "1", а белым зерна области с состоянием "0". Как можно видеть, некоторые зерна поменяли свою ориентацию в области с закодированным битом, став белыми. Подобная смена может приводить к ошибкам, поэтому ее следует предотвращать.

Чтобы увеличить плотность хранения данных, необходимо уменьшать объем зерен на пластине ("V" в формуле ниже). Но при этом теряется температурная стабильность зерен, и для компенсации следует увеличивать анизотропию материала пластины (буква "K"). Анизотропия пропорциональна усилиям, которые необходимы для изменения магнитной ориентации зерен.

Чтобы сохранить высокий уровень SNR, число зерен в бите уменьшать нельзя. Поэтому рост плотности записи возможен только через уменьшение зерен. Но чем меньше зерна, тем выше вероятность смены состояния зерен и потери данных.

Как решить эту проблему? Чтобы ответить на вопрос, давайте обратимся к истории.

Немного истории: как повышалась плотность записи

Первые жесткие диски использовалипродольную магнитную запись(LR,LongitudinalRecording), намагничивался верхний слой диска, ориентация зерен параллельна его плоскости. Для записи используется краевое магнитное поле, которое показано на иллюстрации ниже. Обратите внимание на расположение стрелок записываемых данных в плоскости диска.

При увеличении плотности записи и уменьшении размера зерен, необходимо повышать анизотропию материала, как мы указали ранее. Но по мере того, как материал становится более стабильным, запись оказывается все более трудоемкой, для изменения ориентации зерен требуется уже более сильное магнитное поле. Более 60 лет производители жестких дисков усиливали магнитное поле головки записи, но было очевидно, что такой подход рано или поздно упрется в рамки законов физики.

ОтPMRкSMRиHAMR

Следующая эволюция плотности записи произошла благодаря переходу наперпендикулярную магнитную запись(PMR,PerpendicularMagneticRecording). Под слоем пластины с зернами расположен слоймагнитомягкогоматериала, который можно считать частью головки записи. В результате слой с зернами находится как бы в зазоре головки записи, что позволило усилить магнитное поле. Стрелки на записываемых данных расположены уже перпендикулярно поверхности диска, то есть ориентация зерен перпендикулярна плоскости диска.

В итоге удалосьуменьшить размер зерен и увеличить плотность записи.

Следующий эволюционный шаг переход на черепичную магнитную запись (SMR, Shingled Magnetic Recording). SMR увеличивает плотность хранения данных через более близкое расположение дорожек, а не через уменьшение размера зерен. Дорожки частично наслаиваются друг на друга, напоминая черепицу на крыше, отсюда и название. В результате на прежней площади пластины можно записать больше данных. И новые записываемые дорожки частично наслаиваются на старые.

Поскольку элемент чтения на головках намного меньше, чем элемент записи, данные с подобных наслоенных дорожек по-прежнему весьма успешно считываются без каких-либо компромиссов по надежности или целостности. Кроме того, для SMR можно использовать существующие технологии чтения и записи. Здесь не требуется существенно менять производственные конвейеры, поэтому себестоимость разработки и производства жестких дисков SMR остается низкой. Конечно, у SMR есть и недостатки по скорости записи, о чем можно узнать в нашей статье "SMR: понятно в теории, сложно на практике".

Технология SMR действительно обеспечивает увеличение емкости HDD. Seagate представила первый жесткий диск SMR в 2014 году, увеличив емкость на 25 процентов. При этом метод записи битов остался прежним, что позволило сочетать преимущества PMR и SMR. Но и данная технология не позволяет увеличивать плотность записи бесконечно. Современные жесткие диски PMR не могут дать выше 1 терабита на квадратный дюйм (Tbpsi). Законы физики обойти невозможно.

Диски FePt (железо-платина) с высокой анизотропией позволили решить проблемы температурной стабильности традиционных накопителей PMR и увеличить плотность записи. Но обычные головки записи уже не могут записать информацию на такие диски, поскольку магнитное поле недостаточно сильное.

Здесь на помощь приходит технология термомагнитной записи HAMR, которая обходит упомянутое ограничение, нагревая участок диска перед записью.

При комнатной температуре зерна на таком диске по-прежнему маленькие, но термически стабильные. Как раз то, что нам нужно. Благодаря нагреву участка, получается временно снизить коэрцитивную силу вещества.

В итоге запись производится только после нагрева участка, а хранить и считывать данные можно в обычном "холодном" состоянии. Причем весь процесс нагрева, записи и охлаждения занимает менее одной наносекунды.

Головки HAMR напоминают обычные PMR. Но к ним добавлен лазер, оптический волновод и преобразователь ближнего поля NFT (near-field transducer) для облегчения нагрева материала.

Разрабатываем дискHAMR

А теперь давайте на минутку представим себя инженеромSeagateи попытаемся разработать и произвести дискHAMR. Для этого следует сделать несколько шагов.

  • Добавить лазерный диод к головке

  • Разработать оптический волновод для передачи света от лазера кNFT

  • ВстроитьNFTв головку записи

  • Разработать новые пластиныHAMR

  • Доработать прошивку диска и тестовых систем

  • Изменить процесс производства, чтобы выпускать дискиHAMR

  • Сделать миллион разных мелочей, что входит в рабочий процесс инженеровSeagate

На головке HAMR лазер прикреплен к субмаунту. Затем оптоволокно передает свет от лазера к преобразователю NFT, который интегрирован в головку записи.

Но это еще не все. Оказалось, что нагревать напрямую лазером поверхность диска не получится. В этом и кроется тайна инженеров Seagate. Для наших читателей нам ничего не жалко, поэтому сорвем же завесу тайны!

Как быть с дифракционным пределом?

Уже более ста лет известно, чтодифракция ограничивает размер пятна сфокусированного света(см.Дифракционный предел). У накопителяBlu-rayразмер пятна составляет 238 нанометров. Если перейти к масштабу дорожек диска, то пятно слишком крупное. Даже если пойти на оптические хитрости и использовать технологии записи в ближнем поле, то меньше около 100нмполучить сложно. Так что требуется какое-либо другое решение.

Для преодоления дифракционного предела мы будем использовать поверхностные плазмоны. И наш преобразователь ближнего поля NFT становится плазмонным. Когда свет попадает на определенные металлы, то при соблюдении ряда условий он приводит к появлению поверхностного электрического тока. Данный поверхностный ток и связанное с ним электрическое поле и называется поверхностными плазмонами. Они легко распространяются по поверхности металла.

На самом деле, поверхностные плазмоны хорошо знакомы читателям. Человечество использует их на протяжении тысячелетий. Первые витражи в европейских кафедральных соборах появились в VII веке нашей эры. Чтобы создавать разные цвета, мастера смешивали стекло с частицами металла. И когда свет определенной волны в видимом диапазоне попадал на металлические частицы в стекле, то он поглощался и превращался в тепло или рассеивался. Остальные волны видимого диапазона проходили через стекло, создавая восприятие цвета.

Плазмонный преобразователь NFT, разработанный Seagate, использует упомянутый принцип. Плазмонный NFT состоит из диска и выступа. Свет поглощается диском и превращается в поверхностный плазмон. Данный поверхностный плазмон затем перемещается по внешнему контуру диска и вниз по выступу, нагревая участок пластины под диском. Ширина выступа как раз определяет размер горячего участка на пластине. Причем размер участка намного меньше пятна, которое было бы возможно с учетом дифракционного предела. Таким образом, ограничения дифракционного предела удалось обойти.

За последние 15 лет инженеры Seagate трудились, не покладая рук. Дизайн HAMR был много раз переработан и собран "с нуля". Инженерам удалось перейти от теоретической концепции к первым практическим реализациям. На протяжении цикла разработки HAMR было изготовлено более 25 млн. плазмонных преобразователей NFT!

Как дорабатывались пластиныHAMR

Конечно, сами пластины жесткого диска тоже пришлось существенно дорабатывать. Подложка пластинHAMR(DiskSubstrate) изготовлена из специального стекла, способноговыдерживатьнагрев записывающего слоя до высоких температур. ДляHAMRпотребовалось добавить слой-радиатор(HeatSink/SUL), чтобы он отводил тепло от записывающего слоя. Слишком быстрое отведение приводило бы к недостаточной мощности нагрева. Слишком медленное к перегреву участка, из-за чего нагревались бы соседние участки с последующей потерей информации. Для успеха жестких дисковHAMRбыло важно получить нужный баланс. Покрытие пластины тоже пришлось сменить, чтобы оновыдерживалонагрев до более 400C, но при этом обеспечивало надежный интерфейс между пластиной и головкой записи.

ВыходHAMRна рынок: важно быть лидером в исследованиях

Seagateуженачала коммерческую эксплуатацию технологииHAMR, запустив массовое производство 20-Тбайт жестких дисков в конце 2020 года. Но, как мы отметили выше, в рознице эти диски вряд ли появятся, они отгружаются только партнерам. Скорее всего,Seagateначнет массовую продажу накопителейHAMR,начиная с емкости 24 Тбайт.

9 ноября 2010 годаSeagateприсоединилась к двенадцати другим членам консорциумаAdvancedStorageTechnologyConsortium(ASTC). И каждый последующий годSeagateвместе с другими компаниями инвестирует немалые суммы в фундаментальные исследования технологий хранения данных под эгидойASTC.

Каждый годASTCпубликует технологические планы, которые показывают, в каком направлении будет двигаться индустрия. Выше как раз приведен подобный план. Позвольте разобрать его чуть подробнее.

Что нас ждет в будущем?

Как можно видеть по планам, технологияPMRбудет с нами еще несколько лет, учитывая наработки с гелиевым наполнениемHDD,SMRи использование нескольких приводов (см.SeagateMACH.2 и Exos 2X14: разбираемся в преимуществах двойного привода).

На конференцииASTC2020 доктор СтефанияЭрнандесиспользовала микромагнитное моделирование, которое масштабировало технологиюHAMRдо6,0Tbpsi(терабитна квадратный дюйм). А доктор СтивГранцв своей демонстрацииHAMRсмог получить плотность записи2,77Tbpsi, поставив новый рекорд по критериямASTC.

Seagateс жесткими дискамиHAMRуже удалось получить уровень2,0Tbpsi. Тестируется технология с плотностью записи2,381Tbpsi, она обеспечит емкость3 Тбайт на пластину, то естьHDDс девятью пластинами смогут дать уже27 Тбайтемкости. Переход на жесткие дискиHAMRне потребует изменения экосистемы и инфраструктуры. На данный момент прогнозируется20% ежегодный рост емкости, что позволит получить 24-ТбайтHDDв ближайшем будущем, а через несколько лет емкость достигнет 40 Тбайт и выше.

Рано или поздноHAMRбудет сочетаться с технологией записи, использующейбитовые шаблоныBPMR(bitpatternedmedia). В случаеSeagateданная технология называетсяHDMR(HeatedDotMagneticRecording), она позволит увеличить емкость жестких дисков до 100 Тбайт и выше.

ПослеHDMRбудут и другие технологии, которые позволятSeagateпредлагать передовые решения с высокой емкостью по оптимальной цене.

Подробнее..

Лучший жесткий диск за свои деньги весна 2021

23.03.2021 18:09:53 | Автор: admin

Твердотельные накопители продолжают набирать популярность, но традиционные жесткие диски не стоит списывать со счетов. Они по-прежнему лучше подходят для долгосрочного хранения данных, обеспечивая более выгодную цену в расчете на гигабайт. Поэтому во многих ПК и ноутбуках вместе с системным SSD можно встретить и жесткий диск. Сетевые хранилища и системы видеонаблюдения тоже остаются традиционной сферой использования HDD. А внешние накопители на HDD отличаются хорошим балансом цены и емкости.

На рынке можно приобрести жесткие диски разных производителей, но, по понятным причинам, в рамках данного руководства мы ограничимся продукцией компании Seagate. Кроме того, накопители Seagate отличаются высокой надежностью и приличным сроком гарантии.

Но какую модель выбрать для ПК или NAS? Как получить максимальную ёмкость и производительность за свои деньги? Об этом мы и поговорим в нашей статье, приняв во внимание все последние изменения на рынке.

Мы указывали цены на момент публикации, полученные в открытых источниках. Цены меняются каждый день, поэтому для удобства мы привели ссылки на Яндекс.Маркет, которые помогут найти актуальные цены в вашем регионе. Мы принимали во внимание розничные цены новых накопителей, без учета старых или бывших в употреблении моделей. Кроме того, во многих магазинах постоянно действуют различные акции, которые не мешает проверять. В любом случае, вы не разочаруетесь, если купите любой из рекомендованных нами накопителей.

Ключевые характеристики жестких дисков

Перед тем, как мы рассмотрим лучшие жесткие диски за свои деньги, позвольте вкратце напомнить ключевые характеристики накопителей. Мы не будем рассматривать их подробно, но понимания критериев при выборе HDD небольшой ликбез необходим.

Форм-фактор

Сегодня на рынке доминируют жесткие диски в 3,5" формате, которые чаще всего используются в компьютерах, NAS, системах видеонаблюдения, внешних боксах. Причина кроется в оптимальном сочетании емкости, производительности и занимаемого пространства. Поэтому большая часть нашего руководства будет посвящена как раз 3,5" формату.

В ноутбуках и внешних боксах применяются 2,5" жесткие диски из-за меньших размеров. Емкость при этом тоже придется принести в жертву она ограничена 5 Тбайт. Модели 2,5" малой емкости сегодня вытесняются SSD, но жесткие диски емкостью в несколько терабайт остаются интересными для некоторых сценариев, например, для хранения игровой библиотеки на ноутбуке или резервного копирования на переносном жестком диске.

Отдельная категория внешние накопители. Они представляют собой те же 2,5" или 3,5" HDD, заключенные в корпус. В случае 2,5" HDD есть преимущество дополнительное питание чаще всего не требуется. Кроме того, внешние накопители часто предлагают бонусы, такие как USB-концентратор или дополнительный софт резервирования.

Емкость

Основной параметр жесткого диска, выражается в терабайтах. Следует помнить, что производители жестких дисков считают емкость в десятичной системе, а не в двоичной (MiB, GiB, TiB), поэтому на практике ёмкость после форматирования будет меньше. Как правило, жесткие диски значительной емкости обеспечивают более выгодную стоимость гигабайта. Поэтому иногда выгоднее немного доплатить, но существенно выиграть по емкости.

Скорость вращения шпинделя

Раньше данный параметр был один из основных, поскольку влиял на производительность жесткого диска (пропускную способность и задержки). Но поскольку в качестве системных накопителей все чаще устанавливают SSD, а HDD используют для хранения данных, то скорость вращения шпинделя уже не так важна. Распространены два варианта: 7.200 об/мин и 5.400 об/мин. При прочих равных большая скорость вращения дает более высокий уровень производительности. Но при этом возможны жертвы по энергопотреблению и уровню шума, поэтому слепо гнаться за высокой скоростью вращения не стоит. Она должна быть достаточной, чтобы жесткий диск давал приемлемый уровень производительности.

Тип записи и другие технологии

Жесткие диски высокой емкости (обычно 10 Тбайт и выше) перешли на гелиевое наполнение вместо обычного воздуха, что привело к улучшениям по уровню шума и энергопотреблению. В нашем обзоре гелиевые HDD представлены линейкой Exos. Пластины при этом получается располагать ближе друг к другу, что позволяет добиться рекордных уровней емкости в каждом поколении. Из-за себестоимости гелиевые жесткие диски начинаются только с определенного уровня емкости. А младшие линейки HDD используют воздух.

Из современных технологий магнитной записи следует упомянуть перпендикулярную (PMR), на которой работают большинство жестких дисков. Для дальнейшего увеличения емкости без чрезмерного удорожания была разработана технология черепичной записи (SMR). С одной стороны, она позволяет в прежний бюджет уместить большую емкость. С другой стороны, придется жертвовать снижением скорости записи. Для многих сценариев SMR остается вполне разумным выбором. Например, большинство представленных в статье 2,5" накопителей опираются на SMR. Подробнее об этой технологии можно прочитать в нашей статье SMR: понятно в теории, сложно на практике.

В этом году на рынок должны выйти жесткие диски с передовыми технологиями записи HAMR и MAMR, которые позволяют перейти на новые уровни емкости. Здесь мы рекомендуем прочитать статью От витражей к терабайтам: разгадываем тайны HAMR. Как только жесткие диски появятся на рынке, мы добавим их в обзор.

Выбираем лучший 3,5" HDD

Жесткие диски 3,5" формата остаются наиболее популярными на рынке из-за оптимального сочетания размеров, емкости и скорости. Seagate разделяет свои 3,5" жесткие диски на несколько линеек: Barracuda (Pro) для настольных ПК, IronWolf (Pro) для NAS, SkyHawk (AI) для видеонаблюдения, Exos для серверов. Разница кроется в различных рабочих характеристиках, прошивке, сертификации и т.д. В принципе, нет ничего страшного в том, чтобы использовать тот же серверный жесткий диск Exos в домашнем ПК, но придется смириться, например, с более высоким уровнем шума.

Мы рассмотрим только накопители с интерфейсом SATA. Потребительская линейка Seagate Barracuda остается весьма выгодной до своей максимальной емкости 8 Тбайт. Но затем пальму первенства перехватывает семейство Exos, как мы покажем ниже.

2.500 и 1 Тбайт - Seagate Desktop HDD ST1000DM003

Мы начнем с минимальной емкости 1 Тбайт, которую можно приобрести за 2.500 . Меньшие варианты емкости брать смысла не имеет, поскольку преимущества по цене нет. Жесткий диск Seagate Desktop HDD ST1000DM003 сравнительно старый, поколения 2014 года (7200.14), но со своей работой он справляется. Скорость вращения шпинделя 7.200 об/мин, заявленная скорость передачи до 210 Мбайт/с, рабочее энергопотребление 5,9 Вт. Гарантия 2 года. См. подробные спецификации.

Емкость 1 Тбайт по современным меркам небольшая, поэтому данный жесткий диск имеет смысл брать только покупателям с ограниченным бюджетом. Самые дешевые SSD на 1 Тбайт стоят в три раза дороже.

Купить Seagate Desktop HDD ST1000DM003 за 2.500

3.800 и 2 Тбайт Seagate Barracuda ST2000DM008

Следующий ценовой уровень наглядно показывает, что за удвоение емкости придется заплатить отнюдь не удвоенную цену. Уровень 2 Тбайт многими пользователями считается оптимальным, поскольку и цена хорошая, и емкость неплохая. 1 Тбайт здесь обойдется в 1.900 .

Жесткий диск Seagate Barracuda ST2000DM008 относится к современному поколению со скоростью вращения шпинделя 7.200 об/мин, скорость передачи данных до 220 Мбайт/с, рабочее энергопотребление 4,3 Вт. Жесткий диск опирается на всего одну пластину, поэтому и результаты энергопотребления приятно радуют. Гарантия 2 года. См. подробные спецификации.

Жесткий диск уже фигурировал в нашем обзоре Seagate ST2000DM008: быстрая двушка без оверпрайса, где получил весьма высокую оценку.

Купить Seagate Barracuda ST2000DM008 за 3.800

5.600 и 3 Тбайт Seagate Barracuda ST3000DM008

Следующий ценовой уровень позволяет нарастить емкость еще на 1 Тбайт, доплатив разумную сумму (1.867 /Тбайт). ST3000DM008 относится к той же современной линейке, что 2-Тбайт модель ST2000DM008. Скорость вращения шпинделя 7.200 об/мин, скорость передачи данных до 210 Мбайт/с, рабочее энергопотребление 8 Вт. По энергопотреблению видно, что число пластин увеличилось до трех. Гарантия 2 года. См. подробные спецификации.

Купить Seagate Barracuda ST3000DM008 за 5.600

7.400 и 4 Тбайт Seagate Barracuda ST4000DM004

Емкость 4 Тбайт тоже масштабируется практически линейно по цене (1.850 /Тбайт). Семейство накопителей не изменилось, но 4-Тбайт ST4000DM004 опирается на две пластины, а также меньшую скорость вращения шпинделя 5.400 об/мин. Поэтому энергопотребление чуть ниже 3-Тбайт версии 3,7 Вт. Скорость передача данных заявлена до 190 Мбайт/с. Как мы отмечали выше, жесткие диски уже редко используются в качестве системных. Но если такая необходимость возникнет лучше брать модель на 7.200 об/мин. В данном случае мы получаем классический HDD для хранения данных. Гарантия 2 года. См. подробные спецификации.

Внимание: возможно, более выгодным вариантом станет покупка внешнего Seagate Backup Plus Portable Drive с 2,5" накопителем на 4 Тбайт или Seagate Basic с 2,5" HDD на 5 Тбайт (см. ниже).

Купить Seagate Barracuda ST4000DM004 за 7.400

11.800 и 6 Тбайт - Seagate Barracuda ST6000DM003

Жесткие диски емкостью 5 Тбайт стоят не дешевле 6-Тбайт вариантов, поэтому брать их смысла нет. Следующая ценовая ступенька 6-Тбайт ST6000DM003. Здесь работают три пластины на 5.400 об/мин, энергопотребление заявлено 5,3 Вт, скорость последовательной передачи данных до 190 Мбайт/с. Жесткий диск можно рекомендовать тем пользователям, кому емкости 4 Тбайт будет недостаточно. Масштабирование цены в расчете на терабайт здесь немного ухудшается по сравнению с HDD младшей емкости 1.967 /Тбайт. Но 6 Тбайт остается довольно популярным вариантом для хранения данных. Гарантия 2 года. См. подробные спецификации.

Внимание: возможно, более выгодным вариантом станет покупка внешнего Seagate Backup Plus Hub 6 TB (см. ниже).

Купить Seagate Barracuda ST6000DM003 за 11.800

13.700 и 8 Тбайт Seagate Barracuda ST8000DM004

Переход на 8 Тбайт оказался более привлекателен по цене, поскольку здесь мы получаем 1.712 /Тбайт. Поэтому данную модель ST8000DM004 брать выгоднее, чем многие другие. Жесткий диск относится все к той же современной линейке Barracuda. Несмотря на четыре пластины, энергопотребление не увеличилось 5,3 Вт. Скорость последовательной передачи данных прежняя до 190 Мбайт/с, как и скорость вращения шпинделя 5.400 об/мин. Гарантия 2 года. См. подробные спецификации.

Внимание: возможно, более выгодным вариантом станет покупка внешнего Seagate Expansion Desktop Drive 8 TB (см. ниже).

Купить Seagate Barracuda ST8000DM004 за 13.700

19.100 и 12 Тбайт - Seagate Exos X16 ST12000NM001G

Следующее выгодное предложение жесткий диск на 12 Тбайт ST12000NM001G из линейки Exos X16 с гелиевым наполнением. Емкость 10 Тбайт пришлось пропустить, поскольку выгодных цен мы не нашли. В случае 12-Тбайт HDD цена терабайта весьма привлекательная 1.592 . Здесь проявляется феномен емкости: чем она выше, тем вкуснее цена гигабайта. Данный накопитель лидирует в нашем руководстве по минимальной цене в расчете на емкость (если не учитывать внешние HDD).

Линейка ST12000NM001G относится к корпоративному классу, поэтому гарантия составляет пять лет, есть и сертификат на режим работы 24/7. Скорость вращения шпинделя 7.200 об/мин, пропускная способность передачи данных до 245 Мбайт/с, максимальная потребляемая мощность 9,5 Вт. См. подробные спецификации.

Жесткие диски Exos X16 отлично подойдут для NAS. При использовании в домашней системе следует учитывать высокий уровень шума.

Внимание: возможно, более выгодным вариантом станет покупка внешнего Seagate Backup Plus Hub 12 TB (см. ниже). Но при этом теряются плюшки Exos.

Купить Seagate Exos X16 ST12000NM001G за 19.100

24.600 и 14 Тбайт - Seagate Exos X16 ST14000NM001G

Серверные накопители Exos X16 продолжают лидировать по соотношению цена/емкость, обеспечивая при этом отличную производительность. Прирост емкости ST14000NM001G на 2 Тбайт оказался менее эффективным: 1.753 /Тбайт. В остальном мы получаем ту же гелиевую линейку со всеми преимуществами корпоративного класса, главные из которых гарантия 5 лет и сертификация на работу 24/7. Скорость вращения шпинделя составляет 7.200 об/мин, пропускная способность передачи данных до 261 Мбайт/с, максимальная потребляемая мощность 10 Вт. См. подробные спецификации.

Жесткие диски Exos X16 отлично подойдут для NAS. При использовании в домашней системе следует учитывать высокий уровень шума.

Внимание: возможно, более выгодным вариантом станет покупка внешнего Seagate Expansion Desktop Drive 14 TB (см. ниже). Но при этом теряются плюшки Exos.

Купить Seagate Exos X16 ST14000NM001G за 24.600

29.700 и 16 Тбайт - Seagate Exos X16 ST16000NM001G

Серверная линейка Exos X16 продолжает оставаться выгодной и в старшем варианте емкости ST16000NM001G - 1.860 /Тбайт. К преимуществам гелиевого накопителя отнесем срок гарантии 5 лет и сертификат на работу в режиме 24/7. Скорость вращения шпинделя составляет 7.200 об/мин, пропускная способность передачи данных до 261 Мбайт/с, максимальная потребляемая мощность 10 Вт. См. подробные спецификации.

Жесткие диски Exos X16 отлично подойдут для NAS. При использовании в домашней системе следует учитывать высокий уровень шума.

Внимание: возможно, более выгодным вариантом станет покупка внешнего Seagate Expansion Desktop Drive 16 TB (см. ниже). Но при этом теряются плюшки Exos.

Купить Seagate Exos X16 ST16000NM001G за 29.700

33.800 и 18 Тбайт - Seagate Exos X18 ST18000NM000J

Таким же выгодным приобретением оказывается вариант ST18000NM000J в максимальной емкости 18 Тбайт, доступной на рынке. Здесь мы получаем всего 1.880 /Тбайт. Но линейка X18 более современная, недавно мы как раз опубликовали тест Seagate Exos X18 жесткий диск корпоративного класса на 18 Тбайт, где приведены подробности. Конечно, не обошлось без солидной гарантии на 5 лет и сертификата на работу 24/7. Максимальная скорость новой линейки была увеличена до 270 Мбайт/с. Максимальная потребляемая мощность снижена до 9,4 Вт. См. подробные спецификации.

Жесткие диски Exos X18 отлично подойдут для NAS. При использовании в домашней системе следует учитывать высокий уровень шума.

Купить Seagate Exos X18 ST18000NM000J за 33.800

Выбираем лучший 2,5" HDD

Еще лет десять назад основной сферой использования 2,5" HDD были ноутбуки, но сегодня место системных мобильных накопителей заняли SSD. Если в ноутбуке предусмотрен отсек под второй накопитель в формате 2,5", то его как раз можно занять емким жестким диском, так как SSD в расчете на гигабайт остаются значительно дороже. Кроме того, 2,5" HDD можно использовать во внешнем боксе как переноску. Следует обращать внимание на толщину накопителя. Многие устройства рассчитаны на установку 2,5" HDD толщиной 7 мм. Самые емкие модели имеют толщину 15 мм, поэтому они подойдут далеко не для всех ноутбуков или боксов. Ниже мы рассмотрим 2,5" HDD только с интерфейсом SATA.

2.900 и 1 Тбайт Seagate ST1000LM035

Мы вновь выставили минимальную планку 1 Тбайт, поскольку брать меньшую емкость нерационально. Жесткий диск ST1000LM035 использует одну пластину, скорость вращения шпинделя составляет 5.400 об/мин, скорость последовательной передачи до 140 Мбайт/с. Энергопотребление всего до 1,6 Вт. Срок гарантии два года. Перед нами экономичный жесткий диск, который хорошо подойдет и как дополнительный накопитель ноутбука (толщина 7 мм), и для переносного бокса. Конечно, если емкости 1 Тбайт будет достаточно. См. подробные спецификации.

Купить Seagate ST1000LM035 за 2.900

4.200 и 2 Тбайт Seagate ST2000LM007

Следующая планка емкости 2 Тбайт оказывается более выгодной, мы получаем уже 2.100 /Тбайт. ST2000LM007 опирается на две пластины, поэтому энергопотребление поднялось до 1,7 Вт. Скорость вращения шпинделя 5.400 об/мин, гарантия два года, скорость передачи данных до 140 Мбайт/с. Как и модель на 1 Тбайт, его можно рекомендовать для ноутбуков (вторым HDD, толщина 7 мм) и переносных боксов. См. подробные спецификации.

Купить Seagate ST2000LM007 за 4.200

7.700 и 4 Тбайт Seagate Barracuda ST4000LM024

Емкость 4 Тбайт ST4000LM024 оказалась еще более привлекательной 1.930 /Тбайт. Причем линейка уже другая Barracuda, но скорость вращения шпинделя не изменилась 5.400 об/мин. Среднее энергопотребление при чтении/записи составляет до 2,1 Вт, скорость передачи данных до 140 Мбайт/с. Гарантия 2 года. Жесткий диск имеет толщину 15 мм, поэтому он подойдет далеко не для всех ноутбуков и боксов. Проверяйте совместимость перед покупкой. См. подробные спецификации.

Внимание: возможно, более выгодным вариантом станет покупка внешнего Seagate Backup Plus Portable Drive с данным накопителем (см. ниже).

Купить Seagate Barracuda ST4000LM024 за 7.700

12.000 и 5 Тбайт Seagate Barracuda ST5000LM000

Жесткий диск ST5000LM00 на 5 Тбайт уже выходит из окна оптимального соотношения емкости и цены 2.400 /Тбайт. Зато он позволяет уместить в компактном объеме целых пять терабайт! Но, как и в случае модели на 4 Тбайт, следует учитывать толщину 15 мм. Поэтому проверяйте совместимость перед покупкой. Скорость вращения шпинделя 5.400 об/мин, среднее энергопотребление до 2,1 Вт, скорость передачи данных до 140 Мбайт/с, гарантия два года. См. подробные спецификации.

Внимание: возможно, более выгодным вариантом станет покупка внешнего Seagate Basic с данным накопителем (см. ниже).

Купить Seagate Barracuda ST5000LM000 за 12.000

Внешние накопители

Внешний накопитель можно легко сделать самому, достаточно купить бокс для 2,5" или 3,5" жесткого диска с нужным интерфейсом, после чего установить HDD самостоятельно. Сегодня наиболее распространены боксы с подключением USB, причем поддерживаются разные стандарты: USB 3.2 Gen1 (5 Гбит/с), USB 3.2 Gen2 (10 Гбит/с) или USB 3.2 Gen2x2 (20 Гбит/с). Но учтите, что на практике скорость будет упираться в производительность HDD, поэтому даже USB 3.2 Gen1 более чем достаточно, поскольку 5 Гбит/с это на практике около 500 Мбайт/с, а жесткий диск намного медленнее.

Как правило, боксы для 2,5" жестких дисков не требуют дополнительного питания, но для вариантов под 3,5" HDD оно необходимо. Максимальная емкость 2,5" HDD составляет 5 Тбайт, поэтому более емкие модели опираются на 3,5" HDD.

3.500 и 1 Тбайт - Seagate Backup Plus Slim Portable Drive

Внешний HDD Seagate Backup Plus Slim Portable Drive с подключением USB 3.2 Gen1 и емкостью 1 Тбайт имеет компактные габариты 114,8 x 78 x 11,7 мм и вес 126 г. Гарантия составляет два года. Внутри, по неофициальной информации, используется Seagate ST1000LM035, приведенный выше. Хороший вариант для переносного накопителя, но при небольшой доплате выгоднее взять емкость 2 Тбайт. См. подробные спецификации.

Внимание: накопители Backup Plus скоро исчезнут из розницы, их заменит линейка Seagate One Touch HDD. Так что с покупкой по выгодной цене стоит поторопиться.

Купить Seagate Backup Plus Slim Portable Drive 1 TB за 3.500

4.800 и 2 Тбайт - Seagate Backup Plus Slim Portable Drive

В емкости 2 Тбайт самой выгодной покупкой оказывается та же линейка Seagate Backup Plus Slim Portable Drive с габаритами 114,8 x 78 x 11,7 мм, весом 126 г и подключением USB 3.2 Gen1. Гарантия два года, внутри (неофициально) используется Seagate ST2000LM007, рассмотренный выше. Цена 1 Тбайт составляет 2.400 . См. подробные спецификации.

Внимание: накопители Backup Plus скоро исчезнут из розницы, их заменит линейка Seagate One Touch HDD. Так что с покупкой по выгодной цене стоит поторопиться.

Купить Seagate Backup Plus Slim Portable Drive 2 TB за 4.800

7.000 и 4 Тбайт - Seagate Backup Plus Portable Drive

С емкостью 3 Тбайт выгодных вариантов нет, чего нельзя сказать о 4 Тбайт. Линейка Seagate Backup Plus Portable Drive с подключением USB 3.2 Gen1 использует 2,5" HDD Seagate с толщиной 15 мм. Причем покупать внешний накопитель дешевле, чем 2,5" HDD отдельно. Цена 1 Тбайт всего 1.750 . Корпус довольно компактный 114,5 x 78 x 20,5 мм, вес 247 г. По неофициальной информации, внутри установлен ST4000LM024. Гарантия составляет 2 года. См. подробные спецификации.

Внимание: накопители Backup Plus скоро исчезнут из розницы, их заменит линейка Seagate One Touch HDD. Так что с покупкой по выгодной цене стоит поторопиться.

Купить Seagate Backup Plus Portable Drive 4 TB за 7.000

8.000 и 5 Тбайт Seagate Basic

Еще один очень любопытный накопитель в линейке Seagate Basic на 5 Тбайт. Габариты 117 x 80 x 20 мм немного больше Backup Plus Portable, как и вес 270 г, но не принципиально. Подключение тоже осуществляется через USB 3.2 Gen1, гарантия всего 1 год. Цена в расчете на Тбайт приятно радует всего 1.600 . Внутри, по неофициальной информации, установлен ST5000LM000. См. подробные спецификации.

Купить Seagate Basic 5 TB за 8.000

10.000 и 6 Тбайт - Seagate Backup Plus Hub

С емкостью больше 5 Тбайт уже приходится переходить на внешние боксы в формате 3,5". И здесь выгодным предложением является Seagate Backup Plus Hub 6 TB STEL6000200 с ценой 1 Тбайт всего 1.667 . Подключение все то же USB 3.2 Gen1, габариты 41 x 198,1 x 118 мм, вес 1,06 кг, в качестве бонуса встроен аккумулятор и два порта USB для зарядки или подключения устройств (по сути, USB-концентратор). Внутри, по неофициальной информации, используется HDD Barracuda ST6000DM003. Гарантия составляет 2 года. Необходимо дополнительное питание.

См. подробные спецификации.

Купить Seagate Backup Plus Hub 6 TB за 10.000

11.700 и 8 Тбайт - Seagate Expansion Desktop Drive

В емкости 8 Тбайт мы нашли более выгодную линейку Seagate Expansion Desktop Drive, которая в варианте STEB8000402 дает стоимость 1 Тбайт всего 1.470 . Габариты составляют 176 x 120,6 x 36,6 мм, вес 950 г. Подключение USB 3.2 Gen1. По неофициальной информации внутри установлен ST8000DM004. Гарантия составляет 2 года. Необходимо дополнительное питание. См. подробные спецификации.

Купить Seagate Expansion Desktop Drive 8 TB за 11.700

17.400 и 12 Тбайт - Seagate Backup Plus Hub

С емкостью 10 Тбайт мы не обнаружили выгодных предложений, поэтому сразу же переходим к варианту на 12 Тбайт - Seagate Backup Plus Hub STEL12000400. Цена терабайта стала еще более привлекательной 1.450 . Подключение все то же USB 3.2 Gen1, габариты 41 x 198,1 x 118 мм, вес 1,06 кг, в качестве бонуса встроен аккумулятор и два порта USB для зарядки или подключения устройств (по сути, USB-концентратор). Гарантия составляет 2 года. Необходимо дополнительное питание. См. подробные спецификации.

Купить Seagate Backup Plus Hub 12 TB за 17.400

19.200 и 14 Тбайт - Seagate Expansion Desktop Drive

С увеличение емкости еще на 2 Тбайт до 14 Тбайт более выгодной вновь становится линейка Seagate Expansion Desktop Drive, а именно накопитель STEB14000400. Мы получаем цену 1 Тбайт всего 1.371 . Габариты составляют 176 x 120,6 x 36,6 мм, вес 950 г. Гарантия составляет 2 года. Необходимо дополнительное питание. См. подробные спецификации.

Купить Seagate Expansion Desktop Drive за 19.200

25.500 и 16 Тбайт - Seagate Expansion Desktop Drive

Еще 2 Тбайт емкости дали максимальный вариант среди внешних HDD - накопитель Seagate Expansion Desktop Drive STEB16000400 на 16 Тбайт. Однако цена 1 Тбайт повысилась до 1.600 . Так что брать накопитель на 16 Тбайт имеет смысл только в том случае, если емкости 14 Тбайт будет недостаточно. Габариты составляют 176 x 120,6 x 36,6 мм, вес 950 г. Гарантия 2 года. Необходимо дополнительное питание. См. подробные спецификации.

Купить Seagate Expansion Desktop Drive за 25.500

Какой накопитель выбрать?

Мы проанализировали рынок на состояние марта 2021, после чего привели рекомендации жестких дисков в разных ценовых категориях. Выводы получились любопытными.

Среди обычных HDD 3,5" формата лидером до емкости 8 Тбайт включительно была линейка Barracuda. Младшие HDD работают со скоростью вращения шпинделя 7.200 об/мин, но в емкости 4-8 Тбайт она составляет уже 5.400 об/мин. Что вполне логично: младшие HDD могут использоваться и как системные в самых бюджетных ПК, где не получается докупить SSD. С емкости 4 Тбайт ценовой уровень уже подразумевает, что у пользователя есть средства на системный SSD. Поэтому HDD емкостью от 4 Тбайт будут работать не как системные, а для хранения данных. И здесь высокие обороты шпинделя не так важны.

В вариантах емкости 12-18 Тбайт самыми выгодными HDD неожиданно оказались серверные Exos. Здесь главный бонус гарантия 5 лет и сертифицированная нагрузка 24/7. Диски хорошо подойдут для NAS, а также и для домашних ПК, но уровень шума у них может быть сравнительно высоким. К бонусам можно отнести гелиевое наполнение, которое приводит к низкому энергопотреблению, несмотря на 7.200 об/мин.

В сегменте 2,5" жестких дисков мы привели экономичные варианты на 1 и 2 Тбайт для ноутбуков, а также на 4 и 5 Тбайт для внешних боксов. Но у последних следует учитывать высоту 15 мм, ограничивающую совместимость.

Мы надеемся, что наше руководство поможет выбрать лучший жесткий диск за свои деньги.

Подробнее..

Зачем ROM и RAM криптовалютчикам?

24.03.2021 10:15:26 | Автор: admin


Только ленивый на habr-е не слышал про блокчейн и майнеров. Эта каста людей уже отняла у геймеров видеокарты, но скоро, возможно, она позарится на жёсткие диски и оперативную память. Если кто-то скажет вам, что они не нужны, отправьте этого масона криптовалютного заговора читать нашу статью.


Погружение в Блокчейн


Если вы разбираетесь в узлах, майнинге и остальных нюансах, то зачем вы это читаете? пропустите этот скромный блок текста, так как тут мы погрузимся в азы работы криптовалютой системы. Никаких глубокомысленных сложностей не будет.

В основе всего процесса лежит Хэш функция. Эта такая штука, которая позволяет из маленького или огромного блока данных получить кашу из цифр, букв и символов определённой длины. Сразу к примерам:

Я люблю Kingston fkgkd240ckro3
Я люблю Хабр gkfs40sfvmggr
Я люблю Kingston и Хабр fscm2clg5c0r5

Видите? Ну как же нет? Правильно говорила мама: преподавание не твоё. . Чтобы мы не подали на вход, на выходе получается кракозябра длиной 13 символов. Если две кракозябры совпадают, то значит, что они получены пропусканием через хэширование одних и тех же данных. Считается, что по кракозябре нельзя понять, что было до хэширования.



Вот и получается, что каждая транзакция в блокчейне проходит через Хэш. Для новой транзакции берётся хэш-значение предыдущей операции и хэшируется в связке с новой. И всё это становится частью следующей транзакции.

Если вы злодей, который хочет сказать, что второй транзакции не было, то вам нужно пересчитать хэш от 2-ой транзакции, что изменит результат 3-ей, которую тоже надо пересчитать и так далее. А ведь это не мешки ворочать. Придётся запастись огромной вычислительной мощностью и даже это вам не поможет.

Блокчейн децентрализован, то есть записи об операциях не хранятся в одном месте. Никто не может что-то поменять и навязать остальным, что так и было. Аналогичные журналы с операциями находятся у сотен/десятков/тысяч. Чувствуете? Запахло памятью.

Основы майнинга


Майнеры не просто добывают какие-то фантики, они занимаются сложными математическими вычислениями, которые обосновывают проводимые в криптовалюте операции. В их обязанности входит создание новых блоков криптовалюты, куда записываются транзакции, а также вычисление хэшей. Причём делается это как на уроках математики в лучшие школьные годы перебором всех возможных вариантов ответа.

Дело в том, что каждая криптовалюта отличается от своих собратьев. На программном уровне майнерам вставляют палки в колёса, что усложняет процесс просчёта хэшей и создания блоков. И то же гарантирует то, что какой-то умник с мегакомпьютером не изменит журнал транзакций, так как на каждый блок уходят огромные мощности.

В процессе майнинга, майнеры получают комиссию за обслуживание операций, а также за создание новых монет. Остальные подробности нам не нужны.

Майнинг и память


Ранее уже говорилось, что каждая криптовалюта скрывает в себе свой дивный мир с палками и колёсами. Этим и объясняется совершенно разный подход к железу. Логично, что одна и та же видеокарта добывает разное количество коинХабов и КриптоКингстонов за один промежуток времени. При этом основные ресурсы берутся с видеокарты: GPU + видеопамять. Но закон везде один: со временем стучать киркой становится сложнее.

Но при этом стоит учитывать время поднятие системы при отказе. В таком случае выгодно использовать SSD, пускай даже и маленький. Им же легко компенсировать маленькое количество оперативной памяти, например, 4 ГБ DDR4. Этого объёма достаточно для работы с bitcoin на машине под управлением Windows. Главное расширить файл подкачки хотя бы до 16 ГБ. Впрочем, давайте смотреть подробнее.

Зависимость от RAM


Она наступает тогда, когда вы имеете дело с более сложной криптовалютой. Bitсoin хэширует лишь информацию об операции, а в случае с Ethereum, блокчейн может содержать микропрограммы. И вот вместо 4 ГБ, ОЗУ подрастает до 8 ГБ.


Вторым важным моментом является майнинг при помощи процессоров. У видеокарты есть видеопамять, а у процессора кента нет. Для него боевым товарищем становится оперативная память и качество её работы напрямую влияет на производительность майнинга, особенно если вы занимаетесь разгоном. В таком случае для продвинутого майнинга Monero (в конце 2019 года) на одном Ryzen 7 3700X требовалось 16 ГБ ОЗУ. И банальное повышение частоты с 2400 МГц до 3200 МГц приводит к реальным результатам.



Зависимость от ROM


Выше уже было напечатано, что SSD повышает скорость перезагрузки системы в случае ошибки. Вдобавок твердотельный диск требует меньше энергии, что снижает счёт за электричество. Но мы же на Хабре, давайте считать!

Считаем что:

Мы живём в Москве и платим по единому тарифу 5,56 рублей за Киловатт
SSD потребляет минимум 2 Ватта, а HDD не менее 6 Ватт

Тогда для HDD: (((6 x 24) x 365 )/ 1000)) x 5,56 = 292,2 рубля в год
Для SSD: (((2 x 24) x 365 )/ 1000)) x 5,56 = 97,4 рубля в год

Может быть, домашнему майнеру разница покажется смешной. Но если у вас работает огромная ферма из нескольких систем, то проще купить кучку SSD на 60/120 Gb, чем HDD на 250 ГБ. Вы получите не только быстрое изменение профиля разгона, но скоростное возобновление работы при критических ошибках.

Узлам без SSD никуда!


Полундра, сейчас видимость угрозы для SSD как никогда высока. Ведь мы заплыли в теоретическую часть про узлы, они же называются нодами. Помните, мы ранее рассматривали журнал и говорили про то, что он не хранится на одном устройстве. Так в этом и есть прелесть блокчейна. Эти самые журналы раскиданы по множеству физических систем, при каждой транзакции записи в них меняются, а сами журналы используются для верификации.

Так вот, у вас есть возможность стать полной нодой. Для этого придётся загрузить себе на диск всю историю транзакций с криптовалютой. Для Bitcoin-а в начале марта 2021 года требовалось 330 Гб. Причём со временем этот дамп будет расти, а ваша система сможет верифицировать операции.


Криптовалютчики частенько говорят, что держатели полных нодов благородные люди, которые помогают децентрализации сети. На самом же деле это связано с анонимностью, потому что, передавая данные другому полному ноду, вы не можете быть уверены, что вас не отследят. Так как запрос на внесение изменений в цепочку отправляется публично. А пряча свои тайные делишки операции в своёй ноде (для Bitcoin это Bitcoin Core), вы маскируете их. Дополнительно стоит отметить поддержку Tor.



А если мы вернёмся к Ethereum, то как и с RAM, станет только хуже. Среди рекомендуемых системных требований для узла: 16 Гб оперативной памяти и SSD на 500 ГБ. Если вам кажется, что это с запасом, то оставьте свои надежды Для полной синхронизации требуется не менее 5 Тб. А высокая нагрузка на всю сеть не позволяет использовать медленные HDD. Для справочки: за последний год полный архив подрос на 3 ТБ.



И таких смельчаков немало, публичные полные ноды можно отследить в режиме онлайн на специальной карте. В конце марта их оказалось 6,666 штук, а это минимум 34 719 дисков Kingston A400 по 960 Гб каждый, на общую сумму более 310 миллионов рублей.

Таким образом, только публичные ноды Ethereum можно оценить в 15 406 шести гигабайтных видеокарт GTX 1060, заказанных по средней цене на Ebay.



Шутка ли, но разработчик Bitcoin Core (ПО для полных нод Bitcoin) написал скрипт и насчитал в январе 2021 года более 30 тысяч полных нод с обновлёнными данными, хотя Coin Dance показывал только 11 619 полных нод. Интересно, у Ethereum такая же картина со скрытыми нодами?

Попрощаемся?




Не спешите бежать за твердотельным накопителем в магазин. Продажи SSD дисков оцениваются в миллионы штук ежегодно, так что в ближайшие пару лет дефицита не предвидится. Разве что не произойдёт очередной крипто-бум.

Но важно понимать, что такие диски помогают экономить деньги на электроэнергии и стабилизировать работу фермы. А тем, кто хочет быть полностью анонимным, они нужны для налаживания своих полных нод. А криптовалют становится всё больше, размер файлов синхронизации расчёт Вы же тоже видите тенденцию?

Что касается оперативной памяти, то мы видим явную необходимость в ней при майнинге на CPU. Такие фермы не занимаются добычей популярных валют, а сконцентрированы на узком кругу монеток: Cranepay, Binarium, Yenten, Monero.

Для получения дополнительной информации о продуктах Kingston Technology обращайтесь на официальный сайт компании.
Подробнее..

Сравнительное тестирование Intel SSD 670p QLC против TLC

11.03.2021 10:22:28 | Автор: admin
Буквально приурочив свой материал к нашей новости о выходе QLC 3D NAND накопителей Intel SSD 670p, всем хорошо известный портал AnandTech опубликовал подробное, как у них принято, тестирование, сравнив новинку Intel с другими QLC и TLC SSD большого объема, имеющимися на рынке. Предлагаем вам сокращенную выжимку этого тестирования, в которой, в числе прочего, исправим ошибку в характеристиках энергопотребления из предыдущего поста, замеченную нашими читателями.



Для начала немного истории. Первым потребительским QLC SSD была серия Intel 660p, выпущенная в 2018 году и оснащенная 64-слойной памятью. С тех пор сегмент SSD объемом более одного Тб по большей степени поделен между TLC-моделями без DRAM-кеша и QLC, оснащенными собственным кешем. Позже, в 2019, Intel представила серию 665p с 96-слойной памятью и несколько улучшенными показателями производительности и долговечности.

Модели Intel SSD 670p, оснащенные новейшей 144-слойной памятью и современным 8-канальным контроллером Silicon Motion SM2265G, значительно превзошли своих предшественников по всем показателям. Приведем немного измененную общую табличку характеристик из предыдущего поста.
512 Гб 1 Тб 2 Тб
Скорость последовательного чтения, Мб/с 3000 3500 3500
Скорость последовательной записи, Мб/с 1600 2500 2700
Скорость случайного чтения, IOPS 110 000 220 000 310 000
Скорость случайной записи, IOPS 315 000 330 000 340 000
Коэффициент выносливости 185 370 740
Наработка на отказ, млн. часов 1.6 1.6 1.6
Макс. потребление, простой, мВт 25 25 25
Форм-фактор. интерфейс M.2 2280, PCIe 3.0 x4 NVMe
Стоимость $89 $70 $154 $130 $329 $250
Теперь перейдем к тестированию. В сравнении участвуют:
  • Phison E12 SSDs с QLC NAND, представленный здесь моделями 1Тб Corsair MP400 и 8Тб Sabrent Rocket Q
  • Mushkin Helix-L 1Тб: TLC NAND и контроллер Silicon Motion SM2263XT без DRAM
  • HP EX950 2Тб: TLC NAND и 8-канальный контроллер Silicon Motion SM2262EN
  • SK hynix Gold P31 1 Тб
  • Samsung 970 EVO Plus 1 Тб и 980 PRO 2 Тб
  • Samsung 870 EVO 1 Тб и 870 QVO 1 Тб последние TLC и QLC SATA SSD
  • SK hynix Gold S31 1 Тб типовой TLC SATA
  • Intel SSD 670p 2 Тб

AnandTech использует свой набор тестов для накопителей, называемый AnandTech Storage Bench. Из этого набора приведем 3 результата: средняя скорость данных, средние задержки, энергопотребление все в максимально напряженном режиме destroyer.





Теперь синтетические тесты с различными видами типовых нагрузок. Random 32 пачки данных по 64 Мб каждая, sequential 8 пачек по 128 Мб.






Один из фамильных недостатков QLC NAND SSD деградация производительности по мере заполнения носителя данными, что иллюстрируется графиками скорости записи полного диска (последних 16 Гб и средней).




Теперь к вопросу об энергопотреблении. Действительно, как вы правильно указывали, потребление в активном режиме не может измеряться милливаттами. По информации AnandTech, 670p отдает следующую информацию о своих состояниях.
Состояние Макс. потребление Активность/простой
PS 0 5.5 Вт Активность
PS 1 3.6 Вт Активность
PS 2 2.6 Вт Активность
PS 3 25 мВт Простой
PS 4 4 мВт Простой
Таким образом, максимальное потребление 670р в простое составляет 25 мВт, в состоянии активности 5.5 Вт. Что же касается режимов энергосбережения, то ниже показано три состояния: совсем без управления питанием, без тонких настроек питания и со всеми возможными технологиями экономии.





Подводя итоги, AnandTech называет Intel 670p отличным QLC, продолжающим сводить на нет недостатки 4-битовых накопителей по сравнению с TLC. 670p хорошо работает с различными видами нагрузки благодаря большому кешу и мощному контроллеру, он не идеален на дальних дистанциях, но прогресс налицо. А тут еще довольно неожиданно пришла новость о снижении цены на все накопители линейки и это на самом старте продаж. Новые цены вписаны в табличку. Это уж вообще праздник какой-то получается.
Подробнее..

Что влияет на цену литий-ионного аккумулятора?

21.03.2021 02:21:27 | Автор: admin

Сегодня на российском рынке появилось много литиевых аккумуляторов от различных производителей и поставщиков, как в виде отдельных ячеек, так и в сборках. Хотелось бы все таки разобраться, что же все таки влияет на цену литий-ионного аккумулятора?

Стоимость аккумуляторной батареи является жизненно важным фактором при выборе подходящей батареи для своих целей или проектов.

Итак, каковы факторы, влияющие на цену литий-ионного аккумулятора?

  1. Как правило, стоимость литий-ионного аккумулятора зависит от элементов / ячеек, из которых собран данный аккумулятор,

  2. BMS (Battery Management System контроллер управления работой литиевого аккумулятора) или систем PCM и PCB (модуля или платы защиты), а также

  3. корпуса батареи.

Кроме этого, на конечную стоимость батарей оказывает выбор материала, используемого в качестве перемычек, соединяющих ячейки (медно-луженые, никелевые, алюминиевые и т.д.), вид и пропускная мощность силовых клемм, наличие индикаторов параметров батареи, установка мониторов и других дополнительных элементов, стоимость и установка которых может также повлиять на процессы сборки батарей и влиять на их конечную стоимость.

Сегодня мы подробно остановимся на трех основных факторах, определяющих разницу в цене литий-ионных аккумуляторов.

1. Выбор аккумуляторной батареи по химическому составу ячеек и производителю

1.1 Различные материалы

Во-первых, это химический состав аккумуляторных элементов. В литий-ионных аккумуляторах могут использоваться различные варианты катодных материалов. Катодные материалы в основном и обеспечивают характеристики литиевого аккумулятора. В качестве таких материалов в основном используются сложные оксиды металлов (в основном на основе лития), к примеру, литий-кобальт (LCO), литий-железо-фосфат (LiFePO4), манганат лития (LiMn2O4), тройные материалы, такие как никель-кобальт-алюминий (NCA) и никель-марганец кобальта (NCM или NMC), титанат лития и другие.

Из-за различных материалов, используемых в элементах батареи, характеристики напряжения, факторов безопасности, срока службы, плотности энергии и рабочей температуры также изменятся, что в конечном итоге повлияет на стоимость литий-ионных аккумуляторов.

1.2 Аккумуляторные батареи различных производителей

Цена аккумуляторных элементов зависит от марки. Например, специальные батареи, включая низкотемпературные, высокотемпературные, высокотоковые и фасонные батареи, созданные разными производителями, будут влиять на стоимость батарей из-за различных технологий производства. Некоторые аккумуляторные элементы от мелких производителей могут иметь более низкую цену за счет низкой производительности аккумулятора. Хотя цены на литиевые аккумуляторы от крупных производителей, таких как LG-Chem (Корея), BYD, CATL, CALB, Great Power и т.д, могут быть выше по цене, но при этом ячейки / аккумуляторы имеют высокие стабильные свойства и обеспечивают хорошую и безопасную работу аккумулятора.

2. Выбор защит иBMSв литий-ионной батарее.

Выбор BMS (PCM или PSB) для литий-ионного аккумулятора еще один фактор, влияющий на общую стоимость аккумулятора. Литий-ионные батареи могут вызвать отказ батареи или даже возгорание при неправильной эксплуатации, поэтому BMS (PCM или PSB) необходим для литий-ионных батарей во избежание угроз безопасности. Дизайн BMS состоит из трех основных частей: базовая защита аккумулятора, связь и система управления аккумулятором. Давайте объясним ниже.

2.1 Базовая защита аккумулятора

Чтобы контролировать производительность батареи, каждая литий-ионная батарея имеет базовую защиту, которая защищает элементы от высокого / низкого напряжения, токов во время заряда и разряда. В соответствии с запросами клиентов, к аккумулятору может быть добавлена другая защита, например защита от перегрева, что улучшит надежность, но и увеличит стоимость всей литий-ионной аккумуляторной батареи.

2.2 Связь

Когда требуется контроль и управление батареями, всегда есть коммуникационная сеть. Для этого каждая ячейка содержит интерфейс связи для передачи данных. Протоколы связи можно разделить на I2C, RS485, RS232, CANBUS, HDQ, SMBUS и т. Д. Также имеется простой светодиодный индикатор батареи, который показывает состояние заряда аккумуляторной батареи.

2.3 BMS

BMS относится к системе контроля и управления за работой литиевыми аккумуляторами. В основном обеспечивает интеллектуальное управление и обслуживание каждого элемента / ячейки батареи. Благодаря мониторингу состояния батареи, пользователю предлагаются подробные данные, чтобы помочь предотвратить перезарядку и разрядку батареи и продлить срок ее службы при правильном использовании.

Ключевые функции BMS включают в себя мониторинг параметров батареи в реальном времени, оценку состояния батареи, онлайн-диагностику и раннее предупреждение критичных состояний, контроль заряда, разряда и начального состояния заряда, сбалансированное управление и управление температурой. Чем сложнее BMS, тем она дороже и как следствие дороже сам аккумулятор.

3. Выбор корпусов литий-ионных аккумуляторов

Литий-ионные аккумуляторные элементы / ячейки могут быть заключены в различные корпуса термоусадочную ПВХ пленку, текстолит, пластик или металл. Вариант корпуса и конструкции аккумулятора обычно зависят от конкретных требований устройств с электропитанием от аккумуляторов. Поэтому стоимость аккумуляторной батареи зависит от материала корпуса. В чем разница между этими материалами?

3.1 Термоусадочная ПВХ пленка

Термоусадочная ПВХ пленка обычно используется для небольших литий-ионных аккумуляторных батарей, в которых количество литиевых ячеек небольшое, а общий вес батареи не превышает 2 кг. Однако для таких аккумуляторных блоков весом более 1 кг перед термоусадкой ПВХ необходима установка фиксирующих кронштейнов между элементами аккумулятора и лист стекловолокна по периметру.

3.2 Стеклотекстолит

Корпуса из стеклотекстолита также используются в небольших литиевых аккумуляторах. Такой корпус надежно защищает литиевые ячейки от ударов. Преимущества таких корпусов в том, что можно собрать аккумулятор в прочном корпусе практически любой формы.

3.3 Пластик

Цена литиевого аккумулятора в пластиковом корпусе будет зависеть от сложности конструкции корпуса. Например, если корпус имеет неправильную форму, стоимость пресс-формы в конечном итоге увеличит стоимость аккумуляторной батареи. Кроме того, требования к материалу корпуса (ABS пластик, ПВХ и т.п.), являются причиной разницы в конечной цене аккумулятора.

3.4 Металл

Металлический корпус более прочный и лучше отводит тепло, чем пластиковый корпус, но является более дорогим. Точно так же стоимость во многом зависит от требований к металлическому корпусу. Водонепроницаемый металлический корпус или некоторые специальные металлические корпуса, такие как титановый корпус, будут продаваться по более высокой цене, в то время как обычный металлический аккумуляторный блок может стоить значительно дешевле.

Из-за технической сложности литиевых аккумуляторов, объема поставок и других требований, цены на батареи одной и той же емкости могут сильно отличаться. При выборе поставщика убедитесь, что специалист компании предоставит Вам конкретное предложение по аккумулятору и BMS, чтобы удовлетворить именно Ваши требования к устройству. Сэкономив ваше время на поиск правильного поставщика Вы получите удовольствие от использования высококачественного продукта.

Подробнее..

Категории

Последние комментарии

  • Имя: Макс
    24.08.2022 | 11:28
    Я разраб в IT компании, работаю на арбитражную команду. Мы работаем с приламы и сайтами, при работе замечаются постоянные баны и лаги. Пацаны посоветовали сервис по анализу исходного кода,https://app Подробнее..
  • Имя: 9055410337
    20.08.2022 | 17:41
    поможем пишите в телеграм Подробнее..
  • Имя: sabbat
    17.08.2022 | 20:42
    Охренеть.. это просто шикарная статья, феноменально круто. Большое спасибо за разбор! Надеюсь как-нибудь с тобой связаться для обсуждений чего-либо) Подробнее..
  • Имя: Мария
    09.08.2022 | 14:44
    Добрый день. Если обладаете такой информацией, то подскажите, пожалуйста, где можно найти много-много материала по Yggdrasil и его уязвимостях для написания диплома? Благодарю. Подробнее..
© 2006-2024, personeltest.ru