SCSI-to-SD адаптер

[easy_john]

[quote="tnt23"]По сравнению с сыплющимися и грохочущими SCSI винтами. Сколько можно жевать одно и то же.[/quote]
SD у меня сдохло уже штук пять. scsi винтов ... не помню, что бы хоть один.

[tnt23]

[quote="easy_john"][quote="tnt23"]По сравнению с сыплющимися и грохочущими SCSI винтами. Сколько можно жевать одно и то же.[/quote]
SD у меня сдохло уже штук пять. scsi винтов ... не помню, что бы хоть один.[/quote]

YMMV. У меня сдохло штуки три SCSI винтов, а uSD - ни одной.

[easy_john]

[quote="tnt23"]YMMV. У меня сдохло штуки три SCSI винтов, а uSD - ни одной.[/quote]
Проблема мне видится в том, что механически диски относительно вечны, у них практически нет износных частей, в противовес им SD имеют жестко ограниченное количество циклов записи, плюс большой (2 мегабайта) размер блока, что при записи классическими фс блоками по 512б убивает ее достаточно быстро.

[tnt23]

Если молотить по диску постоянно, то да. В амиге же нет свопа, и нагрузка на флеш, с которого система грузится, минимальна.

[da-nie]

[quote]SD имеют жестко ограниченное количество циклов записи, плюс большой (2 мегабайта) размер блока,[/quote]

Не знаю, как SDHC, но обычные SD по SPI протоколу пишутся и читаются блоками по 512 байт (размер блока, конечно, можно настроить, если карта позволяет.). По SDIO не помню, но наверное, столько же. Почему же тогда 2 мегабайта блок?
Я вот себе Raspberry Pi B купил. Она с SD работает. Вроде шустро так и пишет и читает. Интересно, скоро SD сломается...

[easy_john]

[quote="da-nie"]Почему же тогда 2 мегабайта блок? :roll: [/quote]
Внутреннее устройство памяти у всех флешек одинаковое. Прошивка оперирует 2-мя или 4-ю мегабайтными блоками.
Каждый раз, когда ты пишешь 512байт, прошивка читает 2 мегабайта, меняет 512байт, записывает 2 мегабайта.
Записав последовательно 2 мегабайта блоками по 512 ты фактически перезапишешь блок 4 тысячи раз (правда это будут разные блоки). http://lwn.net/Articles/428584/

[da-nie]

[quote]Прошивка оперирует 2-мя или 4-ю мегабайтными блоками. [/quote]

Вот это-то и сомнительно. Слишком большой блок. И в случае, если питание прервётся в момент перезаписи, потеряется весь буфер (данные всех блоков из буфера!) в 4 мегабайта.
Речь, наверное, в статье идёт о чём-то другом.
У нас микроконтроллеров с объёмом RAM на 2 мегабайта нет, а тут в каждой карте встроен такой объём ОЗУ.

[easy_john]

[quote="da-nie"]Вот это-то и сомнительно. Слишком большой блок. [/quote]
Да, можно попытаться убедить себя, что все неправда.
[quote="da-nie"]И в случае, если питание прервётся в момент перезаписи,[/quote]
Сначала пишется новый блок, потом старый помечается на удаление. При пропадании питания старый останется актуальным.
[quote="da-nie"]Речь, наверное, в статье идёт о чём-то другом. :roll: [/quote]
Наверно, если ее прочитать, то можно понять о чем в ней идет речь.

[da-nie]

[quote]Наверно, если ее прочитать, то можно понять о чем в ней идет речь.[/quote]

Это вам, всю жизнь с английским связанным со школы и института, легко говорить. А я английского не изучал и прочесть полностью я физически не могу. Тем более, правильно перевести со всеми нюансами. А после гугла понять точно о чём речь немного тяжко.

[quote]Да, можно попытаться убедить себя, что все неправда.[/quote]

Можно. Но... зачем?

[quote]Сначала пишется новый блок, потом старый помечается на удаление. При пропадании питания старый останется актуальным.[/quote]

Всё равно очень странно. Во-первых, ОЗУ очень большое на карте получается. А во-вторых, в чём же выгода между 512 байт и 2 мегабайта в блоке? Почему тогда на уровне интерфейса 512 байт? Чтобы карта служила меньше в 4096 раз? Пока 2 МБ блок запишется, он 4096 раз перезапишется. Записывает-то карта сразу после получения 512 байт блока. А область, где всё это помечается с каждым разом? Как скоро она выйдет из строя?
Вы уверены, что в статье идёт речь о физическом уровне самого контроллера карты, а не об одном из его режимов работы или же о работе на уровне ОС с этим контроллером?
Никаких упоминаний о размере физического блока SD отличном от 512 байт я в сети не нашёл. Вот самое большее, что я нашёл на эту тему:
[quote]
Затем начинается передача блока данных, объем которых, как было сказано, зависит от размера памяти накопителя. Стоит отметить, что данные в это время сохраняются во временной памяти контроллера устройства и могут быть потеряны в случае отключения питания. Для microSD объемом 2 гигабайта размер блока составляет 512 байт. По завершению передачи блока выдается сооб щение “Data Response”, и внутренний контроллер начинает физическую запись, переходя в состояние “Busy”. Длительность этой записи трудно поддается детерминации и зависит от многих факторов. Размер этой задержки и составляет значительную долю всей длительности записи блока, и полностью избежать этой задержки нельзя, возможно только уменьшить. Внутренний контроллер накопителя представляет собой черный ящик для пользователя, поскольку это одна из основ защиты от несанкционированного чтения. Производители стараются держать в секрете особенности работы внутреннего контроллера. Известно, что перед физическим сохранением данных внутренний контроллер выполняет набор базовых команд, как, например, анализ свободного места, перезапись таблицы адресов и т.д. Многоблочная запись позволяет существенно сократить длительность выполнения базовых команд, так как некоторые из них выполняются единожды в самом начале, а некоторые вообще не требуются. [/quote]

[easy_john]

[quote="da-nie"]Вы уверены, что в статье идёт речь о физическом уровне самого контроллера карты, а не об одном из его режимов работы или же о работе на уровне ОС с этим контроллером?[/quote]
Угу.
[quote="da-nie"]Никаких упоминаний о размере физического блока SD отличном от 512 байт я в сети не нашёл. Вот самое большее, что я нашёл на эту тему:[/quote]
На основании чего вот это написано? Просто калька с работы любого блочного девайса.
Но твердотельные накопители не так просто устроены, иначе их очевидные проблемы вылезали еще раньше. По этому там стоит довольно большой контроллер, который работает, совсем не так, как это выглядит снаружи. Самое главное - проверить это совсем не сложно, стандартными утилитами типа fio начни активно писать на флешку и измеряй скорости/задержки - увидишь тот же самый порог.

[da-nie]

[quote]На основании чего вот это написано? Просто калька с работы любого блочного девайса.[/quote]

На основании официальной документации на стандарт SD-карт. Всё остальное - от лукавого.
А на основании чего написана та статья (http://lwn.net/Articles/428584/) ?

[quote]Самое главное - проверить это совсем не сложно, стандартными утилитами типа fio начни активно писать на флешку и измеряй скорости/задержки - увидишь тот же самый порог.[/quote]

Между fio и картой огромная прослойка как аппаратуры, так и программ.
Работая же на низком уровне с SD-картой есть всего одна задержка - это задержка по завершению передачи карты 512 байт блока - вот дальше карта требует времени ожидания. За режим SDIO не скажу, но по SPI это 100% так. Других задержек просто нет. Тогда какую же скорость fio из ОС вы измерите? Скорость буферизации промежуточных слоёв аппаратуры и программ?

Впрочем, я нашёл, о чём действительно в статье речь. Вот вам спецификация SD V3.01: http://radiokot.ru/forum/download/file.php?id=113707
На страницах 90 и 92 вы можете прочесть, какими именно блоками оперирует карта памяти данного стандарта. Блок этот вовсе не обязательно 2 или 4 МБ. Он может быть и 16 килобайт.
Подчеркну, что это относится к картам версии 3. Что в спецификации V1 - я без понятия, я там такого вовсе не встречал (вот она: [attachment=0]

SD_Card_Spec.rar

(131.7 KiB) Скачиваний: 741

[/attachment]). Очень может быть, что стандартные SD и MMC карты блоками больше 512 байт вообще не оперируют. Другое дело, что сейчас этих карт в продаже просто нет (впрочем, я использовал и на 16 МБ SD карты - у меня такие есть.). Но это не основание грести все карты под одну гребёнку, как в той статье. Потому я вас и спрашивал, является ли ваше утверждение о буфере карт абсолютным для любой карты, или это некий частный случай, пусть даже сейчас максимально распространённый.

[easy_john]

[quote="da-nie"]Между fio и картой огромная прослойка как аппаратуры, так и программ.
Тогда какую же скорость fio из ОС вы измерите? Скорость буферизации промежуточных слоёв аппаратуры и программ?[/quote]
Вообще то нет.

[quote="da-nie"]Вот вам спецификация SD V3.01: http://radiokot.ru/forum/download/file.php?id=113707
На страницах 90 и 92 вы можете прочесть, какими именно блоками оперирует карта памяти данного стандарта. Блок этот вовсе не обязательно 2 или 4 МБ. Он может быть и 16 килобайт.[/quote]
Это замечательно.
Там же читаем, что RU не может быть меньше 16 кб. А сама карта оперирует AU, размером от от 16 кило (а для uhs карт вообще не меньше 1мб).
При этом AU задается в прошивке и не может быть изменена. Для карт от 512 мб уже AU будет 2мб.
Больше того, в первых 2 мегабайтах любой SD контроллер действительно оперирует меньшими блоками, что бы фат не так быстро убивал карту. Остальной объем идет большими блоками.

[da-nie]

[quote]Вообще то нет.[/quote]

А какую же тогда?
Вы с SD картой напрямую из ОС не работаете. У вас минимум контроллер промежуточный есть, который и позволяет SD с ПК гонять. И хорошо если он хотя бы не на USB висит.

[quote]Это замечательно. [/quote]

Конечно, замечательно, когда появляется официальный документ, а не какая-то хрень с линуксовского сайта неизвестно от кого.

[quote]При этом AU задается в прошивке и не может быть изменена. Для карт от 512 мб уже AU будет 2мб.[/quote]

А для карт меньшего размера - меньше. И кроме того, в таблице максимальный размер блока. Карта вольна взять любой, кратный 16 кб. А для карт V1 вообще не упомянут.
А это вот что значит: берёте карту с блоком 32-64К (боюсь только, с ПК вы размер блока не узнаете - контроллер не позволит скорее всего, как он не позволяет ID карты получить.) и делаете кластер в 32-64 К. И будет у вас писаться-читаться быстро и надёжно.
Есть ещё момент - там не указано, действует ли этот блок при работе с картой по SPI. Может быть и нет.

[quote]Больше того, в первых 2 мегабайтах любой SD контроллер действительно оперирует меньшими блоками,[/quote]

Это в спецификации написано? А где именно?

Вообще, у меня есть одна игрушка для SDIO чтобы ID карты считывать. Можно попробовать считать и размер блока карты.

[easy_john]

[quote="da-nie"]А какую же тогда?
Вы с SD картой напрямую из ОС не работаете. У вас минимум контроллер промежуточный есть, который и позволяет SD с ПК гонять. И хорошо если он хотя бы не на USB висит.[/quote]
Вообще пофиг на контроллер, он на io не влияет в данном случае.

[quote="da-nie"]Конечно, замечательно, когда появляется официальный документ, а не какая-то хрень с линуксовского сайта неизвестно от кого. :)[/quote]
Это lwn, вообще то. Ты сначала попробуй напиши такую статью что бы ее у тебя этот "какой-то линуксовый сайт" взял.

[quote="da-nie"]А для карт меньшего размера - меньше. [/quote]
Ну и кому нужны карты размером меньше 512 метров? Мы тут замену винтов обсуждаем или что?

[quote="da-nie"]Карта вольна взять любой, кратный 16 кб.[/quote]
Не вольна. Что в контроллере пробили, то и будет. По факту пробивают максимальный размер.

[quote="da-nie"]Есть ещё момент - там не указано, действует ли этот блок при работе с картой по SPI. Может быть и нет.[/quote]
Да какая, нафиг, разница. Речь идет о работе контроллера памяти непосредственно с памятью внутри SD. Ты снаружи на этот процесс никак повлиять не можешь.

[quote="da-nie"]Это в спецификации написано? А где именно?[/quote]
Там же, на следующих страницах, первый AU отведен под данные фс и не рекомендуется к записи данных.
Кстати, посмотри с какого размера начинается раздел при заводской разбивке - как раз на 2мб границе.

Я, главное, не понимаю, о чем ты споришь.
Я привел статью с исследованиями размеров блоков, после чтения статьи я делал пробный тест и то же видел ступеньку на 2 мегабайтах, ты привел спецификацию непротиворечащию этим тестам - а по итогу все равно "не верю". Ну так проведи тесты свои, покажи результаты, что впустую перемалывать?

[da-nie]

[quote]Вообще пофиг на контроллер, он на io не влияет в данном случае.[/quote]

Контроллер имеет возможность буферизировать данные и пересылать карте блоками. А может и писать прямо в порядке поступления данных сразу. В QNX, когда для SD нет драйвера с буферизацией, очень хорошо видна разница с тем случаем, когда буферизация есть. Тоже относится и к винчестеру.

[quote]Это lwn, вообще то. Ты сначала попробуй напиши такую статью что бы ее у тебя этот "какой-то линуксовый сайт" взял.[/quote]

Какая разница, кто это, если статья непонятно на чём основана и не полна. Менделеев с Бутлеровым вон вообще имели разные взгляды на теорию химического строения и один отрицал, а другой утверждал её. И кому тогда верить?

[quote]Ну и кому нужны карты размером меньше 512 метров? Мы тут замену винтов обсуждаем или что?[/quote]

А это кому как.

[quote]Не вольна. Что в контроллере пробили, то и будет. По факту пробивают максимальный размер.[/quote]

А я о чём? Этот размер любой может быть задан до максимального. Но любым из сетки. И что там по факту - это тоже от лукавого.

[quote]Да какая, нафиг, разница. Речь идет о работе контроллера памяти непосредственно с памятью внутри SD. Ты снаружи на этот процесс никак повлиять не можешь.[/quote]

Пока не было официальной документации, утверждать о 2 и 4 МБ нельзя. Тем более, что по факту размер оказался задаваемым в пределах сетки 16 кБ. Так и про SPI.

[quote]Я, главное, не понимаю, о чем ты споришь. [/quote]

Я спорю о том, что все карты различные. И никакого 2 и 4 у всех карт нет. Более того, в режиме совместимости с MMC (т.е. по SPI) карта с высокой вероятностью работает с 512 байт блоком и ни с чем иначе. В режиме SDIO размер блока зависит от производителя. Таким образом, утверждать, что любая карта имеет 2 или 4 мб буфер вообще нельзя. Он есть, но размер его задан иначе, чем написано в статье. Вот и всё.
Раз не о чем спорить, тогда и спорить не надо.

Но всё же, если кто хорошо читает по-английски, то было бы интересно узнать, что в документации версии три написано про многоблочную запись - пишет ли контроллер сразу каждый блок (от 512 до 2048 байт), или же ждёт окончания команды. Потому как при кэше 2МБ карта просто износится до дыр, если писать по 512 байт, стирая каждый раз размер AU. С этим, думаю, никто спорить не станет. Очень может быть, что всё-таки это режимы многоблочной записи и ничего иного. Иначе это крайне странно получится - зачем снижать время жизни карты просто так?