логин: 
<< предыдущая заметкаследующая заметка >>
06 февраля 2015
Гребаная техника атакуе!

UPD2: Всем спасибо за советы. Винт с трудом перелил, старый гремучий поставил в шкаф, новый (маленький, не греющийся) исправно поднялся и теперь работает на роутере home.lleo.me. Как приедет новая платка из Китая, выломаю его из usb-коробочки и воткну в тамошнее sata. Я ведь правильно понимаю, что заведомо «внешние» винты — по-прежнему выпускаются как sata, только на заводе их впаивают в коробочку? Или к 2015 уже появились модели, где заместо sata впаян usb еще на заводе? ;)

UPD1: Загадка скорости 800кб решилась просто: я заметил, что шнур воткнут не в USB, а в хаб USB (туда же воткнуты клавиатура и мышь, у моего ноута всего 2 USB). Как только я воткнул большой винт в USB напрямую, скорость чтения взлетела до 50мб/сек. Сейчас оторвал мышь и клаву, воткнул в оба USB ноута два винта, и при помощи Gparted копирую целиком партицию (идея скопировать винт затянулась на много дней, надо с ней кончать побыстрее). К утру закончит, как думаете? :)

БЫЛО:
Купил новый винт 2TB для квартирного сервера. Старый был 3.5", ощутимо медленный, грелся и гудел вентилятором, а по S.M.A.R.T. сообщал, что пока ничего, но риски близятся.

Короче, стал я переливать с винта на винт всё (всё моё и моих близких), шо нажито непосильным трудом с 1991 года (у меня все данные исправно хранятся год за годом от компьютера БК0010). Поскольку у меня дома нет десктопа, куда можно было бы вставить оба винта и часа за 4 перелить, то переписывание винтов приобретает психоделический оттенок. Будучи подключенными к ноутбуку по USB, они давали скорость копирования 800кб/сек. Причем, тормоза в основном из-за старого, новый-то быстрый. Нашел способ: воткнул старый винт в медиаплеер, тот расшарил его по сетке. Трое суток (ТРОЕ БЛЯТЬ СУТОК!) ноутбук переливал 2TB данных со скоростью около 4мб/сек при помощи mc. Ну хоть не 800кб, и то радость. Но все равно копирование заняло где-то примерно трое суток.

Когда все закончилось, я на всякий случай сверил размеры папок, и обнаружил ад. Типичные случаи:
— Кое-где какие-то группы файлов не переписались: остальные в той папке переписались, а несколько штук — нет.
— Если в папке попадаются два файла с именами в разном регистре типа TEXT.txt и text.txt, то mc записывает две копии лишь одного из них.
— Наконец я обнаружил, что некая фотка типа DSC_0041.JPG записалась не той, что была, а какая-то другая фотка — из архива, но не понять, откуда — в исходной папке точно такой нет даже по размеру файла.

Три дня работы компа — и непонятно что с этим делать, потому что руками рыскать по папкам, что там не переписалось, и переписывать блохи, это ад. А оставить архив в таком ненадежном виде я не могу. На всякий случай сейчас снова вынул диск из медиаплеера, подключил к ноуту и чекаю fsck -p /dev/sdc1

Вопрос: что это может быть за фигня? Это уже мост какой в ноуте потихоньку сбоит? Или медиаплеер на Андроиде путает берега, отдавая файло по сетке? Или это mc (Midnight Commander 4.8.11) в сборках последних лет приобрел нетрадиционную ориентацию? (rsync не предлагать — у него шифрование потока, тормозить будет совсем адово).

В общем, в недоумениях. Скока можно и когда все крахи закончатся?

Да, а для совсем технических специалистов, кто дочитал жалобы до этого места и не уснул, вопрос другого плана: мне (лично) нужна по дружбе консультация грамотного специалиста по сетевой безопасности и взломам серверов. Это вопрос сугубо к вам, читателям моего дневника, посторонних (не знакомых со мной) не стану беспокоить вопросами.

<< предыдущая заметка следующая заметка >>
пожаловаться на эту публикацию администрации портала
архив понравившихся мне ссылок
Оставить комментарий
Linux Firefox
 Клин
3
0
[email protected] (user/cbbd4302-1162-4b95-8f68-8b0b3e5ec008)
rsync не шифрует поток! SSH шифрует, но никто не заставляет туннелировать rsync поверх SSH, он и сам сервер.

А потом, «при помощи MC» — это как? По какому протоколу-то: SFTP (вот он точно шифрует)? NFS? Samba?
Linux Ubuntu Firefox
 Москва
0
8
Leonid Kaganov
Что-то мне подсказывает, что вы никогда не копировали 2 терабайта данных командой rsync. Вы проведите простой эксперимент: скопируйте некий объем файлов просто (командой cp или каком-то менеджере) и при помощи rsync. Сравните время копирования.
Windows Firefox
 Израиль
13
0
braintunic
> проведите простой эксперимент: скопируйте некий объем файлов просто (командой cp или каком-то менеджере) и при помощи rsync. Сравните время копирования.

Ну попробуем.
Простейший пример - создаём файл 10 гигабайт и копируем его, один раз с помощью 'cp' другой раз с помощью 'rsync' :

# export TIMEFORMAT=time=%0lR

# rm -f /tmp/file10g*
# time dd if=/dev/zero of=/tmp/file10g-cp bs=1M count=10240
time=0m30s
# time cp -p /tmp/file10g-cp /tmp/file10g-cp+
time=1m4s

# rm -f /tmp/file10g*
# time dd if=/dev/zero of=/tmp/file10g-rsync bs=1M count=10240
time=0m30s
# time rsync -aW /tmp/file10g-rsync /tmp/file10g-rsync+
time=1m3s

Никакой разницы!
Linux Firefox
 Москва
2
0
phmagic (#2807267)
Лучше бы копировать не разреженный файл :)
А то результат определяется соревнованием способностей находить блоки из нулей у cp и rsync.
Windows Firefox
 Израиль
12
0
braintunic
Хорошо, согласен, файл из нулей не показателен.

Вот я взял четыре разных файла, общим размером 10 гигабайт, файлы в форматах iso и tgz:

ls -lh f*
-rw-rw-r-- 2.5G Jan 25 14:04 f1-iso
-rw-rw-r-- 2.3G Jan 27 11:02 f1-tgz
-rw-rw-r-- 2.7G Feb 2 09:36 f2-iso
-rw-rw-r-- 2.5G Feb 4 11:31 f2-tgz

Тестируем:

# rm -rf o*
# mkdir o1cp o2cp
# time cp -p f* o1cp
time=0m54s
# time cp -p o1cp/* o2cp
time=3m11s

# rm -rf o*
# mkdir o1rsync o2rsync
# time rsync -a f* o1rsync
time=1m28s
# time rsync -a o1rsync/* o2rsync
time=4m9s

Таким образом, да, rsync медленнее, чем cp, при локальном копировании - на 30%.
Но зато rsync умеет:
* копировать все типы файлов (включая даже сокеты и файлы устройств (/dev/*)
* гарантированно сохранять все атрибуты файлов
* делать update при повторном запуске (пропуская то, что уже ранее скопировано) - здесь он король и здесь многократно отыгрываются былые потери в скорости ;)
Linux Ubuntu Firefox
 Москва
5
1
Artem Pastukhov
Я копирую постоянно, рсинк рулит!
Windows Firefox
 Palo Alto
1
0
kto
попробуй rsync с arcfour. должно работать с разумной скоростью даже на 386.
и вообще https://gist.github.com/KartikTalwar/4393116
Windows Safari Chrome
 Израиль
0
0
Пашка (#4786520)
Я копировал в домашних условиях 6 тера и это был АД!111
Linux Ubuntu Firefox
 Москва
0
0
Leonid Kaganov
Медиаплеер Samba - ноутбук USB-винт.
Linux Opera
 Киев
26
0
Vital (#4967408)
Скорее всего, слово Samba - ключевое в ответе на вопрос, почему два файла TEXT.txt и text.txt превращаются в две копии одного.
Windows Safari Chrome
 Казахстан
1
1
Денис Дьяков
Это точно SMB он же CIFS он же SAMBA. Если старый винт расшарить по NFS протоколу, таких проблем, скорее всего, можно избежать. Ну, или копируйте как-то без шаринга...
 New York
6
0
byka (#4221769)
а давно у нас Самба, она же в девичестве - виндовые расшаренные папки - научилась различать файлы в с именами в разном регистре?
Windows Safari Chrome
 Москва
2
0
Dusty
Дык она и не различает, от этого такое щастье и получается, наверное.
Linux Firefox
 Москва
3
0
phmagic (#2807267)
Леонид, откройте для себя команду rsync (и разберитесь, Вы про шифрование потока пишете -- это не совсем так; теперь же, после того, как файлы более-менее скопированы, вообще всё должно быть очень быстро). (Честно говоря, немного шокирован, что Вы пользуетесь mc). Что это было -- нужно знать, как оно было: что за фс, какая версия, проходит ли fsck хотя бы. Опять же, что за технология (PATA,SCSI,FC,SATA,SAS), разрешена ли проверка T10 data integrity и т.д..

Я немного понимаю в безопасности, в разное время содержал разное количество по-разному нагруженных серверов (да и сейчас тоже кое-что держу), помогал разным людям и организациям расследовать несколько инцидентов, но меня самого как-то взломы (кажется) обошли. Более-менее в курсе последних рисков и уязвимостей, хотя есть вещи (типа уязвимости популярных веб-приложений), которые по большей части мимо меня проходят. Может, смогу проконсультировать (а, может, нет).
Linux Ubuntu Firefox
 Москва
0
3
Leonid Kaganov
Вы проведите простой эксперимент: скопируйте некий объем файлов просто (командой cp или каком-то менеджере) и при помощи rsync. Сравните время копирования. Пока вы не копировали по недостаточно быстрой сетке 2TB с помощью rsync - вы ее для себя не открыли в полной мере :)

А насчет безопасности - увы, немного я тоже понимаю. Но, мягко говоря, не в совершенстве, и не в этой конкретно области. Нужен совет настоящего профессионала.
Linux Safari Chrome
 Белоруссия
1
0
ConnorMcLaud
Теперь, когда большая часть файлов скопирована, rsync просто разницу подправит.
Linux Ubuntu Firefox
 Москва
0
0
Leonid Kaganov
Да? А вот это интересней!
Но я не уверен, что он еще и ПРОВЕРИТ файлы, насколько точно они записаны. А если проверит - то это такое же копирование по времени.
Linux Safari Chrome
 Белоруссия
1
0
ConnorMcLaud
Нет. Проверка по md5 и размеру. почти мгновенно
Linux Opera
 Киев
1
0
Vital (#4967408)
Он проверит, но по времени это будет не копирование.
rsync считает хеш файла с той и с другой стороны, и сами данные передаются только в случае, если хеши не совпадают. И то, файл передается не полностью, а разбивается на блоки в несколько килобайт, для которых опять же считается хеш. При несовпадении действительно приходится передавать уже сами данные.
И, таки да, оно работает. Лет десять назад пришлось зеркалить два сервера, был сильно поражен, что rsync умеет даже вставлять "разницу" в середину бинарного файла. :)
Linux Firefox
 Москва
0
0
phmagic (#2807267)
Я-то именно это и имел в виду: поправить разницу, причем на уровне частей файла, а не файлов. Ну и снова: не обязательно использовать ssh в качестве транспорта, если процессор медленный. И, наоборот, если медленная сеть, а файлы рыхлые, имеет смысл включать компрессию, экономия.
Windows Firefox
 Германия
1
0
Артём
Наоборот, контрольную сумму лучше не включать, тогда rsync сравнивает только размер и время создания. Но тут есть нюанс: если на одном винте например, ext3, а на другом - ext4, время создания имеет разную точность. Не помню уже, копирует ли в этом случае rsync слишком много, или слишком мало, но какие-то грабли я на этом ловил.

Кусок man'a про контрольные суммы:
-c, --checksum
This changes the way rsync checks if the files have been changed and are in need of a transfer. Without this option,
rsync uses a “quick check” that (by default) checks if each file’s size and time of last modification match between the
sender and receiver.
Windows Safari Chrome
 Израиль
0
0
Хели Коптер (#4975945)
Все верно - rsync
Linux Firefox
 Москва
3
0
phmagic (#2807267)
Леонид, я-то как раз рутинно копирую терабайты самого разного характера по разным по скорости сетям разными способами, включая rsync c транспортом rsync и rsync с транспортом ssh, который Вы, по-видимому, имеете в виду.

Но вот простой эксперимент, который позволяет оценить, какой вклад вносит delta-H-алгоритм и шифрование у rsync. Локальное копирование большого (4.4G) файла с раздела ext4 на раздел ext2 на древнем (10 лет) десктопе.

1. локальная команда cp: 0m15.072s
2. rsync с транспортом rsync, на одном хосте: 1m3.572s
3. rsync с транспортом ssh с зашифрованием и расшифрованием на одном хосте: 1m49.696s
4. rsync с транспортом ssh, c компрессией, зашифрованием, расшифрованием и разжатием, а также вводом пароля -- всё на одном хосте: 2m31.474s
5. Передача этого объёма по USB2 (только рут-хабы, без конгестии трафика): 3 минуты ровно. Все эти скорости в разы больше, чем в Вашем эксперименте.

Т.е. видно, что даже в самом неоптимальном режиме rsync не может внести задержки. В режиме с вычислением только хэшей нагрузкой на процессор (по крайней мере, на 2 процессора 10-летней давности OSA285) можно пренебречь.

Всё это время на компьютере крутился [email protected] под nice, т.е. результаты хуже как минимум из-за засорения кэша (но не только).
Linux Safari Chrome
 Москва
1
0
Svami Dhyan Nataraj
+1
rsync -- самое лучшее средство, если речь идет о "точно скопировать".
Кроме того когда основная часть данных уже перекинута, можно просто сделать rsync поверх этого...
Главное сначала на кошечках потренироваться... И знать о волшебной последовательности rsync -avz
Windows Firefox
 Израиль
1
0
braintunic
> Главное ... знать о волшебной последовательности rsync -avz

С флагом -z поосторожнее!
Это компрессирование потока данных.
Да, это может ускорить копирование на очень медленной сети.
Но на быстрой сети, а тем более при локальном запуске, этот флаг только замедлит копирование, причем очень сильно (бывает, что в два раза).
Linux Firefox
 Москва
0
0
phmagic (#2807267)
Я бы сказал: "rsync -avzH".
Windows Firefox
 Израиль
0
0
braintunic
А вот флаг -H стопроцентно замедлит копирование раза в полтора, когда копируется весь диск с сотнями тысяч файлов.

Понятно, что если hardlinks много и их необходимо сохранить, то деваться некуда.
Если же этого условия нет, лучше без -H.
Linux Firefox
 Москва
0
0
phmagic (#2807267)
Не замедлит. При обработке файла нужно посмотреть на inode. Если такой уже был на том же разделе, создать линк и не копировать. Если нет -- запомнить в ассоциативную структуру и копировать. Т.е. сложность O(n*log(n)), где n-количество файлов, а число операций -- число обращений к памяти.
Windows
 Москва
8
0
solarkitten
в твоем нетрадиционном зоопарке по юзерпику невозможно поставить диагноз - что где сбоит.
я бы на твоем месте нашел знакомого с десктопом, сходил в гости и перелил.
Linux Ubuntu Firefox
 Москва
0
3
Leonid Kaganov
Хороший вариант, но это тоже гемор: надо ехать куда-то, разбирать его комп, подключать винты, грузиться с флешки и ждать часа 4 (а может и 6,8?) пока закончится копирование. Потом обратно собирать комп, и чтоб шлейфы не перепутать, иначе его Винда может не загрузиться ;)
Windows Safari Chrome
 MIDDLETOWN
6
0
Чернь
Леонид, ну елки палки, ну у каждого уважающего себя гика есть завалявшийся дома десктоп, который уже несколько лет не используется. У меня например есть, и даже с линуксом (хотя и хз что там с блоком питания). Но я сейчас не в подмосковье.
Попросить его на месяц и проблемы как не бывало.

Можно даже проще поступить.
У вас же есть знакомые которые работают в офисе? У таких знакомых, как правило, есть знакомые сисадмины. У них точно пара-тройка десктопов в разобранном виде лежат дома или на работе. Приносите к ним винты и переписываете.

Это не говоря уже о том что можно просто поехать на какуюнить горбушку или савелу, заплатить 1000 рублей и там перепишут.
Windows
 Санкт-Петербург
4
0
Tarn
Последний вариант - это Позор какой-то.
Windows Opera
 Новосибирск
1
0
hesha (#2851068)
Не, инфу нельзя доверять кому то, иначе скопируют и размножат, а у Леонида я думаю много чего есть эксклюзвного. По этому нужно идти в гости часа на четыре или попросить на время чей то комп.
Windows Firefox
 Челябинск
3
0
vinny-the-poo
«у Леонида я думаю много чего есть эксклюзвного.»

Раскадровка "Нашей Маши" 18+?
Windows Safari Chrome
 Москва
0
0
Аркадий (#4971367)
А в нашем доме интернет от провайдера Ринет.
Linux Safari Chrome
 Великобритания
1
0
ы (#4934058)
А у нашего слона
жопа красная видна.

И что?
Linux Opera
 Липецк
0
0
legolegs
Съездите к линуксоиду. А sata можно подключать на горячую.
Windows Opera
 Липецк
10
4
Эудженио (#4959432)
По самому главному вопросу могу сказать одно - БЛЯТЬ пишется через "д". Ну ладно, надеюсь - это опечатка.
 New York
10
5
byka (#4221769)
не путайте профессию с междометием
Windows Opera
 Липецк
0
0
Эудженио (#4959432)
Междометия становятся профессиями (именами существительными) при использовании во множественном числе.
Windows Safari Chrome
 Кременчуг
0
0
ЖК (#4192766)
В каком языке у междометий бывает множественное число?
Linux Firefox
 Richardson
0
0
Михаил (#1684620)
Святые угодники! :–)
Формально, междометия неизменяемы, поэтому фигушки — число для них не определено. Но, ёлы-палы, они таки бывают образованы от существительных во множественном числе.
Windows Safari Chrome
 Москва
0
0
киборд (#4481580)
гм.. вы знаете, что такое эрратив?
Windows Firefox
 Челябинск
1
0
vinny-the-poo
Щито ето? Низнаю.
Linux Firefox
 Москва
2
1
Фыва Jr Олдж
"Эрратив" это то, что вызывает непроизвольную и неконтролируемую эрекцию.
IE
 Химки
5
0
yalexey
Полагаю, андроид с самбой тут самое гнилое звено.
Windows Opera
 Липецк
1
0
Эудженио (#4959432)
Эт точно! Вот я помню было diskcopy/v. И никаких проблем. :)
Windows Safari Chrome
 Санкт-Петербург
2
0
alex-mah
Это медиаплеер поди по самбе файлы отдает - вот оно и поломалось.
А лучший способ - найти десктоп, куда можно воткнуть свои винты и скопировать там, как тут и советуют.
Mac Safari
 Мытищи
5
0
Dr Higgins
Samba в таком деле вообще ужасный вариант. Не пойму про потери некоторых файлов, но преобразование регистров букв там точно накладывает отпечаток старой NT, которая их не различала.

Идеальный вариант такого перелива данных - dd под Linux. Этот передаст блок за блоком весь диск, даже не разбираясь в именах.

Готов помочь с аппаратурой, куда можно подключить оба диска и запустить dd.
Linux Safari Chrome
 Москва
1
0
Leonid Kaganov
Мне dd не подходит. Старый винт был просто архивным ext3, а новый я разметил иначе - кроме основной ext3 под архив, там он еще имеет маленькую (6Гб) партицию для системы и swap 2Гб. В будущем он будет не просто винтом, а системным. Я заказал платку для нового роутера Banana BPI-R1 (советую, дивная вещь) - там роутер, вайфай, мощная относительно железка, и 1 sata 2.5" вставляется прямо на плату как родной sata. В будущем там у меня будет и сервер и домашняя электроника (у платки очень богатые порты, даже слоты дисплея и камеры есть), ну и файлоархив.
Mac Safari
 Мытищи
2
0
Dr Higgins
ОК, нет проблем, тогда запустим rsync в пределах одного компа, он сделает на уровне файловой системы и, уж конечно, при копировании будет сверять контрольные суммы.
Mac Safari
 Тольятти
0
0
Count (#4973736)
У одноплатников пропускная способность бывает посредственной.
Linux Safari Chrome
 Москва
0
0
Leonid Kaganov
А по USB у одноплатников она лучше что ли?
Windows Firefox
 Израиль
2
0
Пашка (#4895894)
А что, поставить системным твердотопливный SSD на 64G линуксоидам разве религия не велит? Уже копейки стоит, а если разориться на современный 128G, то они и еще вдвое быстрее...
Я недавно поставил - в кои-=то веки начал комп выключать. Потому что поднимается 7-я винда теперь за 6 секунд...
(Ваще гавно галимое, я согласен. Но работает, и мое время и нервы не сжигает, в отличие от правильных пацанских систем)
Windows Safari Chrome
 Казань
0
1
gamemailru
Windows Firefox
 Переславль-Залесский
0
0
aik
Проблемы, скорее всего, из-за реализации самбы на вашем медиаплеере.

На счет скорости в 800 килобайт - это вы цепляете оба винта к ноутбуку или один в сервере, другой в ноутбуке? Потому что скорость - как usb1, даже винты десятилетней давности быстрее были.
Linux Safari Chrome
 Москва
0
0
Leonid Kaganov
Оба к ноутбуку - 800кб скорость.
Причем, новый винт развивает и до 15Мб/сек, на чтение уж точно. А вот старый очень туп. Или штаны у него такие странные?
Windows Firefox
 Переславль-Залесский
0
0
aik
Штаны - в смысле usb-коробка? Запросто может так быть, если она не из новых.

У себя когда перекидывал по usb с винта на винт скорость была где-то в районе 10 мегабайт/сек.
Windows Firefox
 Санкт-Петербург
0
0
mister-grim
Пиковая скорость USB 2.0 — где-то 30-32 Мб/с. Среднестатистический винт имеет скорость никак не меньше 70-80 Мб/с (в начале диска), даже совсем старый. Так что тут явно что-то не то.
Windows Safari Chrome
 Санкт-Петербург
0
0
KSV® (#4612138)
Дык нигде не было озвучено про 2.0. Можа там 1.0 ?
Linux Opera
 Липецк
0
0
legolegs
>Причем, новый винт развивает и до 15Мб/сек

Скоооолько? Леонид, срочно переразбивайте винт, выравнивая все разделы по 4кб. Должно быть минимум 70мб/сек.
Linux Safari Chrome
 Mount Laurel
0
0
Alexander Levitsky
А где твой десктоп с BSD? Там же можно поставить zfs на новый диск. Получишь контрольную сумму на каждый файл, будет возможность проверить целостность. Мой zfs за последние 10 лет успел во все беды попасть и выжить. Последняя беда была дырявая память - самое ужасное, что может быть. И то пришлось восстанавливать только два файла из терабайта.
Мне кажется лучший способ сейчас подключить через юсб к лаптопу и rsync. Думаю за ночь справится.
Linux Safari Chrome
 Москва
0
0
Svami Dhyan Nataraj
По сетевой безопасности в ограниченном режиме могу поконсультровать. В ограниченном -- не в смысле из жадности, а по причине того что сам не все знаю :-)

Да, и могу принести альтернативый usb-sata переходник.

А еще могу принести страшную мегаштуку: у меня есть волшебный проводок кторым в теории второй винт можно подключить вместо cd-диска к ноуту. Если ноут слегка подразобрать...
Safari Chrome
 Таиланд
1
0
thargon
Леонид, если диск в ext* и на нем есть файлы NAME.TXT и name.txt в одном каталоге - то при копировании по SMB проблемы с большой вероятностью будут, т.к. у самбы по умолчанию включена регистронезависимость. Возможно, что у медиаплеера можно эту настройку поменять, через его интерфейс или добравшись до конфига.
Safari Chrome
 Таиланд
1
0
thargon
И 800 кб/с по USB с диска - это или диск на последнем издыхании (тогда он еще и звуки интересные будет издавать), или переходник sata-usb сильно кривой. Есть смысл с другим переходником/внешним боксом попробовать.
Linux Safari Chrome
 Екатеринбург
3
0
Stanislav
1) быстрее, чем rsync или cp - только tar cf - /path | (cd /path2 && tar xf -)
2) mc в смысле копирования файлов по сети - так себе...
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
Вот я долго ждал когда же хоть кто-то про tar вспомнит. И дождался!
Windows Firefox
 Израиль
7
0
braintunic
Так дело в том, что LLeo с этой техникой знаком!
Вот, цитирую его пост трехлетней давности:

«Вдобавок наконец занялся сервером и с помощью умных советов Морозовского, Serge и gvs навел порядок на винчестерах. Оказывается, при переезде с винчестера на винчестер не все можно скопировать, что копируется. Я даже положу здесь эту ценную команду себе на память: tar cf - -C /path_from . | tar xvpf - -C /path_to»

И вот прошло три года, и LLeo опять недоумевает, почему "не все можно скопировать, что копируется" ;)
Windows Safari Chrome
 Израиль
0
0
Хели Коптер (#4975945)
Видать разачаровался.
Windows Safari Chrome
 Санкт-Петербург
1
3
Дмитрий Горохов
А облака, белогривые лошадки?

Все бы само скопировалось, плюс бекап в облаке.
Linux Firefox
 Пенза
0
1
qwerty (#3601873)
кстати да!
только в виду паранои надо бы всё это шифрануть, чтоб в облако уже ушло шифрованное
Linux Safari Chrome
 Львов
0
0
killerstorm (#4051641)
Храниние одного терабайта в Amazon S3 RRS обойдётся $288 в год.
Linux Safari Chrome
 Richardson
0
3
Dzmitry
Эмм. Google Drive? Flickr? (Flickr до 1ТБ фоток -- бесплатно).
Самый дешёвый вариант для настоящих бэкапов -- это Amazon Glacier, но там чтобы скачать что-то надо 4 часа ждать пока разогреется (там вроде роботическая система на Blu-ray, его рынок это корпоративные бэкапы, которых это устраивает).
Ну и ты платишь не за воздух, а за полную уверенность что файлы будут храниться вечно. А в освободившееся время можно отработать деньги :)
Windows Firefox
 Переславль-Залесский
0
0
aik
Ледник может и хорош для бэкапа, но вот для восстановления у них цены достаточно высокие. Один-два файла достать еще можно, но если надо несколько сотен гигабайт вытащить, то придется либо раскошелиться, либо ждать не одну неделю, вытаскивая их бесплатными кусочками.
Linux Safari Chrome
 Richardson
0
0
Dzmitry
Да, но в том-то и дело что незачем вытаскивать всё. Оно и так хорошо лежит на Леднике, зачем перекладывать, обычно надо вытащить только малую часть.

Но я согласен, что для домашнего использования обычные клауды гораздо удобнее. Для фоток круче Flickr вроде ничего пока нет (или я просто не знаю).
Windows Firefox
 Израиль
1
0
braintunic
> незачем вытаскивать всё. Оно и так хорошо лежит

А вам не кажется, что на /dev/null оно будет лежать еще лучше?
Раз уж "незачем вытаскивать" ;)
 New York
1
0
byka (#4221769)
как сказать. Есть такая информация, которая как бы не нужна, и на деле скорее всего вообще никогда не пригодится, но выкинуть ее жалко.
Windows Firefox
 Переславль-Залесский
0
0
aik
Случаи бывают разные. Удалили файл - это одно, а умер диск с данными (ну или пожар был) - это уже совсем другое. В общем, ледник как единственный бэкап - я бы не стал. Как вторая, третья ... пятая ... десятая (тут от уровня паранойи зависит) копия на самый черный день - почему бы и нет?

А фликр равы не поддерживает. Да и массовая закачка/скачивание оттуда не слишком удобны (хотя инструменты есть, не спорю).
Linux Safari Chrome
 Richardson
0
0
Dzmitry
Равы всмысле raw? Поддерживает, можно слить взад оригинал фотки.
Mac Safari
 Тольятти
2
0
Count (#4973736)
«Никогда не доверяй компьютеру, который не можешь выбросить из окна»

Стив Возняк.
Linux Safari Chrome
 Richardson
0
0
Dzmitry
:)
Да хоть Эйнштейн, я своему опыту больше доверяю.
Mac Safari Chrome
 MIDDLETOWN
1
0
lim
Соглашусь с утверждениями выше - в битых файлах виновата Самба (она скорее всего игнорирует case).
Совет скопировать с помощью dd тоже интересен - можно именно так и сделать, а потом расширить раздел до нужного размера, и добавить нужный тебе системный раздел и своп.
По своему опыту скажу, что файлы гораздо быстрее копируются, если их сгруппировать в архивы большими кусками. Даже если это фотки, которые почти не жмутся - все равно стоит их положить в архив без сжатия - передадутся быстрее.
Ну и еще - архивы лучше хранить на выключенном винчестере. А если что-то нужно постоянно - работать с другим диском, но держать копию на архивном винчестере, включая его только для синхронизации.
Linux Safari Chrome
 Тюмень
1
0
Uldus (#4962867)
Попробуйте rsync-ом синхронизировать эталонные данные с тем, что скопировалось.
Чтобы ssh не тратил ресурсы на сжатие и шифрование потока укажите перед вызовом rsync:

export RSYNC_RSH="ssh -c arcfour -o Compression=no -x"
Windows Firefox
 Израиль
1
0
braintunic
Что делать дальше?

Во-первых, исключить самбу. Либо расшарить по NFS, либо таки смонтировать оба диска на одном хосте.
Во-вторых, никогда не использовать mc для копирования гигантских наборов данных (сотни тысяч файлов или сотни гигабайт)

Далее.
Можно либо всё скопировать заново from scratch, в этом случае лучше использовать tar/untar для скорости.

Либо, лучший вариант - запустить rsync update, вот так:
# rsync -av --delete /fromdisk/ /todisk
Думаю, это будет самое быстрое в такой ситуации!
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
никогда не использовать mc для копирования гигантских наборов данных

И никогда не использовать mc для копирования образов ISO, открытых им же, а не при помощи религозноправильнокошерного 'mount -o loop -t iso9660 имя_файла.iso имя_директории'. Иначе все файлы в поддиректориях будут с правильными именами, но нулевой длины.
Windows Safari Chrome
 Москва
4
0
audiotheater
Ллео, а взять оба диска, приехать к кому-то из друзей, у кого комп позволяет два винта подключить, и перелить - такой вариант считается рабочим?
Windows Firefox
 Москва
4
0
vctor
Моя знакомая при покупке диска протянула старый диск продавцу и мило ему улыбнулась.Потом она зашла в магазин к вечеру, и на новом диске уже было содержимое старого.
Mac Safari
 Израиль
11
0
braintunic
> мило ему улыбнулась

Ну не у всех же третий размер груди!
Windows Firefox
 Москва
0
0
vctor (#4780875)
У неё размер ... лучше вам не знать. Но вынуть винт из системного блока сама не умеет, да ей и ни к чему.
Windows Firefox
 Бердянск
7
0
Lintruder
А у продавца к вечеру были:все её фотки, видео, сохранённые пароли. Дай бог каждому!
Windows Firefox
 Москва
0
0
vctor
Меня одолела лень самому перегонять информацию, и я об этом не подумал. А у вас как-то по-другому мозги устроены.
Windows Safari Chrome
 Израиль
2
0
Хели Коптер (#4975945)
Чуваку в конце таки перепало или она его прокатила?
Windows Safari Chrome
 Краснодар
8
1
барисыч
Перед тем, как мило улыбнуться, lleo нужно сменить пол, а одни грудные импланты с инсталляцией стоят $20000, я молчу уже про сумочку-клатч, косметичку, маленькую мерзкую собачку и прочую периферию. Как-то дороговато выходит клонирование диска. Еще не факт, что продавец приставать не начнёт. К вам когда-нибудь приставал ИТ-шник? Ко мне тоже нет, но жена говорит - страшное дело!
Windows Opera
 Новосибирск
0
0
Кошмаровский
Опыт не купишь. Даже при наличии всего этого тюнинга ллео будет похож на транса.
Windows Safari Chrome
 Краснодар
0
0
барисыч
И что? Откуда мы знаем вкусы магазинного менеджера?
З.Ы. Спасибо за комплимент.
Windows Opera
 Москва
2
0
Toxa
есть такая штука - acronis boot cd. подключаем винт по usb, загружаемся с этого загрузочного диска (не знаю, возможно, есть вариант и загрузочной флешки), запускаем копирование раздела на новый винт. простейший usb 2.0 (даже не 3.0!) переходник обеспечит никак не меньше 10 мб/с, а если попадется хороший - 20 и больше. в общем, советую.
Windows Opera
 Москва
1
0
Toxa
ps: в нем можно копировать меньший раздел в больший, ресайзить разделы, и так далее, и тому подобное.
pps: еще радует, что ничего никуда устанавливать не придется, загрузился с диска, переписал - свободен. никаких волшебных команд, написания скриптов и прочего ада, все интуитивно понятно, делается через gui.
Windows Opera
 Москва
0
0
Toxa
на счет низкой скорости копирования - проблема, возможно, в большом количестве мелких файлов. что по usb, что по сети - это очень сильно замедляет процесс. кстати, acronis в режиме копирования разделов этой проблемы лишен, так как для него не существует отдельных файлов.
Windows Opera
 Санкт-Петербург
0
0
Шура
Что за бред. Кто это вам сказал? Очень даже существуют для него файлы. Если, конечно, не имеется в виду посекторное копирование. а при обычном копировании разделов Акронисом в качестве бонуса происходит дефрагментация; сие говорит о том, что файлы он вполне различает.
Windows Opera
 Москва
0
0
Toxa
я имел в виду, что акронис оперирует не файлами, как mc, а занятыми/незанятыми блоками файловой системы, как dd. что не мешает, в общем, и дефрагментировать на ходу.
Linux Safari Chrome
 Москва
0
0
Leonid Kaganov
а Gparted при copy партиции что использует? dd или интеллект с дефрагментацией?
Windows Safari Chrome
 Москва
0
0
Artem (#4383093)
usb - это тормоз. Очень не стабильное время копирования. Сильно зависит от контроллера.
samba - глюкогенератор. там ваще всё что хочешь может произойти. но если на новый винт лить по самбе tar, а потом там его разобрать, когда он уже к нормальной машине подключен, то может и прокатит.
Самый правильный вариант копировать по sata или esata.
Если на ноуте есть разъем типа esata - купи внешний блок для дисков который поддерживает esata. Скорость будет правильная.
Но как можно быть линуксоидом без своего сервера на основе нормального десктопа - я не понимаю.
Windows Opera
 Москва
0
0
Toxa
можно, когда свой сервер на основе нормальной серверной платформы стоит в нормальном датацентре на колокации. просто это следующий уровень. :)
Windows Safari Chrome
 Москва
0
1
Artem (#4383093)
Ну тогда и данные лежат там. И не фиг их таскать через... usb или samba
Windows Opera
 Москва
0
0
Toxa
данные щас в облаке модно хранить. хотя, я бы не стал.
Windows Safari Chrome
 Москва
1
0
Dusty
Леонид, а не проще физически донести-довезти оба винта до ближайшего знакомого с нормальным исправным десктопом? Зачем этот мазохизм?

UPD я буду читать комменты, перед тем, как отвечать. Я буду читать комменты...
Windows Safari Chrome
 Петрозаводск
0
0
igronus (#4288603)
Ну, тут уже насоветовали... Я же скажу вот что: если тупо создать архивы (в вашем случае десяток-сотню) и копировать их, то большинства вышеуказанных проблем не будет.
Linux Firefox
 Одесса
0
0
amosk
Предлагаю просто cp.

cp -rpuv sourcedir destdir

Это копирует только недостающие или измененные файлы, сохраняет их атрибуты и печатает каждый файл по мере копирования.
Mac Safari
 Израиль
2
0
braintunic
Здесь cp не подходит абсолютно для второго копирования поверх неудачного первого.

В отличие от rsync, cp не почистит весь этот хаос, оставшийся после первого копирования.
А флаг cp -u всего лишь будет перезаписывать "более новые" файлы, но, в отличие от rsync, не будет перезаписывать обрезанный результирующий файл нулевого размера, который естественно новее, чем оригинал.
Windows Safari Chrome
 Красноярск
13
0
__sleeper_
Вот что бывает с теми, у кого в квартире нет православного десктопа а только богомерзкие ноутбуки и медиаплееры.
Windows Safari Chrome
 Израиль
1
0
Хели Коптер (#4975945)
Аминь брат!
Windows Firefox
 Москва
0
0
wartex
Воистину.
Windows Firefox
 Москва
0
0
AMMO
Понимаю и сочувствую. Как раз переписывал тут давеча 1.8Тб данных - 1.3 миллиона (блин) файлов! Проблем была куча - некорректные имена, длинные пути (настолько длинные, что не переписываются).
Windows
 Москва
15
0
m (ngs-govno)
люблю читать серию приключений "Ллео и современные технологии" ;)
Linux Safari Chrome
 Mt Laurel
0
0
Гена Кукарцев (#3283309)
Поддерживаю вышевысказавшихся: rsync -aviuP source dest

Оасобенно если важна надежность, как в этом случае.
Windows Safari Chrome
 Москва
1
0
BIG666
Что мешает перегнать раздел с одно винта на другой при помощи "dd" ?

dd if=/dev/sda1 of=/dev/sdb1

После чего новый раздел отресайзить.
Linux Safari
 Одесса
2
0
leyton (#4897622)
начните с описания медиа-табуретки.
и описания Ваших опций монтирования smbfs.
раз на табуретке самба есть, то есть и тар. если там есть netcat - счастье.
не встречал табуреток без тара, а если нет, - примонтируйте и правильно файловую страницу выставьте. вот тут может быть слабое место.
идеально один архив по самбе или по web.
т.е. типа tar cf ddd.tar /media/USB/ или в консоль или в вэб.

тема мертва, пока не найдем нетормозящий способ. с усб будет долго. может есть еще одна тумбочка с сетью, куда винт воткнется? нужно "слабое звено" заменять
Linux Ubuntu Safari Chrome
 Северск
1
0
EK (#3301978)
Паяльная станция не куплена до сих пор я смотрю. Я а предупреждал!
Windows Safari Chrome
 Санкт-Петербург
0
0
frelvick
Вставлю и я свои пять копеек. А если поверх уже скопированного rsyn пройтись? он же должен исправить недочеты SMB
Windows Opera
 Киев
0
0
smbd (#4974279)
для виндовс есть тотал коммандер - он имеет специальный параноидальный режим для любителей копировать - сверка контрольных сумм ПОСЛЕ копирования - очень помогает выявлять умирающие флеш-брелки

... но чтобы вот так, побить файлы при копировании по сетке ...

... такое было когда-то во времена абы-каких дешёвых 100 мегабит дешёвых ХАБОВ (не коммутаторов) от канторы Д-Линк и 100 мегабит сетевых карточек от той же канторы

прошивка медиаплеера позволяет на нём устроить sftp СЕРВЕР ?
Windows Firefox
 Израиль
4
1
Пашка (#4895894)
Зарубить надо: все эти плееры, стримеры, роутеры - не есть компьютеры!
Вы еще электронную книжку возьмите...
За пределами своих функций, да и внутри них, глючат все они по-страшному: там же не просто усеченный линукс ембеддед, а усеченный КИТАЙЦАМИ!
Windows Firefox
 Израиль
8
3
Пашка (#4895894)
Вот спасибо-то!
Нет, не то чтобы меня остановили.
(Нет. Я помню, как сын месяц тяжело работал, ставил какую-то там Уебунту на лэптоп, и я туда и не двигался...)

Но теперь я точно еще лет 5 ни за что не начну думать об Линуксе. Фубля.

Кстати, Тотал Коммандер тако рулит, что я (это блин я-то!) недавно пошел и купил на него себе лицензию в подарок! Хотя юзаю лет 20.
Оказалось, переводя свои деньги за прекрасную прогу, испытываешь род маленького оргазма... Мне понравилось. Думаю, еще бы чего купить?

Ах, да, 2 терабайта... Ну да, копировал неделю назад. Тоже диск устал. Десктоп. Сата-Сата. Часа два наверно. Не уточнял. Поставил и спать ушел.
Вообще, решить надо - ты живешь для компа или комп для тебя?
Старый десктоп 4-летний негде взять, принцип не позволяет, или места нет? Странно как-то все это. Не по-людски...
Linux Ubuntu Firefox
 Молдова
2
5
Bogolt
Оставайтесь пожалуйста на винде/маке/андроиде/айосе - пока вы там в линуксе еще не долго не будет вирусов.

ЗЫ. да платить за чужой полезный вам труд это правильно.
Windows Firefox
 Израиль
4
1
Пашка (#4895894)
Как типично у вас перепутаны акценты: а между тем, у людей так - не я "на" винде/линуксе/андроиде/иос, а ОНИ у меня!
Если весь ваш смысл жизни заключается в служении своему компу и в священном камлании вокруг него, не смею оспаривать. Каждый дрочит как он хочет.
Windows Firefox
 Челябинск
1
0
vinny-the-poo
Рукопожимаю
Windows Firefox
 Бердянск
1
0
Lintruder
Для копирования партиций юзаю clonezilla - продвинутая утилита, может работать прямо c liveUSB, есть режим "полностью загружать в RAM", после чего носитель можно удалить. Как раз под случай для двух портов и двух винтов :)
Linux Safari Chrome
 Mt Laurel
0
0
Гена Кукарцев (#3283309)
Offtopic: а табуретки (раутеры как я понимаю) всё еще актуальны, принимая во внимание появление nettop'ов за $150-200? Эти все-таки полноценные компы с USB3, что по-моему навсегда решает проблему скорости сетевых дисков...
Mac Safari
 Москва
0
1
Aleksej
Лео, не используйте мс! Он как в начале 200-х был дерьмо, вплоть до копирования файлов винды в досовом формате, так и остался. Есть же лучше, не знаю, портировали ли far, но double commander - точно лучше, почти тотал, а главное под линукс так де работает.
2) самба для линукса непостижимая вещь. Как было дерьмо с именами файлов в 2000 году, так через 15 лет ничего не изменилось (кто возражает - сделайте имя файла в кои-7 и попробуйте скопировать). Я просто молчу о том, что сетка - вообще не лучший способ бэкапа. У меня на роутере например явно сниффер трафика сидит.
Linux Ubuntu Firefox
 Владимир
0
0
Adamos
Вы перечислили глюки, с которыми сталкивается пользователь Линукса, используя виндовские файловые системы и виндовскую же шару. Ничего не смушает?
Может, это где-то в ином месте с начала двухтысячных лучше не запахло?

А дубль-коммандер - это только для тех, кому очень надо. Когда у меня сосед по кабинету жалуется, что он все делает вроде бы правильно, но получается фигня, 80% этих жалоб упираются в DC. Но вот впился он ему, страдает добровольно...
Mac Safari
 Москва
0
0
Aleksej
Конечно не запахло, и я даже знаю в каком. Недавно пришлось на git перелезать.как было все из жопы "без поллитры и переводчика с марсианского не разобраться", так и осталось, даже хуже стало. Линуксоиды всегда плевали на конечный результат и пользователей, главное чтобы процесс по придуманной в бреду спецификации шел, ради факта симуляции работы, а что в результате говно получилось - так это у пользователей всусовые рецепторы из жопы.
Mac Safari
 Израиль
0
0
braintunic
> Недавно пришлось на git перелезать. как было все из жопы без поллитры и переводчика с марсианского не разобраться, так и осталось

Так для вас git - это слишком сложно?
По сравнению с чем - с SourceSafe?
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
А на Маке есть Microsoft Visual SourceSafe? Ну чтобы версии (изредка) набитых текстов хранить?
Mac Safari
 Москва
0
0
Aleksej
Sorce safe давно мертв, ему замена TFS.
Проблема не вто что git сложен, проблема в том, что он неопраданно сложен и в нем куча всякого дерьма ненужного. Он сложнее всего vss, tfs, svn, чего угодно. Ему требуется быть половником , которым черпаем код и кладем обратно, а вместо этого перед вами лужа дерьма и прокатный лист стали - сами соберете и дырочки просверлите для дуршлага. Что нужно знать в свн? Таги, бранчи, коммит, адд, чекаут, роллбек, мердж и так понятен, клон- все. Сколько комманд в гите? Книжка про гит больше моей первой книжки по фотошопу. Ради чего? Сколько его устанавливать нужно? У меня ушло 2.5 часа с чтением манов. Что, сунулись на винду и о визардах не слышали? Особое удовольствие доставляет дрочить публичный ключ ssh движением мыши по маааааленькому квадратику, видили те они не доверяют компьютерному рандому, при том что приватным может быть вообще не зашифрован, это юмор такой? А грохнуть репозиторий clean'осм без возможности восттановления по истории, потому что ее тоже грохнуло - это зашибись cvs, да. Хваленая скорость на паре гигов исходников ниже даже чем у svn, не говоря уж о tfs , который на скуле. Git bash сильно отличается в винде от линуксоидного, так что получить не то что хочешь - запросто, я уже 2 раза так репу угробил (да, репу в гит надо бекапить, дада).. Да пошло оно в жопу. Кому сильно надо - используйте mercurial, он тоже не без заморочек, но сильно логичнее и проще. Нормальной cvs пргер дрлжен обучаться за 15 минут, а не 2 недели читать маны (которые полный пиздец невменяемые, поэтому в инете 9999статей как начатьработать с гит)
Про тортоизгит - это вообще отдельная песня. А гит экстеншнс умирают после двух кликов и без правки конфигов (которые еще найти надо, выпить поллитры и пару дней поебацца) никогда не поднимутся.

Да, я еще не сказал про гитигнор. Почему ради всего святого я должен лезть в консоль и перестраивать индек после того как добавил файл? А checkout-as зачем вообще нужен, если кросс-платформенная разработка заведомо ведется на разных платформах? Господи....
Mac Safari
 Москва
0
0
Aleksej
-----Загадка скорости 800кб решилась просто: я заметил, что шнур воткнут не в USB, а в хаб USB

Остается узнать, какой же враг народа воткнул коробочку с хардом в хаб юсб 1.0
Linux Firefox
 Richardson
1
0
Михаил (#1684620)
Вот кстати, к вопросу о виндосраче. Насколько я помню, она в подобных случаях предупреждала, что-то типа «быстрое устройство воткнуто в медленный порт, будут тормоза». А какие-нибудь линуксы так делают?
Mac Safari
 Москва
0
0
Aleksej
Лично я ни разу не видел. Но, учитывая что там маунт надо было делать вручную лет через 10 после того как появился plug&play.... Виста в 2007 вроде вышла, года 2 осталось до прорыва в убунте, потом везде появится.
Mac Safari
 Москва
0
0
Aleksej
Хотя я что-то оптимистичен и подзабыл. Сие же вроде уже в хр было, а автомаунт еще в досе.
Linux Ubuntu Firefox
 Москва
0
0
selivan (#4833454)
rsync --whole-file --sockopts=SO_SNDBUF=20000000,SO_RCVBUF=20000000 /path/to/src rsync://rsync-server/share-name/path

--whole-file выключит сверку контрольных сумм, что может сильно тормозить работу. Будет смотреть только размер и, по-моему, дату. --sockopts подбирать экспериментально, причём на сервере тоже забывать не надо.

В таком режиме он ничего не шифрует, шифрует если использовать ssh в качестве транспорта.

Если данные побились - полуркай специальные утилиты для чтения с битого диска. Они могут пробовать читать проблемный сектор несколько раз, некоторые даже, отталкиваясь от типа файла, могут попытаться восстановить содержимое, если не сильно побито.
Mac Safari
 Израиль
0
0
braintunic
Несколько замечаний.

1) --whole-file не выключит сверку контрольных сумм файлов, он только выключит "delta-transfer", а при локальном копировании режим --whole-file и так используется по умолчанию.
Сверка контрольных сумм и так выключена по умолчанию, она включается флагом -c.

2) Использование rsync-демона (rsync://) релевантно только в случае наличия rsync на обоих компьютерах, чего не было в исходной ситуации у LLeo. Кроме того, нужно позаботиться, чтобы этот демон был включен; вроде бы в Ubuntu он включен по умолчанию в init.d, а вот в RHEL или CentOS его нужно ручками включить в xinetd.d

3) В случае локального копирования ssh-транспорт не используется, то есть, rsync-демон в таком случае совершенно не нужен.
Mac Safari
 Израиль
0
1
braintunic
И вообще надо десять раз подумать, прежде чем использовать флаг --whole-file.
Скажем, для примера, если при первом запуске у нас файл размером 100 гигабайт записался не полностью - обрезанным (без пары последних блоков), то при втором запуске rsync (без --whole-file) этот файл будет дописан за какую-то пару минут, а при запуске с --whole-file этот файл опять будет переписываться полностью - больше часа.
Linux Ubuntu Firefox
 Москва
1
0
selivan (#4833454)
Мне надо больше спать :)

Я как раз недавно перекидывал много тяжёлого по сети, и не обратил внимание, что у Леонида всё локально. И ещё зачем-то обозвал delta-transfer контрольными суммами, хотя подразумевал именно его.

В случае единственного большого файла, действительно, --whole-file помешает. Но у Леонида как раз много мелких.

Использование rsync-демона безусловно подразумевает его включение и настройку, но правка пары файлов занимает от силы 5 минут, и в итоге даёт серьёзный выигрыш по времени.
Mac Safari
 Израиль
15
0
braintunic
> UPD: Загадка скорости 800кб решилась просто: я заметил, что шнур воткнут не в USB, а в хаб USB

А на третий день Зоркий Сокол заметил, что в сарае нет одной стены, и мы убежали!
Linux Firefox
 Richardson
3
0
Михаил (#1684620)
Три дня и три ночи скакал Иван-дурак, пока скакалку не отобрали.

Полный стыд, конечно. Зато хоть у народа появилась возможность поговорить на техническую тему и обсудить, кто какие ключи rsync знает. :)
Mac Safari
 Нижний Новгород
1
0
tartaglia
Это нормально. Я тоже люблю ступить, а потом над собой посмеяться. Над другими мне смеяться неинтересно, я вот такой эгоцентрист.

Но 50 Мб в сек - для USB3 мало, а для USB2 много, никогда не видел больше 30, хотя теоретический предел, вроде, 48?

"Звание лейтенанта королевских мушкетёров - для Атоса слишком много, а для графа де Ла Фэр - слишком мало", типа.
Mac Safari
 Израиль
2
0
braintunic
Ребята, тут надо сперва разобраться, говорим мы о мегабайтах или о мегабитах!
Мегабайты правильно обозначать "МБ", мегабиты правильно обозначать "Мбит", но ни вы ни LLeo не хотите, чтобы вас правильно поняли.

Вы явно имеете в виду мегабайты (судя по цифрам), но пишете "50 Мб" - что больше похоже на мегабиты ;)

LLeo пишет "50 мб" - и что он имеет в виду (мегабайты или мегабиты) - вообще полная загадка ;)

Что касается USB, максимальная теоретическая скорость USB2 - 480 мегабит/сек или 60 мегабайт/с, а практически обычно половина этого (тут вы правы).
Linux Firefox
 Richardson
8
0
Михаил (#1684620)
> LLeo пишет "50 мб" - и что он имеет в виду (мегабайты или мегабиты) - вообще полная загадка ;)

«мб» это вообще миллибиты. И для Lleo это не выглядит странно, поскольку у него рассказ даже про нанобиты есть. :–)

(Ещё бы все научились писать «с» вместо «сек»...)
Linux Firefox
 Москва
0
3
Фыва Jr Олдж
Ещё бы все научились писать "ебля" вместо "секс"...
Windows Safari Chrome
 Казань
0
0
IIacTyX
".., как думаете? :)"
Думаю подходящее название для заметки!
Windows Opera
 Самара
0
0
Александр Огнев (a_ognew)
А в ноуте dvd устройство есть? Интерфейс SATA? Тогда есть шансы подключить второй винт вместо dvd через переходник. Переходник можно купить, можно одолжить, можно самому спаять из убитого dvd устройства. А для копирования я бы использовал старый добрый dd. что то тирпа dd if=/dev/sda of=/dev/sdv conv=noerror. А то если всетаки есть бэды - задолбает. А после привел бы в порядок размер партиции каким ниить менеджером. В конце концов просто одолжить у кого ниить старенький системник на пару дней - и то гемора меньше, да и надежность копирования, всетаки вещь не маловажная. :)
Windows Safari Chrome
 Израиль
0
0
Хели Коптер (#4975945)
Надо все файлы в ARJ, потом полученный архив в Arc, этот архив в HA ну и на последок всё это упаковать в PCBackup. Полученный файл переписать - Вуаля!
Windows Safari Chrome
 Израиль
0
0
Пашка (#4786520)
32 бита же,
не получится файл таких размеров замутить
Linux Ubuntu Firefox
 Москва
0
0
Igel (#4147576)
часто копирую большое количество файлов через tar | untar
часто быстрее обычного cp.
а rsync тоже хорошо умеет много мелких файлов через себя просасывать?
Mac Safari
 Израиль
0
0
braintunic
Да, умеет.
Хотя rsync помедленнее, зато он ещё умеет при рестарте докопировать только нескопированное в первый раз, тогда как tar | untar будет опять копировать всё сначала.
Windows Firefox
 Санкт-Петербург
4
0
Tarn
Какие-то dd, тары, рсинки, мать честная.

Шёпотом: я... тут недавно... под вендами... со старого архивного NTFS-ного диска на новый, FAR-ом 500 гигабайт скопировал... часа за три.

ЗЫ: Нет, вру, часа за полтора.
Mac Safari
 Израиль
2
0
braintunic
Ну, это 50 МБ/с, обычное дело.
В чём достижение то?
Вот вы попробуйте себе сделать 800 Кб/с, как сделал Лео, и тогда посмотрим за какое время вы скопируете ;)
Windows Firefox
 Санкт-Петербург
0
0
Tarn
800 Kb/sec, Ах... Мощно и томно сдавило грудь - как живой перед глазами встал Сигейт-Педалист.
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
По сравнению с tar/rsync товарищ FAR тормоз несусветная. Хотя и много лучше (приятнее в использовании) чем Total Commander.
Mac Safari
 Нижний Новгород
0
0
tartaglia
Да, как раз старины Фара мне резко не хватает в МАКе, на который меня пересадило начальство. Можно через силу запустить mc под XQuarts, но это, кроме прочих неудобств, просто глючит.

Кстати, новые версии ФАРа резко тормозят в режиме панели 'Full' (Ctrl-3). Не знаешь, как с этим бороться, не считая отката на старые версии? Или Alt+F8 - история комманд - возникает секунд через 5. О чём он у меня задумывается? Стучит Б.Брату, что ли...
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
Не знаю. У меня

Far Manager, version 3.0 (build 4040) x64
Copyright © 1996-2000 Eugene Roshal, Copyright © 2000-2014 Far Group

не тормозит. Правда я всегда использую Wide (Ctrl-4), но и в Alt-F8 тормозов не наблюдается.
Mac Safari
 Москва
0
0
Aleksej
Я последние 2 года не пользуюсь компом вообще. Только на работе или (изредка) для набивки текстов. Хотя меня на айпаде вообще только купленное ПО держит, а то бы давно купил андроид и набивал бы на нем с нормальной клавы..
Вы все динозавры.
Linux Firefox
 Москва
1
0
Фыва Jr Олдж
Некоторые используют комп чтобы зарабатывать путём написания для него программ. © Капитан Очевидность.
Linux Firefox
 Richardson
1
0
Михаил (#1684620)
Дык, а для кого те программы, если всякие Aleksej-и «не пользуются компом вообще»? :)
Mac Safari
 Москва
0
0
Aleksej
Я тоже, я ж специально указал, что вне работы.

Типа как на работе тарахтишь на бульдозере, а в выходные - ездишь на норм тачке. Вроде как и слабее, но быстрее и удобнее.

Я комп использую в последнее время только чтобы в шутеры поиграть (как ни пытался, с джойстика на плейстейшенах не выходит) да стратегии, и то времени последние месяцы нет, простаивает.
Windows Opera
 Новосибирск
0
0
Кошмаровский
Торренты на твоем андроиде тормозят. Сони вегас не идет, домашнее порно не смонтировать. Я не говорю уже про богомерзкие delphi
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
Под андроидом можно запустить fpc, чем не Delphi? Правда консольный. Но можно напрячь задницу [если уж очень припрёт] и как-нибудь [в своё spare time] портануть туда Lazarus (если ещё не портанул никто, а в среде Open Sources с этим быстро), общественность только спасибо скажет.
Mac Safari
 Москва
0
0
Aleksej
Не видел, чтоб тормозили. Зато видел как мюторрент адвару и хз еще чего впихивает, при этом тн антивирусы, которые под андроид суть движущиеся прогрессбар-картинки для медитативного успокоения австралопитеков за деньги, ничего в упор не видели. И лечится это только хардвар ресетом, а то и перепрошивкой. Мораль: не ставить мюторрент, которого даже в офиц. Сторе десятки разных.

Домашнее порно и правда не смонтировать, зато можно снять. Попробуй его снять на вебкамеру 24 монитора .
Linux Firefox
 Швеция
0
0
Копыждьир (#4988004)
>со старого архивного NTFS-ного диска на новый, FAR-ом 500 гигабайт скопировал... часа за три
Значит вам страшно повезло с правами доступа и сохранностью диска. Обычно первый нечитаемый файл попадается файловому менеджеру спустя секунду после того, как вы оставите систему в покое, ведь всё нормально же копируется.
Mac Safari
 Москва
1
0
Den3 (#3094687)
Я тупо клонирую диски по работе и дома загрузочным CD acronis true image. Быстрее всех. Отлично раьотает по USB
IE
 Химки
0
0
yalexey
Сейчас всё, что не SAS - SATA с вероятностью 99%.
Но есть нюанс. Это он логически SATA. а физически может быть и microSATA и чёрти что ещё вплоть до PCIе в десятке вариаций.
Впрочем, USB коробочек это не касается.
Windows Firefox
 Воронеж
0
0
Fass (#4113115)
А что за винт, который новый?
Дохнут они быстро. Двухтерабайтники.
Я бы порекомендовал купить еще один такой же, и делать копию раз в месяц.
И, да, второй винт хранить на полочке.
Linux Firefox
 Richardson
1
0
Михаил (#1684620)
> хранить на полочке

Желательно, нижней. ;–)

А чьи именно дохнут? Или у всех троих (Seagate, Toshiba, WD) одинаково?
Windows Firefox
 Воронеж
0
0
Fass (#4113115)
Все дохнут. При нынешней плотности записи, деградируют они очень быстро. У меня были и WD, и Seagate. Как альтернативы друг друга. Один хрен, после покупки они быстро покрываются "зелеными" секторами (привет, Виктория!) и долго после этого не живут.
Кстати, есть еще одна напасть - вирус-шиФровальщик. CTB-Locker, у него еще куча имен есть. Для линукса это неактуально, а для виндоводов весьма. Так что только бэкап, и на полочку! Нижнюю.
Windows Firefox
 Воронеж
0
0
Fass (#4113115)
Возможно, мне просто не везло с винтами. Но бэкап - это святое, особенно после шифровируса.
Windows Firefox
 Курск
1
0
passer-by (#4437472)
> Возможно, мне просто не везло с винтами.

Hitachi, только Hitachi! :)
Mac Safari
 Москва
0
0
Aleksej
Блин, почему у меня за всю жизнь посыпался только ibm dtla, который у всех умирал через полгода? Как же вы их насилуете? У меня айдешный самсунг 20 гб 12-ти летней давности и то живой где-то валяется, несмотря на то, что я его ронял пару раз. Что вы с ними делаете? Яичницу в микроволновке по утрам на них готовите?

Из современных у меня sg green 5 шт и black один для системы, 4 года - никаких проблем.
Windows Firefox
 Владивосток
0
0
Alex (#4078668)
> Или к 2015 уже появились модели, где заместо sata впаян usb еще на заводе?
2.5" модели с USB появились году эдак в 2012-1013, если не раньше. Первыми, по-моему, так WD пошутили. Сейчас подобные изделия есть у всех уважающих себя производителей HDD.

Другой вопрос, что было использовано в данной конкретной коробочке. Думаю, вскрытие покажет.
Linux Firefox
 Richardson
0
0
Михаил (#1684620)
Вот что Википедия говорит:

There are pre-assembled external hard disk drives that, when taken out from their enclosures, cannot be used internally in a laptop or desktop computer due to embedded USB interface on their printed circuit boards, and lack of SATA (or Parallel ATA) interfaces.

Там есть ссылка на картинку, где из диска WD непосредственно micro-USB3 торчит, и ссылка на статью как к его плате приколхозить SATA-разъём.
Windows Safari Chrome
 Новосибирск
0
0
slq (#4959931)
Почти все HDD сейчас выпускаются с интерфейсом SATA. Бывают еще SAS для серверов. Во всех коробочках (USB, FareWere, Thunderbolt) стоят HDD с интерфейсом SATA, причем выламывать и выпаивать не придется, просто разъем. Вот у SSD с интерфейсами уже побогаче.
Windows Safari Chrome
 Пермь
0
0
chonbuk (#1953659)
Я бы не стал так категорично.
Собственными глазами видел внешний USB-винт WD, у которого был свой, проприетарный интерфейс вместо SATA. Так что вместо замены HDD пришлось выкидывать коробку целиком.
Windows Safari Chrome
 Ростов-на-Дону
3
0
-wall-
«Я ведь правильно понимаю, что заведомо «внешние» винты — по-прежнему выпускаются как sata, только на заводе их впаивают в коробочку? Или к 2015 уже появились модели, где заместо sata впаян usb еще на заводе? ;)»
Леонид, бывает по-разному. Лучше перед приобретением заблаговременно узнать по конкретной модели, иначе может получиться вот так: http://masterpaiki.ru/razborka-i-remont-vinchestera-western-[...]
http://masterpaiki.ru/wp-content/uploads/2012/08/6-raz'emyi-vinchestera-Western-Digital-750-Gb-Elements-SE-Portable-WDBABV7500ABK.jpg
Windows Firefox
 Латвия
0
0
Mik
Поддерживаю. Пару раз (из примерно полусотни хардов за последние два года) встречались 2.5" внешние харды, где усб было припаяно к плате.
Windows Opera
 Новосибирск
0
0
Кошмаровский
А че, xcopy не пойдет ??
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
В Линуксе? Не, не пойдёт ;-)
Linux Safari
 Санкт-Петербург
1
0
Вал. Дав. (#4351495)
Некоторые внешние винты, например, wd mypassport, не иеют внутри sata интерфейса. А некоторые, скажем, seagate backup+, не просто имеют, а ещё и легкосъёмный, который можно в одно движение подоткнуть к другому диску. Правда, через него не все команды проходят и последнего сектора почему-то не видно.
Windows Opera
 Казань
0
0
Александр Огнев (a_ognew)
Подтверждаю. В последнее время встретилось несколько внешних дисков у каторых HDD не имел SATA интерфейса. Там сразу был разведен USB.
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
А не в курсе как с этим дела у WDBWLG0020HBK (Western Digital "Elements" 2Tb)? Просто он на гарантии, поэтому раскрутить и посмотреть сам я не могу. А если у него в пузе обычный SATA с переходником, то я туда лучше Western Digital "Caviar Blue" WD5000AAKX на 500Gb пихну, а тот 2Tb себе в системник вкрячу. Нафига мне на внешнем диске два терабайта? Ему и 500 гигов хватит (просто меньше SATA у меня нет, а то и 500 много).
Windows Safari Chrome
 Москва
0
0
Vollk (#4989814)
Просто купить док-станцию за 1т.р.
http://www.fcenter.ru/product/type/120?param=1503&offset[...]
Windows Opera
 Москва
0
0
Toxa
сколько часов копировалось-то в итоге?
Linux Safari Chrome
 Москва
0
0
Leonid Kaganov
Часов 18.
Сейчас другая проблема - пришла соседка Таня, у нее на ноуте полетел винт. Не лечится fsck - сбои и ошибки. Поставил копировать партицию на свободный винт. И вот уже сутки время от времени подхожу к gparted и нажимаю "ignore" в ответ на окшоко ошибки. Иначе gparted не умеет. Наверно можно было как-то наладить dd, но было лень. Винт 130Гб... Эпидемия йопт.
Windows Firefox
 Израиль
0
0
braintunic
> Наверно можно было как-то наладить dd, но было лень

А чего там налаживать?

После того, как определены партиции (с какой на какую копировать), всё, что осталось - это запустить:

time dd if=/dev/sda2 of=/dev/sdb3 bs=16M conv=noerror
Linux Ubuntu Firefox
 Москва
0
0
Leonid Kaganov
спасибо, учту
Linux Firefox
 Москва
0
0
Фыва Jr Олдж
Фу! ddrescue спасёт смертельно раненого кота!
Windows Firefox
 Израиль
0
0
braintunic
Так ddrescue ещё надо установить, тогда как dd установлен изначально.
И ddrescue куда медленнее, чем dd (если только побитых блоков не большинство).

Конечно, при копировании с полуубитого диска ddrescue восстановит куда больше блоков, чем dd, но ведь LLeo уже сказал, что ему "пофиг".
Windows Opera
 Москва
0
0
Toxa
тут вопрос, что потом с переписанным делать, ведь будут побиты случайные файлы. вручную только проверять...
Linux Ubuntu Firefox
 Москва
0
0
Leonid Kaganov
пофиг
Mac Safari Chrome
 Новая Зеландия
0
0
profile.py
есть rsync без шифрования http://psc.edu/index.php/hpn-ssh

Бывают винты на которых только USB! У меня такой самсунговский был, на платке распаян юсб и все. Винт конечно умер и с концами.
Linux Ubuntu Firefox
 Москва
0
0
Leonid Kaganov
Вы меня напугали, и я его разобрал. Нет, обычный sata:



Windows Firefox
 Москва
0
0
nick1ess
по поводу терабайт старых, но очень важных и ценных данных, (начиная с компьютера БК-0010;) вспомнились строки какого-то молодого начинающего автора... забыл имя...

День Ксении Преображенной принято отмечать ежегодно в любую дату, не дожидаясь прихода ангела. В этот день по традиции из дома выносят все, что за минувший год ни разу не использовалось для секса или просто для поддержания организма в здоровом состоянии. Начать праздник полагается с одежды, что за год не надевалась, а закончить — мытьем полов, особенно в тех местах, где была старая мебель

всего комментариев: 243

<< предыдущая заметка следующая заметка >>