だが、まだ壊すことができていない。
いくつかのコメントにあったが、損耗平均化アルゴリズム (wear leveling algorithms) で、書き込み先を分散することで、メモリ全体に書き込みが分散されるから、この程度の書き込みでは壊れないのだろうか?
そうであれば良いのだが、私は、メモリ全体に渡って書き込みを分散することはないと考えている。
その機能を作るとすると、MMU のようにマップが必要になる。2GB の メモリ全体をカバーするとすれば、65536 個のエントリが必要になる。それぞれのエントリには、マップ先を示す 16bit のエリアと 書き込み回数を記録する 24bit ぐらいのエリアが必要だろう。
合計で、384KB が必要で、更新頻度が高いから、RAM である必要がある。そして、その RAM は不揮発性であるか、カードの電源が OFF になってから FLASH に書き戻すとかする機能を持っている必要がある。
そこまでの RAM 容量と機能を持っているのはあまり考えにくい。そういう機能ではなく、書き込み頻度の高いところを見つけて、そこの書き込み回数を記録して、ある程度の回数になれば、壊れるまえに代替ブロックに置き換えるのではないだろうか?
別の見方もある。もし完全に平均化できる機能であれば、FLASH メモリの書き込み耐性の問題はクリアしているといえるのだ。もっと大々的に宣伝されているはず。そうでないから不完全な機能だと思えるわけだ。
PC 用 ハードディスクの エラーレートを知っているだろうか?たとえば、HGST Deskstar E7K500のデータシートには、1/10^14 だと書いてある。同じ土俵の数字ではないだろうが、10万ブロック x 10万回だと 1/10^10 。ハードディスクに遠くおよばないが、容量が 1/1000 だとして、容量あたりという考え方をすれば、ハードディスクの 1/10 程度にまでなってくる。
ちなみに、損耗平均化アルゴリズム (wear leveling algorithms)があることを スペックに明記しているのは、A-DATA だけ。他はハードディスクと同じような不良ブロックマネージメント機能だと思う。
ちなみに、代替ブロックは、OS から見えないところに専用のエリアがあるはずだ。どれぐらいの容量があるかはわからないが、たぶんメモリ全体の1〜5%程度だと思う。(自信なし)
- 代替ブロックの場合もマップは必要で RAM である必要がある。
エントリのサイズが増えるが、メモリ全体の 5% しかないなら、32KB ぐらいで済みそうだ。
また、RAM は不揮発性である必要がない。代替する毎に書き込みしても、書き込み頻度はあまり高くない。
追記:↑の考察はそうとうに甘かったようだ。入れ替える方法ならば、メモリ全体を使える。詳しくは↓を参照のこと。
どういうテストをすれば壊れるのか?
キングストンなどは 5000万回も書いても壊れなかった。どんどん代替プロックが置き換えられているとも考えられるが、Write Back キャッシュになっていて、書き込んだ回数 != Flash に書かれた回数という可能性もある。
いろいろ考えたのだが、書き込んだら確実に Flash に書かれるように 1回の書き込みサイズを 1MB にすることにした。1MB ものキャッシュを持っているとは思えないので、大丈夫だろう。
それは良いのだが、1MB もの領域を書き込んで、確認のために読み込むとなると、相当時間がかかる。だいたい 1万回書き込むのに 1時間前後。100 万回でも 4 日のオーダになる。
ここまできたら意地である。何日かかろうともやってみようと思う。
- プログラム、flashtest2.c
- M,K の指定ができるように若干改造
このプログラムで、まずは、300万回書き込んでみることにする。
ターゲットは、いままで使ってきた 上海問屋オリジナル 2GB 、キングストン 2GB 、A-DATA 1GB 。
- 上海 2GB 121万回 エラーなし。
- キングストン 2GB 118 万回 エラーなし。
- A-DATA 1GB 116 万回 エラーなし。
現在の状況
6 日やってこの状況だ。300 万回まで一週間以上かかる。300万回をクリアしたとしても、まだまだ続ける予定。
結果は、このページの追記に記載する。
おまけ
実はコメントを見て驚いたことがある。
多くの人が、書き込みを平均化するのに、空きエリアから代替するブロックを取ってくると考えているようなのだ。
結論から言うとそのようなことは不可能だ。
空きエリアは、OS のファイルシステムが管理する。そして、その情報を、DISK に書き込まずキャッシュするのが普通なのだ。
たとえ、microSD 側が、FAT ファイルシステムの構造を知ることができても情報が最新である保証がない限り、どこが空いているか確実に知ることはできない。つまり、最新の情報は OS しかもっていないから、どこが空いているか正確にはわからないのだ。
もし、使用しているエリアを使ってしまえばデータが化けてしまうわけで、そのような仕組みを入れることは不可能なのである。
ウェアレベリング機能
コメントで教えてもらったウェアレベリングをググってみた。
ウィキペディア の
NAND型フラッシュメモリがわかりやすいと思う。
実際の例として、業界初のメモリ管理機能内蔵フラッシュメモリがヒットした。
東芝も LBA-NANDというウェアレベリングをサポートしたチップを出している。
たとえば、ある一定の書換回数に至ると、自動的に書換え回数の少ない領域とデータとアドレスを入れ替えるというもの(特許になっていていくつか方式がある)らしい。
なるほど、入れ替えるならば、空きエリアなどファイルシステムが管理する情報に依存せず実現できる。
入れ替える単位は、たぶん ブロックサイズなのだろう。ブロックサイズが何KB かわからないが、4K ページ x 64 とすると、256 KB 。2GB なら、8000 個ぐらいある計算。8000 個を順番に使うのなら、20万回でエラーになるとしても、1MB を 4億回書かないと寿命に至らない。300 万回程度の書き込みでは何もおこらないだろう。
フラッシュメモリは何日で壊れる? ウェアレベリングの仕組みというページを見つけた。ここでは、SanDisk の CF の仕組みを解説しているのだが、OS が空きエリアを CF に通知しないとウェアレベリングに使うプール(Erase Pool)が増えない。非対応の OS だと 3% の代替ブロックが使えるに過ぎない。ウェアレベリングにもいろいろあるようだ。
空きエリアが多いほど... と考えている人は、ひょっとして SanDisk の CF の仕組みを想定しているのかも知れない。
普通に使う範囲ならば、空きエリアは関係なく、一度も使ったことのないエリアということになる。
パーティションきりなおして、小さくしておけば耐性があがるかも。
といっても、各社ウェアレベリングは特許にしているだろうから、方式はマチマチになると思う。一般化してしまうのは無理がありそう。日立の入れ替えるという方法がもっとも良いと思うが、日立の特許で他のメーカは使え(and/or わ)ないのかも。
あまり深く考えてなかったのだが、普通の不良ブロックマネージメント機能で、5% の代替エリアを持っていると仮定しても、2000万回書き換えられる計算。前のテストで、Write Error を起こしたことがある上海 2GB なら何らかのエラーになる可能性はあるが、300 万回ではなにも起きないかも。
やはり意地である。理想的なウェアレベリング機能でなければ、壊すことは可能そうだ。ただ 300万回では話にならなさそうだ。クリアしてしまったら、再検討してトライしてみることにする。
おまけ2
上海問屋オリジナル 1G/2G は、A-DATA my Super 1G/2G の OEM らしいことがわかった。
裏面に浮き出ているパターンみたいなのがそっくりだったので、デバイスのサイズを見てみたら、まったく同じだった。
1G 994816 KB
2G 1993728 KB
3種類調べていたつもりが、ほぼ2種類(一応 1G/2G の違いがある)だったとは、ちょっとショック。
おまけ3:手持ちの microSD の性能
→microSDの性能についてに続く
write read size
A-DATA 1G 4.67 15.29 994816 (3886 x 256)
A-DATA 2G 7.96 15.29 1993728 (7788 x 256)
キングストン 2G 7.35 15.51 1966080 (7680 x 256)
Silicon Power 2G 3.91 9.21 1985024 (7754 x 256)
※ 上海問屋 1G は、A-DATA 1G と同じ性能 (2G は未測定 )
size の単位 KB
read/write の 単位 MB/sec ( 1024x1024 /sec )
テスト内容
write 100MB のファイルを write
- キャッシュを(ほぼ)書き出すまで
read 100MB のファイルを read
- いったん umount し DISK から読み出す
テスト環境 玄箱/HG Linux(自分改造版)
USB アダプタ SDMMC M121 (14cd/6700)
ファイルシステム FAT16
- クラスタサイズ 1G -> 16K / 2G -> 32K
追記
1MB では、秒間 3 回ぐらいしか書けない。これではラチがあかないので、もう少しなんとかしたい。
秒間 3回でも 1MB なので、3MB/sec で Write + Read していたことになる。転送性能から見てこれぐらいが精一杯。
一応 4K ページ・256K ブロックの Flash だと仮定しよう。
おなじ 1MB の領域を使うとしても、256 K バイトおきに、先頭の 数キロバイトのみ書き込みしていっても同じ効果になりそうだ。
中断して、新プログラムに変更することにする。
- 上海 2GB 210万回 エラーなしで中断
- キングストン 2GB 156 万回 エラーなしで中断
- A-DATA 1GB 146 万回 エラーなしで中断
1MB の write 最終状況
- プログラム、flashtest4.c
- n バイト間隔で m バイトの書き込みとチェックができるよう変更
- チェックの方法を書き込む前に、前のデータが期待するものかどうかをチェックするように変更。
- 上海 2GB (= A-DATA 2G)
1万回に 4分 40 秒
1万回に 16分 20 秒 (42万回時)
593 万回から 最初の USB アダプタに変更。 (1万回に 23分)
754 万回 時に、データ化け(例によって USB アダプタの問題)
→そのまま中断 - キングストン 2GB
1万回に 36分
1万回に 51分 (5 万回時)
329 万回(中断) - A-DATA 1GB
1万回に 5分 40秒
1万回に 16分 20 秒 (41万回時)
1000 万回 ノーエラー終了
現在の状況 (1MB に対し 256KB 毎に 32KB の write 4回分)
これだと、上海/A-DATA は、一日で 250 万回ぐらいになりそうだ。とりあえず 1000万回を上限にテストをスタート。
まだはじめたばかりに近いのに、どんどん遅くなっている。ひょっとして、エラーが頻発していたりするのだろうか?
ようやく 1/2 の 500万回まできた。性能は安定しているようだ。
しかし、なにも起こらない。最後まで行ってしまう予感。
キングストンは遅い。こういう書き方をされるのは苦手なようだ。
追記
ここに来て、上海/A-DATA (1G/2G, Super) は、SLC であるということを知った。そして、キングストン 2G (日本製)も。
SLC は MLC と比べて書き込み耐性が 1桁違うらしい。なかなか壊れないのもそれが理由かも知れない。
ちなみに 8GB は確実に MLC 。4GB もたぶん MLC 。SLC だけを調べてなにかわかったとしても 4G/8G の特性まで一般化できない。
4GB のテストは、4GB が1500 円を切るようなことがあればやってみることにして、今は 2GB 。SanDisk 2GB bulk は、A-DATA とも キングストンとも特性が違うようなので、(このテストが終わったら)試してみようと思う。
それはともかく、あまりになにも起きないので、上海 2G に対して、最初に使った USB アダプタに切り替えてみようと思う。
USB アダプタ SDMMC M121 (14cd/6700) について
少しばかりコレについて説明しておこうと思う。
14cd/6700 は、USB のベンダID/プロダクトID。SDMMC M121というのは、USBからみえるベンダ名。相当変であるが、USB アダプタのチップがそう言ってくるわけで、とりあえずこれを名前にしている。
ちなみに、このベンダには、14cd/6600 というのがあって、それは、ベンダ名: Super Top プロダクト名:USB 2.0 IDE DEVICE を返すらしい。しかし、Super Top というベンダの Home Page は見つけられていない。
実際の製品としては、FUJITEK microSD超小型カードリーダー。それ以外の FUJITEK アダプタにもこのチップが使われている。また、GREEN HOUSE GH-CRMR1-S*Aシリーズも同じもの。なんと 0.82g の軽さ -- microSD を装着しても 1.22g 。
このアダプタ、これだけのテストでエラーを出していないし、小型なので気に入っている。ただいくつか不満な点もある。
ひとつは、最大性能があまり高くない(らしい)こと。Photo Fast とか 150x (22.5MB/sec)らしいが、read で16MB/sec ぐらいまでしか出ていない。たぶん 最大クロックが十分ではないのだろう。実用上はぜんぜん問題ないが、性能テストするには不十分なのだ。
もうひとつは SDのイレーズ機能がないらしいこと。パナソニックの SDformatter には、イレーズするという機能がある。しかし、この USB アダプタだと "デバイスにイレーズ機能がありません" と言われてしまう。ひょっとして、A-DATA などイレーズすることで、ウェアレベリング機能に対して空きエリアをリセットできるのではないかという気がしていて、イレーズをやってみたいのだが、それが出来ない。まぁイレーズ機能があるアダプタなど パナソニック純正以外にあるのかどうかも判らないのだが、少々残念。
電子工作ネタ
一般のUSB アダプタでは完全に初期化できないなら、イレーズコマンドを発行して SDカードを初期化し、フォーマットする。そういう装置を作るのもいいかも知れない。
A-DATA 1G 1000万回達成
なにもおこらず 1000万回達成してしまった。キングストンは遅く その時点で、329万回まで。A-DATA 2G はエラーが出るアダプタで、やはりというか754 万回にエラーが出た。
ちなみに、1MB 相当ということにしたので、4ヵ所書いて 1回 にしている。トータルでは 4000万回書いたのだが、なにも起きなかった。
これで終わりにしたいところだが、テストしたカードは実用目的には使えないし、マシンも遊んでいるので当面続けようと思う。
実は HUB を買ってきた。テストを 1台に集約して、ずっとテストし続けられるように。カードも SanDisk 2G を追加。テスト方法も少々変更する予定。1MB (4ヵ所) から 10MB (40ヶ所)に広げてみる。
地味な話題なので、経過報告は、ここに追記していく。
- 上海 2GB (= A-DATA 2G)
4万回に 15分 ( 192万回時 )
8000 万回(断念)
- キングストン 2GB
4万回に 36分 ( 72万回時 )
180 万回 で リードエラー (ついに限界)
その後、書き込みはできるが、すぐ読めなくなることを確認。
ファイルを変更してテストをしてみることに。
→ 166 万回で リードエラー
(終了) - A-DATA 1GB
4万回に 56分 ( 44万回時 )
204 万回 で リードデータ不一致 (電源不安定が原因)
2820 万回(実行中)
- SanDisk 2GB bulk
4万回に 50分 ( 52万回時 )
72 万回 で リードデータ不一致 (電源不安定が原因)
168万回で ライトエラー (〃)
208万回で ライトエラー (〃)
3312 万回(実行中)
10MB に対し 256KB 毎に 32KB の write
(前回と違い 1 write を 1回と数える)
現在の状況
- キングストンが若干速くなり、A-DATA 1G がすごく遅くなっている。上海 2G (A-DATA 2G) は変わらず。4ヵ所→40ヶ所に変更したのが関係しているのかも。
- ちなみに、前記事コメントに従い、空き領域を 0 にしている。(一応ほとんど1回は書いたという状態)
- USB アダプタはすべて、SDMMC M121 (14cd/6700)
SanDisk 2G が 72万回でデータエラー!
なんと 72万回で 書き込んだはずのデータと一致しないというエラー!
で、ファイルを読み込んでチェックしてみたが、正しい。こういうのは想定外だ。何度かおきるだろうから、再実行して様子見。
キングストン 2G が 180 万回で リードエラー!
お、あらためてファイルを読み出してみると、やはりリードエラー。
dmesg では複数のセクターでエラーが記録されている。
セクタ# (256KB 単位)
2131672 4163 -- テストでのエラー
2120888 4142 -- ↓ ファイル読み出しでのエラー
2120896 4142
2120896 4142
2121400 4143
2121408 4143
microSD (というか NAND Flash)は、一般に ECC を持っている。→ ググる
だから、書き込んだデータが化けてしまったとき正しいデータでなかったらエラーになる。
このテストでエラーになったということは、書き込んだ直後はエラーでなかったものが、2 秒後には化けてしまったということ。
そして、複数の場所で リードエラーがおきたということは、テストで気が付かなかっただけで、ほかのところも疲労しているということ。
ちょっと気になったので、テスト中のほかの microSD も確認してみたが、リードエラーが起きたのは、これだけだった。
ALL 0 のデータを書き込んでみたら書けたので、再度テストしてみたが、途中で止めて ファイルを読み出してみるとやはりリードエラー。代替もできない状態で 劣化したブロックを使っているようだ。
では、疲労していないはずのほかのファイルに対してテストするとどうなるのか? 代替ブロックはもうないはずで、メモリ自体の耐久性がわかるはず。
ところで、書き込み直後は OK でも 2秒後には read error になるケースが出てきた。このテストでは、ほかにもそういうところが出てきている末期的状況になるまで気が付かない。それでは困るので少々工夫しようと思う。
4万回毎に どこまで進んだか表示するようにしているが、このときに デフォルト 1分間の sleep を入れる。こうすることで、その間データを保持できないところがあれば発覚するようにした。
プログラム→ flashtest5.c
本来は、もっと長期間持たなければダメとしたいところだが、それではテストにならない。かなり劣化が進まないと確認できないことに注意。
SanDisk 2G が 通算168万回で ライトエラー!
dmesg で見てみるとジャーナルの I/O でエラーになっている。
それにしても、なんかこれだけ変なエラーがおきている。データ化けもそうだが、ライトエラーなんてものが起きるのはおかしい。ひょっとして、接触不良とかではないか。
一回取り外して、抜き差しして テストを再開してみることに。
通算208万回でもライトエラー。dmesg のエラーを冷静に見ると...USB レベルのエラーが先に起きている。
原因として、HUB のこのポートだけおかしいとか、USB アダプタがおかしいとか、あるいは microSD がレスポンスを返さないから USB アダプタの動作が変になったとか。まぁいろいろ考えられる。
とりあえず、USB アダプタを変えてみる。安物だから 不良品だったのかも知れない。
A-DATA 1G が 204万回でデータエラー!
SanDisk 2G で最初に起きたデータ不一致と同じ現象。これはもう Hub か、Hub を使ったことでタイミングが変わったのが原因だろう。いずれにせよ USB レベルの問題で microSD は関係なさそう。
とりあえず再開
実は、使用している Hub は AC アダプタがつけられるタイプで、AC アダプタ(5V 2A)で電源を供給したら、この現象は収まったようだ。
よくよく考えたら、ホストマシンは 玄箱/HGで ACアダプタタイプに改造したもの。5V の供給は DISK も含め 全部で 2A 。たぶん 5V の供給が不足して不安定になったのだろう。
それにしても、Hub をつけて 4 つ同時実行にしたらいろいろ起こりすぎる。データ不一致が起きても、1回ぐらいは再読み込みして続行しないと 放置して結果だけ見るようなことができない。
再度、少しばかりプログラムを変更することにしよう。
プログラム→ flashtest6.c
キングストン 2G が 166 万回で リードエラー!
ファイル名を変更してから 166 万回の write -- 1/40 すると、 4.2 万回。
最初の リードエラーのように あとで読み出すと複数(今回は 2ヶ所)のリードエラーが起きた。
キングストン系については、代替ブロックを使い尽くしてしまえば、書き込めても、読めないところが増えだす。
そして、読めるか読めないかは時間が立たないとわからない。
ただし、かなりの量の書き込みをしないと、代替ブロックを使い尽くすところまでは行かない。
記録を集めれば、通算何回 write したかは分かるのだが、テスト方法を何度も変更しているので、基準になるような数字にはならない。
新しいので、やってみても良いとは思っている。が、またテスト方法を再検討するようなことになると無駄になるので、他のカードがどうなるか見てから決める予定。
書き込んだ直後では本当にデータが保持できるのかどうか分からないような特性だと、どういう基準で、代替ブロックに変えるのか気になってくる。書き込み上限回数を設定しているのなら問題なさそうだが、書き込みでエラー検出のみだと、メディア全体が寿命に至らなくてもリードエラーが出てくる可能性があることになる。
読めなくなるのが、ファイルのデータなら1つのファイルが途中までしか読めないようなことになるのだが、ディレクトリエントリならそのディレクトリが全滅するかも知れない。ただし CHKDSK とかで復旧できそう。FAT なら ミラーがあるので大丈夫 --- 昔はそうだったと思うのだが、今は違うはず。アクセスしていないのに読めないファイルが出てくるんじゃないかと思う。そして、SUPERBLOCK (= BPB) なら全滅。
さて、このタイミングで他の カードが読めなかったりしないかチェックしてみた。が、大丈夫のようだ。
なかなか 上海(A-DATA) 2G は壊れない。連続書き込みという使い方では丈夫なようだ。性能も良い。ただし、製品の一つの面しか評価していないことに注意が必要。たとえば書き込んでいる最中、あるいは書き込み終わったすぐあとにカードを抜いたりするのに弱いとか弱点があるかも知れない。
A-DATA 2G が 8000万回達成!
8000 万回までやってみたが無問題。完成度が高い ウェアレベリングが実装されているのだろう。
さらにテスト中
A-DATA 2G はやめてしまったが、A-DATA 1G と SanDisk 2G は実はまだテストをやっている。
でそれぞれ既に 1億回突破。壊れるような気がしないが、まぁやれるだけやってみる。
- A-DATA 1GB
4万回に 56分 ( 44万回時 )
204 万回 で リードデータ不一致 (電源不安定が原因)
1億2176 万回(実行中)
- SanDisk 2GB bulk
4万回に 50分 ( 52万回時 )
72 万回 で リードデータ不一致 (電源不安定が原因)
168万回で ライトエラー (〃)
208万回で ライトエラー (〃)
1億7396 万回(実行中)
MemCon Tokyo 2007レポート【フラッシュメモリ編】
http://pc.watch.impress.co.jp/docs/2007/1119/mct.htm
すzさんの記事を読んで、個人的に思ったこと。
・ECCはエラー検出だけでなくエラー訂正+検出です。1bitECCだと不良率が高いと訂正できなくなります。
上記記事によると4bitECCはビットエラーが少々出ても復元できてますね(効果100倍〜1千万倍以上)。
・書き込み時間はブロック内の一部に書き込むより全部に書き込むほうが不良検出力はあがるので、一部だけ書き込むのはあまり良策ではないと思う。
・書き込みデータはゼロの時、電子を注入している(ダメージがある)ので、ゼロ書き込みが良い。
私は、EeePCのSDスロットに16GBSDHCを入れ、このSDにubuntuをインストールしています。この状態で、カーネルを何度かコンパイル(makeしたり、make cleanしたり)したり、カーネルソースを入れたり消したりしていると、A-dataのSDは数回でコンパイル中にエラーになります。調べてみると、ソースファイル中のある一文字が化けていたりします。いじっていないソースが
コンパイルをするたびに場所を変えてエラーになるので、SDの劣化試験には最適でないかと最近思っています。比較してみると面白そうです。
https://sansawivi1983.wixsite.com/contsetlioglas/post/dhano-dhabewali-1-2-3-720p-in-dual-audio-hindi
https://wakelet.com/wake/M0XBCfCgNd66S-9-2YUAC
https://pdfslide.net/data-analytics/xk-dsin-o-.html
https://stalvoilowpesthos.wixsite.com/etnabatvio/post/torrent-dolcemodz-claire-set-05-video
https://trello.com/c/qtX5IBjV/45-clip-studio-paint-ex-194-materials-free-download
https://trello.com/c/l8dMbmLz/21-mathtype-6-8-crack-serial-number
https://trello.com/c/OH0zVCg4/10-counter-strike-16-half-life-crossfire-map-indir
https://trello.com/c/lRVICuAJ/25-miopocket-40-release-68-downloaddcinstl
https://uploads.strikinglycdn.com/files/795dc119-b161-47c2-b5a1-93e585661d05/The-Legend-of-Tarzan-English-hd-720p-1080p-movies-free-download.pdf
https://assets.pinshape.com/uploads/image/file/421907/Dreams-Boot-CD-UEFI-V4-Size--750MB-By-CmTeamPk-Serial-Key-Keygen.pdf
https://coub.com/stories/1155628-a-swades-full-movie-free-download
https://media.muckrack.com/portfolio/items/14877551/Introduction-To-Heat-Transfer-5th-Edition-Incroper.pdf
https://wakelet.com/wake/cB6A6eLsQ2S7IhrdRL6tG
https://wakelet.com/wake/ItMe-lA396-C4Dz1Nc_nA
https://wakelet.com/wake/GkdTQOk9h1wZ88ZYQy0T3
https://wakelet.com/wake/m9rXybns98RNzTLQ1nv7R
https://songthroppames.weebly.com/uploads/1/3/9/2/139276451/hides-502.pdf
https://uploads.strikinglycdn.com/files/ab3f4c52-c30b-4da2-98eb-39060c3a7e72/Hook-Ya-Crook-Tamil-Movie-Songs-Hd-1080p.pdf
https://wiwonder.com/read-blog/17476
https://uploads.strikinglycdn.com/files/f84c6e6c-d98e-4ab9-bf98-8088669147a7/Vector-Strain-Download-crack-with-full-game.pdf
https://trello.com/c/hJGTJ0xR/32-chronicle-2012-dual-audio-720p
https://trello.com/c/1XfsqTas/28-er-mapper-free-download-crack-for-windows
https://trello.com/c/sNtgsNLt/62-embroidery-studio-e3-designing-with-crack-torrent-links
https://trello.com/c/clIH2w7I/43-hypermill-post-processor-fileepub
https://gacapzaichrom.themedia.jp/posts/24395034
http://gepuddverla.unblog.fr/2021/12/01/x-force-keygen-autocad-2015-64-bit-free-download-link/
https://www.pixnet.net/pcard/2803160359f4eb3573/article/800f2c90-5246-11ec-867d-7de0becdbc3a
https://ogadsposse.amebaownd.com/posts/24395032
https://ningterberscalilen.wixsite.com/jourfeperbswis/post/hellboy-games-free-download-pc
https://kit.co/tiatutive/the-dismal-dinner-lemony-snicket-14-zip-ebook-free-torrent-epub
https://sweetithatipon.wixsite.com/olnuerhythes/post/210-060-cbt-nuggets-torrent
https://trello.com/c/36jPvVKY/11-adele-live-at-the-royal-albert-hall-mkv-1080p-35
https://coub.com/stories/2690425-bengali-movie-hd-720p-download-better
https://coub.com/stories/2690424-livre-glectronique-tglgchargeable-updated
https://coub.com/stories/2690421-greg-fishman-jazz-saxophone-etudes-pdf-merge-ophipatr
https://coub.com/stories/2690418-sketchbook-pro-2015-x64-hot-keygen-hot-keygen-install
https://coub.com/stories/2650049-reelsmart-motion-blur-cs6-mac-crack-exclusive
https://coub.com/stories/2650047-peakhour-4-0-5
https://coub.com/stories/2650046-upd-sony-test-disc-yeds-18
https://coub.com/stories/2650044-k-kumar-inorganic-chemistry-pdf-179
https://wakelet.com/wake/fzQJkwvmGzOmLgfrw6gd0
https://wakelet.com/wake/PJTZenzm-cliIinNxdG2h
https://wakelet.com/wake/CJnonq2s0R2I8LqRKIxDD
https://wakelet.com/wake/ZlcIdBAcPfdUvGUXx1Jhk
https://wakelet.com/wake/mozZi80mVCyIXVmjYkh5n
https://wakelet.com/wake/WrRg5UqezJ8VIE-QH9WGM
https://wakelet.com/wake/WW0oDd0d5ywQHmAsxn4_f
https://wakelet.com/wake/kT5X1znnE7deNsRjnx4G2
https://wakelet.com/wake/KQ2MrBN_9rNhQoGllAT-4
https://wakelet.com/wake/Q6GOe6VK7z8zEvm_2B3-V
https://wakelet.com/wake/878IosXTNwSnfASDXEQ8z
https://wakelet.com/wake/IUNbYKciG9jEtMUJam5CA
https://coub.com/stories/2670770-upd-ti-84-plus-cheat-sheet
https://coub.com/stories/2670769-87xop-ghostbin
https://coub.com/stories/2670767-free-airy-2-7-284-activation-code-crack
https://coub.com/stories/2670766-27037412-documentary-history-timeline-shareae-com-zip-best
https://wakelet.com/wake/BfzT5nsRUpfpnpuRng_08
https://wakelet.com/wake/y-668-ZWB77hbyHdER_wC
https://wakelet.com/wake/6wWX42Y-xss47ppCPgDjM
https://wakelet.com/wake/seCyws5hj037IY_CS8UIq
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgMCA4Z3-CAwLEgZDb3Vyc2UYgIDAgNiWswsMCxIIQWN0aXZpdHkYgIDAkLGY-gsMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgID_xanvCgwLEgZDb3Vyc2UYgIDAgJHgowsMCxIIQWN0aXZpdHkYgIDA4I-2swoMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgMDAh9n7CwwLEgZDb3Vyc2UYgICAn4T61wsMCxIIQWN0aXZpdHkYgIDA0Nyc7QkMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgID_heHQCQwLEgZDb3Vyc2UYgICA_5PVzgkMCxIIQWN0aXZpdHkYgIDA4KDFhAkMogEQNTcyODg4NTg4Mjc0ODkyOA
https://coub.com/stories/2784038-kruder-dorfmeister-the-k-d-sessions-torrent-top
https://coub.com/stories/2784037-geekbench-3-license-keygen-26-link
https://coub.com/stories/2784036-link-caryl-churchill-plays-pdf
https://coub.com/stories/2784035-tamil-movies-itunes-1080p-web-dl-dolby-audios-ninja-360-pack-2-53gb-pastehere-host-or-past
https://coub.com/stories/2632237-hot-presonus-studio-one-5-professional-v5-1-0-keygen-application-full-version
https://coub.com/stories/2632236-high-quality-driving-licence-theory-test-book-pdf
https://coub.com/stories/2632235-mapinfo-professional-11-5-full-version-crack-and-patch-patched
https://coub.com/stories/2632233-centrelink-forms-profit-and-loss-elleli
https://coub.com/stories/2718677-exclusive-css-slider-2-1-registration-key-crack
https://coub.com/stories/2718675-fix-infusible-ink-heat-guide
https://coub.com/stories/2718674-consultancy-services-company-profile-pdf
https://coub.com/stories/2718673-igoprimo2013windowsce60downloadexe-ottanej
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgID_l-GZCQwLEgZDb3Vyc2UYgIDAoMig3AgMCxIIQWN0aXZpdHkYgIDA4OXlnQkMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgMCAwYTyCwwLEgZDb3Vyc2UYgICA34upgwgMCxIIQWN0aXZpdHkYgIDAkPLHwAgMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgMCA37uiCQwLEgZDb3Vyc2UYgICAv4P6ugsMCxIIQWN0aXZpdHkYgIDAkPOm-wgMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgIC_wdHNCwwLEgZDb3Vyc2UYgIDAwMebgwoMCxIIQWN0aXZpdHkYgIDA4MDx3wkMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgMDAzrWACgwLEgZDb3Vyc2UYgICA_-S09QsMCxIIQWN0aXZpdHkYgIDAoJGr7woMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgIC_47iKCgwLEgZDb3Vyc2UYgICA_6TWgAoMCxIIQWN0aXZpdHkYgIDA4I6ahQsMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgID_5pyCCgwLEgZDb3Vyc2UYgICA_8DeyAoMCxIIQWN0aXZpdHkYgIDA0Jyj6woMogEQNTcyODg4NTg4Mjc0ODkyOA
https://www.cloudschool.org/activities/ahFzfmNsb3Vkc2Nob29sLWFwcHI5CxIEVXNlchiAgMCAnf2OCwwLEgZDb3Vyc2UYgICAn-S4gQkMCxIIQWN0aXZpdHkYgIDAwJOYrAgMogEQNTcyODg4NTg4Mjc0ODkyOA
https://wakelet.com/wake/F5UbslURH4U8umW0JTmkI
https://wakelet.com/wake/arswpEeFzUE409m2oYPDq
https://wakelet.com/wake/Y0yKRVpWR7OjDX627OILF
https://wakelet.com/wake/vnxhl4_8E6ly6aj_XlMzz
https://trello.com/c/zktzxx1F/17-wrong-turn-3-in-hindi-dubbed-free-download-top
https://trello.com/c/J9OpWDNB/71-the-canterville-ghost-dual-audio-link
https://trello.com/c/jnfnUQbO/24-complete-guide-to-drawing-giovanni-civardi-pdf-free
https://trello.com/c/aGSTGowv/50-install-schwinn-s500-owners-manual-scooter-pdf
https://coub.com/stories/3123147-rabnebanadijodi1moviefulldownload-hot
https://coub.com/stories/3123145-cars-3-english-3-full-movie-download-720p-hd-extra-quality
https://coub.com/stories/3123144-activation-file-delphi-xe5-crack-top
https://coub.com/stories/3123143-hack-minitool-partition-wizard-professional-edition-18-7-2-crack-free
https://coub.com/stories/3098306-top-basstreblebooster11keygen
https://coub.com/stories/3098297-_verified_-productkeyforwindows7ultimatemyid00426oem914120413000
https://coub.com/stories/3098298-drama-keong-mas-dalam-bahasa-jawa104-benverb
https://coub.com/stories/3098295-kerio-control-web-filter-license-crack-elldar
https://coub.com/stories/3058793-marcelo-bielsa-coaching-build-up-play-against-high-pressing-teams-books-pdf-file-better
https://coub.com/stories/3058794-luck-tamil-dubbed-movie-download-2021
https://coub.com/stories/3058795-__exclusive__-autocad-2009-fr-keygen-rar
https://coub.com/stories/3058797-slysoft-clonedvd-2-9-2-0-final-keygen-vallau
https://coub.com/stories/2980918-jorge-cubides-camacho-obligaciones-pdf-download-high-quality
https://coub.com/stories/2980917-studio-linked-vst-maybach-empire-kontakt-5-torrent
https://coub.com/stories/2980916-colt-1911-manufacture-date-serial-number-fix
https://coub.com/stories/2980915-top-witness-to-surrender-by-siddiq-salik-pdf-56-sport-demenziali-rea
https://coub.com/stories/3005375-jriver-media-center-26-0-17-crack-with-patch-2020-gaylyava
https://coub.com/stories/3005372-patched-inflow-inventory-2-5-1-keygen
https://coub.com/stories/3005369-psique-la-enamorada-de-un-dios-pdf-65-olydev
https://coub.com/stories/3005368-allavsoft-video-downloader-converter-3-15-7-6703-keygen-desnikl
https://coub.com/stories/2949283-hd-online-player-mount-blade-with-fire-and-sword-1138-dalnic
https://coub.com/stories/2949282-windows-7-infinium-v-5-2015-x64-pre-activated-team-os-ingejaqu
https://coub.com/stories/2949281-benvista-photo-zoom-pro-v4-1-4-including-crack-iahq76-pipvol
https://coub.com/stories/2949280-_verified_-how-to-remove-password-in-winrar
https://coub.com/stories/2936344-download-link-shameless-season-3-torrents-kickasstorrents
https://coub.com/stories/2936342-vectorworks-2011-crack-mac-os-upd
https://coub.com/stories/2936343-kuchkuchhotahaifull-fixedmovieinteluguhd1080p
https://coub.com/stories/2936341-bayan-ul-quran-by-ashraf-ali-thanvi-pdf-download-__full__
https://coub.com/stories/3113968-dead-frontier-hack-fix-download-14
https://coub.com/stories/3113967-xforce-link-keygen-64-bits-alias-concept-2018-descargar
https://coub.com/stories/3113966-high-quality-microsoft-toolkit-2-4-1-windows-8-and-office-2013-activator-rar
https://coub.com/stories/3113965-exclusive-amtlib-dll-crack-acrobat-xi
https://coub.com/stories/3095616-_verified_-hotarare-aga-deschidere-punct-de-lucrul
https://coub.com/stories/3095612-doubley-custom-kontakt-library-creator-21
https://coub.com/stories/3095615-mp4hindidubbedcocoenglish
https://coub.com/stories/3095614-mapas-argentina-nm7-para-navitel-7-5-patched
https://huntmichelle84.wixsite.com/inarclinex/post/call-of-duty-2-highly-compressed-10mb
https://rosiokro6w.wixsite.com/quimortapo/post/s-w-leopard-10-6-1-10-6-2-sse2-sse3-intel-amd-by-hazard-iso-full-32-professional-key
https://tiphanieworley405m.wixsite.com/snopterfmerpo/post/hd-online-player-blade-runner-workprint-1080p-torrent
https://hickckarifeatban.wixsite.com/platirunes/post/serial-vivax-firmware-19-download-license-latest-exe-full-version
https://nieklinlofulpo.wixsite.com/quichocora/post/activation-prediction-graphic-organizer-pro-full-version-64-download-pc-patch
https://katharinasullivan.wixsite.com/alpredcuanhand/post/tom_clancys_the_division_2_ultimate_edition_uplayrip
https://inlotoranmoodic.wixsite.com/cuschizoter/post/watch-online-ムム慯-ムム林-ム�ム湲-ムツオ-11-at-the-beach-11-p7310653-imgsrc-ru-utorrent-torrent-dual-video
https://annellefigueron456.wixsite.com/reiparsicon/post/abc-free-tv
https://coub.com/stories/3402887-castle-clicker-gem-codes
https://coub.com/stories/3402883-descargar-discografia-de-tarkan-mediafire-work
https://coub.com/stories/3402881-crack-per-autocad-2013-itagolkes-ulrilar
https://coub.com/stories/3402880-verified-biohazard-4-pc-save-games-all-levels-download
https://coub.com/stories/3338765-amategeko-y-umuhanda-ibibazo-n-ibisubizo-pdf-331-werofrod
https://coub.com/stories/3338759-shanti-dynamite-nude-photos
https://coub.com/stories/3338762-easeus-data-recovery-wizard-pro-6-20-exe-download-repack-pc
https://coub.com/stories/3338756-beauty-parlour-course-book-hindi-pdf-link-free-52-standard-mandriva-va
https://wakelet.com/wake/z3X-z18XGUGjomVFG9tKF
https://wakelet.com/wake/ee553-4Jy821fWn2KLPO8
https://wakelet.com/wake/EQuJwlmL7TYHkVCyiPTHG
https://claudetee.com/tee/pirate-booty-pirate-shirt/
https://wakelet.com/wake/PvSj1cqlXJBqVErmQEeLE
https://wakelet.com/wake/E_rGp3MwZcax1Vz1hEgQr
https://wakelet.com/wake/DJPBJhQpdPPjgn7ubWS04
https://www.butterflyty.com/shop/wing-sleeve-top/
https://coub.com/stories/3386498-gta-vice-city-models-folder-12-work
https://coub.com/stories/3386497-free-download-jon-bon-jovi-thank-you-for-loving-me-better
https://coub.com/stories/3386496-the-thor-ragnarok-english-2-full-movie-repack-download
http://mgassociates.sblo.jp/article/186598588.html
Jun 12, 2021 Download the best android apps for christ in song hymnal download. ... Kinemaster: a complete video editor for your smartphone the outbreak of ... The top downloaded are poweramp music player (trial), apple music, zinio ... Download spider man for android for android on aptoide right now! no extra costs.. Buy Bridge Constructor Playground en HRK Game. Tienda n1 en lnea para comprar tus videojuegos favoritos, tarjetas de regalo y software. Asistencia en.... Mar 18, 2021 Bridge Constructor Playground Cracked PC Free Download Repack Full Game with crack key from InstantDown Bridge Constructor... df76b833ed shepcri
https://www.kaggle.com/eraputto/extra-quality-id-pack-pro-9-crack-26
https://www.kaggle.com/pondowncompprim/portable-adobe-illustrator-cc-2018-25-0-1-25
https://www.kaggle.com/tercthestanys/repack-lights-out-english-dubbed-in-hind
https://www.kaggle.com/reatenrephar/exclusive-crazy-kart-2-free-download-pc
https://www.kaggle.com/psychatimin/purani-jeans-english-dubbed-torrent-repack
This product is a 100% ORIGINAL CD-Key (Activation Code) which is sent INSTANTY & directly to your Email and can be directly redeemed or activated on the...
https://grooveliferecords.com/mp3/music/progressive-house/2019/fumikazu-kobayshi-i-would-like-to-escape-from-fukushima/