此後的半年內，大約有二十萬東歐人通過奧地利巴伐利亞走廊來到萊茵定居由於德意志各聯邦間無邊防，而除了萊茵，其他聯邦又不願意爲了移民掏錢，所以萊茵不得不把補貼中的相當部分變爲在萊茵境內的免費資源供給，以防止移民跑去其他聯邦。
由於有最初的篩選，這些人的平均素質還高於萊茵本土普通公民，其中不乏知識分子、中產階級甚至中小資本家。
隨着大移民計劃的順利推進，上萬名猶太人從東歐遷入萊茵，萊茵金融市場上的資金變得充裕起來。謝綰將在歐洲各國滯銷的蘇伊士運河公司股票退市，專心致志面向東歐猶太人募資。在羅斯柴爾德的幫助下，謝綰前後募得了七百萬英鎊，合九千二十百萬馬克，比預算稍微多一些。
僅有充足的資金與先進的科學技術就想開挖運河是不夠的，還需要大量的勞動力進行作業。
爲此交通大臣斯蒂芬森主持制定了蘇伊士運河公司工作規章，費爾巴哈代表萊茵方向埃及提出了派徵民夫的要求，埃及總督阿里帕夏根據雙方協議，開始徵發徭役。
1831年9月25日，謝綰在蘇伊士運河的北起點日後的塞得港親自揮下了第一鎬，象徵着蘇伊士運河正式開工。開工儀式上的衆人喜氣洋洋，卻沒有想到這一工程最終將長達八年，超過四百萬埃及農民被迫背井離鄉，在茫茫沙漠中進行艱苦卓絕的勞動。
所有被派徵徭役的埃及農民先要到尼羅河三角洲東部城市宰加濟格集中，接受身體檢查。老弱病殘被篩除，身強力壯的青年被挑選出來，每人發個袋子，裏面裝着乾麪包和水。這是他們接下來四天內的全部口糧，然後他們會被用繩子一個個栓起來，徒步走上四天抵達蘇伊士運河的施工現場。
從第一批開始，民夫們都採用這種流程，每月一換班。
參加勞動的埃及民夫視其年齡每天可得到不等量的麪包，除此之外很少能領到別的喫的，也沒有可以替換的衣物與鞋子，勞動中“違規”就什麼都領不到。
由於萊茵國內製造業成本飛漲，很多相對先進的工程設備也沒法到位面對免費的勞動力，謝綰也實在說服不了股東們去購買昂貴的蒸汽機設備。最後大量工作都是由埃及民夫靠着一把鎬一個鬥完成的。
運河工地的工作環境很惡劣，尤其飲用水缺乏。還是由於投資太大，謝綰不得不批准董事會關於“取消開鑿飲用水渠”的建議，不再建設此前規劃的一條飲水渠，這後來很可能導致了數以萬計的民夫因缺水相關疾病死亡；
安全保障和醫療條件當然也基本談不上。運河開挖期間事故頻發，常有埃及民夫被流沙活埋，其他各種傷害事故更是常見。
這也導致後來工地上結膜炎、結核病、天花、肝炎與肺炎等各種疾病肆虐，成爲勞動力損耗的重要原因之一。期間曾有一次霍亂流行，大量民夫上吐下瀉至死，由於死亡人數太多，甚至找不到健康的民夫給死者收屍。
到運河完工時，因飢渴、傳染病與事故等各種原因死亡的埃及民夫數目達到了十二萬，他們中許多人的屍體無人認領或已無法辨認，最終被草草掩埋在了沙漠裏，或被拋入了運河中。
堅決反對蘇伊士運河項目的英國，雖然並不瞭解埃及民夫的整體情況有多嚴重，但他們還是敏銳的抓住了這個機會，項目一開工就藉着“徭役”的事情，譴責運河公司和萊茵資方強制埃及農民勞動的做法極爲不人道。
這讓謝綰不勝其煩，不過阿里帕夏和董事會、大股東們並不覺得有什麼了不起的。在看到英國人的碎碎念之後，阿里帕夏還故意親自視察蘇伊士運河工地，並宣佈加徵兩萬埃及民夫來加速建設進度。
心有不甘的英國又利用埃及民夫的不滿情緒，經由運河周邊的貝都因人部落與海路向運河民夫提供武器，煽動民夫鬧事。期間曾有過一次大規模暴亂，運河公司不得不向埃及政府求援，最終在軍隊的幫助下平息了事態。
在這樣的大事刺激下，謝綰也坐不住了，他在董事會上提出一個補貼方案：
運河公司每月給民夫約合一芬尼的補貼，而不滿十二歲的童工則是半芬尼此時在萊茵的普通產業工人，一年大約可以領到十到二十馬克的工資，一馬克是一百芬尼。
即使補貼很微薄，但因爲民夫人數太多，股東們仍然要求根據蘇伊士運河公司制定的工作規章，對違規民夫進行補貼扣罰。曠工者會被嚴懲，還要根據其曠工的惡劣情況扣補貼，如從工地逃跑者每天會被扣掉三分之一芬尼。
謝綰看到在董事會被刪改了一次又一次才勉強通過的補貼方案時，也有些不忍，但一看到每月爲此新增的支出，馬上就閉着眼簽了名。
萊茵方駐埃及代表費爾巴哈對在埃及發生的一切深有感觸，將自己的工作筆記和日記彙編成蘇伊士筆記。但當謝綰大致瀏覽過一遍之後，立即買下這本書的版權，並嚴厲禁止他出版發行這本書或者公開其中任何數字或許只有百年之後的歷史學家們發現這本書，才能走近那些沙漠中的亡魂吧。
謝綰這麼做也是實在沒辦法。如果這本書面世，不僅像英國那種綠頭蒼蠅會逐臭而來，其他國家也會把謝綰個人、運河公司、萊茵乃至德意志罵的不成人形。