先问是不是，再问为什么？
这个世界有很多概念并没有被充分诘问，有很多结论都是似是而非的，就拿这个问题来说：
1、【外国人都说】和【天下乌鸦一般黑】一样，是一个【全称判断】，【全称判断】的标准是非常严格的，一个反例就能推翻。
退而求其次，就算提问的人说的是「大部分外国人」，但问题是提问的人有统计过吗？？
确实有外国人认为中文，准确点说是汉语很难学，但是很多中国人也觉得英文、法文难学，但能不能说【为什么中国人都说，英语（法语）是是世界上最难的语言？】
其实，在所有教育科目中，学习外语是要耗费非常高的个人成本和社会成本的。学好一门外语，对全世界成年人而言，都是非常有难度的。
前面说了，不能随便接受一个似是而非的结论，其实看似简单的问题，深究起来都是学问——总体来说，语言和难度的关系，也就是学习语言和学习成本（经济）的关系，有一个专门的学科进行研究，叫做语言经济学（Language Economics）：
研究范围比如——学什么语言可以提高收入、学习语言的社会教育成本、个人的经济、时间成本等等，
想了解可以在网上寻找相关信息，比如这本书：
2、提问说【中文是全世界最难的语言】，但凭什么说中文是世界最难的语言？
以什么标准来衡量，如何量化？研究这个问题的人，如果不是一个团队，是一个学者的话，起码要懂包括中文在内几种语言吧，不然如何比较，怎么知道那种最难？
美国外交学院发表的统计研究报告，以英语为母语的人，学习汉、日、韩的难度都在5级，精通需要付出2200小时的时间学习，而学习西班牙语、葡萄牙语只要600个小时。
但是需要注意的是，这个排名是以西方人的基准来衡量的，西方人的语言都在印欧语系下的日耳曼语族和拉丁语族，跨语系当然是难学的。
比如：英语母语者最容易学的葡萄牙语和西班牙语都属于拉丁语族（树状图）：
以社会语言学（Sociolinguistics ）的标准来看，它们毫无疑问是两种语言（language）。
但是，葡萄牙语和西班牙语能一定程度上的互通，因为它们都是古拉丁语的地域变体，如果以语言学中的方言连续体（dialect continuum）和相互理解性”（mutual intelligebility）的标准来看，它们的关系就像中国河南话和四川话。
所以，欧洲人掌握几门西方语言很正常，就跟中国人说说几种方言一样。汉语语族下的七大方言（dialect），粤语、吴语、北方官话等等，就相当于日耳曼语族和拉丁语族下的语言（language）。
下面两图是【汉藏语系】中分支之一【汉语族】和【中国的方言地图】
只不过中国一直以来都是一个大一统的民族国家，西方第一个民族国家是1143年独立的葡萄牙。而语言（language）这一概念，主要是指社会语言学上的概念。
我看了一下其他答主的回答，有的说的中文有精细微妙的意义，外国人懂不了。
但是，这种语言微妙差别，全世界所有语言都存在呀~
经常有在外国生活了很多年的留学生、移民在网上倾诉，融入不到白人圈子，很大一个原因是白人语言、文化中的很多【梗】，理解不了，没办法移情、共鸣。人家哈哈大笑，你根本不知道笑点何在，是非常尴尬的！
（我只懂一点英语，能马马虎虎的看文献，口语很渣，属于没什么语言天赋的【压线狗】。下面的比较分析，我都是以英语和现代汉语普通话为标准，不再重复。）
说我记得的两个污一点的英语例子：
bush和Vienna
【bush】本义是【灌木丛】或者【浓密的草丛】，美国前总统的姓氏bush，相当于日本人本田，松下之类的姓氏，但是又可以表示【&阴**毛】，
【Vienna】是奥地利首都维也纳，能联想起高大上的维也纳金色大厅？但在英语中，这个词可以表示【香肠】，也可以表示男性的【@鸡*鸡】。
别的语言我也不懂，我只知道英语在语义上的微妙性，和词源上的有趣性，也许没有汉语历史悠久，但并不比中文差。
有兴趣想了解的可以参考这本书：
我想汉语给外国人最大的困扰就是汉语的「四声」，古代汉语更麻烦了，有九个调。
普通话的四声和调值：
而英文只有两个调：「重读」和「不重读」，所以，欧美人说「外国人」说成「歪果仁」。
有没有发现外国人念字母表跟中国不一样：
中国人念：哀1逼1虽1低1
外国人念：爱4闭4穗4地4
因为英语念字母表都是默认的「降调重读」，也就是用我们「四声」读。而中国人习惯用【一声】读。
汉语之所以声调多，是因为汉语词汇都是单音节的特点，而单音节导致同音词较多，同音词较多，就需要【声调】来区别，以增加语音信息的冗余度。
而英语用音位来增加语音信息冗余度，进行区别，所以，单音节词较少。
这样英文在造词方面，逻辑性就比汉语差一点，因为要兼顾「音位的区别」。要造一个新词，要么特别的长，要么就是逻辑性稍差。
比如：化学符号，中文造词肯定更胜一筹：
高锰酸钾 potassium hypermanganate、potassium permanganate
三氯甲烷 trichloromethane
四氯化碳 perchlormethane、carbon tetrachloride
四氢呋喃 tetrahydrofuran
但是，但这只是相对而言，不等于英语造词毫无逻辑，英文词根、词缀造词也有规律。背过《新东方》的小伙伴应该都知道。
所以，【汉语四声】对外国人确实很头疼，但是你不能说，这就是汉语比其他语言难学的原因，根本就不是。
每一种语言都有独特的发音，波兰语有一种喉咙发出的声音，俄罗斯语有一种嘴唇发出颤音，都很难发，英文中有些汉语中没有的音位，比如【θ,ð,ʒ,】汉语中没有，中国人发音比较难。
而中国各地方言也有各自的发音特点，比如：粤语、吴语都有入声，福建方言很难区分普通话中的声母【F、H】，湖南方言很难区分声母【N、L】
我们中国人学英语有多少人学了十几年，到头来是哑巴英语？能不能说英语是世界上最难的语言？
综上所述，结论是：
1、这个问题是基于个人经验和人云亦云，在没有更多证据以前，是不成立的。
2、学好一门外语，对任何成年人来说，都是有难度，这个难度因人而异，因地而异、因母语不同而异。无法诉诸统一的标准进行量化判断。
3、中文相对来说也许是比较难的语言（我个人猜测应该是学好汉字对外国人很难），除非我看到更有力的研究和统计数据，否则，我不会下判断【中文是世界上最难学的语言】。
最后，说句题外话：
现在在中国的外国人中，利用我们的虚荣心，靠讨好我们混饭吃，比如：知乎上被揭发的伊朗妹子，天天变着法的赞美中国、讨好中国网友，收获了几万粉丝。
你说他和他老公喜欢中国，男的冒充英国伊顿公学毕业生，女的冒充伊朗裔加拿大人，被揭发以后还要骂质疑的网友是【支那人】。我就想问，真的那么喜欢中国，男的为什么不冒充黄冈中学？女的为什么不冒充来自新疆少数民族的加拿大人？
我在他们的回答下质疑一句，几十个人骂我，真TM的没办法，还是以理性著称的高B格网站。
我想，我对中国文化历史的了解和喜爱，是高于平均水平的，我并不否认伟大中国人民，所取得的伟大成就。
但是，我们不要动不动以外国人说如何如何，或沾沾自喜，或捶胸顿足，这正是不强大的一种表现。
也别动不动【中文最吊炸天、最好听、最美丽的语言】，问题这些价值判断：好听、美丽怎么量化？你懂几门外语？你不懂的话，你怎么知道？
任何国家的语言都有很丰富的历史文化内涵，所以，这个问题我们不妄自菲薄，也不妄自尊大，平常心看待就行了。
我个人相信中国复兴是个大概率事件，也许那一天，我们就跟全盛时期的美国人一样，批评毫不在意，赞美见多不怪，你批评也好，赞美也罢，都是事实——因为我们是【浪波湾】，不是耍嘴皮子得来的。