幻方（我國古代壹般稱縱橫圖）的起源問題在數學史研究中有不少討論，已有些定論。以下是從幾本書上摘錄來的資料。部分方面還需要hanhuixinshi先生及其他書友加以補充。
把河圖、洛書與幻方聯在壹起是在北宋開始的。雖然周易中有“河出圖，洛出書”之言，但究竟河圖、洛書所指為何，早期文獻中從未明確交代過。“宋代初年，……壹位名叫陳摶的華山道士為首的道學家們聲稱：他們發現了真正的河圖與洛書，那是兩幅由圓點組成的圖案。如果我們把其中的圓點對換成數字，列在方格之中，就會得到壹個正方形數陣和壹個十字形數陣。以這兩個圖以及太極圖、先天八卦圖、後天八卦圖等為先導，形成了壹個龐大的圖書學派，從而開創了宋代象數學的新體系。”（俞曉群《數術探秘》261頁）兩圖哪個稱河圖，哪個稱洛書，當時曾發生過爭論。“劉牧《易數鉤隱圖》篇首列出河圖、洛書，前者系由九宮數演化而成……後來蔡元定將兩者加以對換，這壹主張得到朱熹的支持，從此河圖、洛書的形式基本被確定下來：河圖就是天地生成數圖，洛書就是九宮數圖。”（劉鈍《大哉言數》343）。
宋代學者的這種說法對後代產生了深遠的影響。河圖、洛書也由此開始與數學聯系起來。此後許多古代數學著作都把河圖、洛書列於卷首。國外受此影響，有的數學著作也采此說。如出版於1962年的壹本國外組合數學名著開篇寫道：“組合數學，也稱為組合分析或組合學，是壹門起源於古代的數學學科。據傳說，中國的大禹（約公元前2200年）在壹只神龜的背上看到如下幻方……”（吳鶴齡《好玩的數學》1）但此說自提出後也壹直受到質疑。現在，因為沒有可靠證據，持保守態度的學者都不認同此種說法。
下面介紹壹下國內有關幻方起源的其它看法。
壹種把幻方起源推得較早的說法是：幻方起源於商代。此觀點認為甲骨文中的數學內容中已涉及到九宮圖。但此說並不被廣泛認同。因為甲骨文上的數字排列並不完全符合九宮圖，需要對有些數字排列經過位置變換才可得出現在的九宮圖。此外，商代以後數百年間，並沒有找到有關幻方的資料。
更壹般看法是把幻方起源定於漢代或稍早。“從現有的資料看，春秋戰國時代已有了三階縱橫圖，到西漢時則有了較多的應用，成了壹種普遍的知識。”“漢代流行的九宮數已明確列出了三三縱橫圖的數字順序”（《中國數學史大系》第壹卷301）現在所爭論的是：中國古代關於三階幻方的確切記錄最早出現在什麽時候。對此壹方面是做文獻考據工作，從古籍中找相關記錄。這壹點並不困難。困難的是許多古籍成書年代說法不壹，這導致了雖然找出早期出處，但仍然無法確定幻方最初起源。另壹方面，是借助於考古發現。這是極有說服力的證據，但需要碰運氣。
下面有關最初起源的資料基本上摘錄自《中國數學史大系》第壹卷，不再單獨說明。
“過去壹般認為，三階縱橫圖的數字排列順序始見於《大戴禮記·明堂篇》，其中載：‘二九四，七五三，六壹八’。由於人們對於《大戴禮記》的成書年代說法不壹，對於縱橫圖最早出現的記錄也有不同的說法。”（301）“上述提法把三階幻方出現的年代定得都比實際年代要晚得多。考古發掘資料提供的證據表明，早在西漢初年，三階幻方的數字排列形式已為當時的中國學者所熟知。我們從文獻考據方面也可以進壹步說明九宮圖的數字順序早在西漢早期或西漢前就已出現了。”（302）“1977年在安徽阜陽雙古堆西漢汝陰侯墓出土的西漢早期的太乙九宮占盤，為我們提供了早期幻方的重要實物證據……太乙九宮占盤所反映的內容與《黃帝內經·靈柩》‘九宮八風篇’完全壹致……”（303、304）據推算此占盤制作年代為公元前173年。它的出土“可以使我們確知幻方發明年代的下限。”“至遲在西漢時九宮的位置模式已成為占蔔和醫學學說的依據，而九宮數的最早出現當在漢代之前”（305）。書中順便還做了壹個推斷：“九宮占盤的刻劃所反映的內容與《靈柩·九宮八風篇》完全壹致，可以由此推斷《九宮八風篇》為秦、西漢時期或秦漢之前的作品。”（305）我對《內經》壹無所知，錄出來，供知者參考。另壹被多本介紹書籍提到的資料是，《易乾鑿度》壹書卷下記有“太壹取其數以行九宮，四正四維，皆合於十五”，這壹資料也可用於推斷九宮起源，但遺憾的是，此書成書年代也不確定。
再來簡單看壹下國外情況。
古希臘公元二世紀壹本著作中出現了壹個數字方陣，如圖
1 4 7
2 5 8
3 6 9
有人據此推斷古希臘人已經給出了“關於幻方的壹個最早的暗示”。這根據算不上確切證據，因此這種說法未得到壹般認可。
除此之外，最早的有關幻方的資料出於阿拉伯，但已是公元九世紀左右。“在公元九世紀，三階幻方洛書在阿拉伯煉丹術中變得很有名……事實上塔皮特·伊本·庫拉（死於901年）是第壹個討論它的”（李約瑟原著《中華科學文明史》第二卷25）而西方除上面壹則不可靠的證據外，直到十四世紀才有關於幻方的資料出現。
總結：即便用最保守的看法，幻方起源於中國也是可以確信無疑的。阿拉伯與西方出現幻方的時間都很晚。至於他們是否是獨立發現的，在當時知識已可以廣泛傳播的情況下，這種可能性很小。但有可靠的證據表明，後來阿拉伯與西方的某些有關幻方的研究成果又反過來傳入中國。如1956年西安市郊出土了1278年阿拉伯學者紮馬魯丁為西安王推算歷法期間所作的“東阿拉伯數字”的鐵制六階縱橫圖。據稱此文物現存於陜西省博物館（hanhuixinsh先生回復之貼中提到“上世紀五十年代發現過壹方古阿拉伯數字的石刻幻方”大約就是指此幻方；不過，先生貼中提到“早幾年在上海洋浦工地又發現過壹塊明朝的阿拉伯數字幻方玉掛飾”，不知所指，先生如果有資料可以補充壹下）。另外，丟勒《憂郁》畫作中出現的四階幻方在1878年由英國人傅蘭雅傳入中國。順便指出，此幻方下面出現的15、14聯起來恰好為丟勒《憂郁》壹畫創作的時間。這似乎不是巧合，而是丟勒有意為之。